E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Scala学习指南
CJFS: Concurrent Journaling for Better
Scala
bility——论文泛读
FAST2023Paper分布式元数据论文汇总问题和挑战重量级的EXT4可扩展性较差,由于日志存在两个限制:日志提交是一个严格的串行活动;日志提交使用原始页缓存条目,而不是其副本,随后任何对正在进行的页缓存条目的访问都将被阻塞。现有方法局限性ScaleFS[15]为每个CPU内核[6,8]分配一个正在运行的事务,其中每个内核都分配了单独的文件系统分区。Son等人[44]对日志事务采用了无锁数据结构
妙BOOK言
·
2024-02-02 18:57
论文阅读
论文阅读
文件系统
flink-cdc 使用
接上一篇文章用上cdc基于flink-
scala
1.14当前cdc最新版本2.2.1com.ververicaflink-connector-mysql-cdc2.2.1看官方文档是和flink13.5
csncn21
·
2024-02-02 17:46
flink
flink
scala
PySpark(一)Spark原理介绍、PySpark初体验及原理
Spark简介ApacheSpark是用于大规模数据(large-
scala
data)处理的统一(unified)分析引擎,其特点就是对任意类型的数据进行自定义计算。
独憩
·
2024-02-02 13:11
PySpark
python
分布式
大数据
spark
轨迹平滑算法_参考资料
python或者
scala
都行【自动驾驶】运动规划丨轨迹规划丨基于改进Dijkstra算法的轨迹平滑方法-知乎【自动驾驶】运动规划丨轨迹规划丨贝塞尔Bezier曲线-知乎使用贝塞尔曲线完成轨迹平滑预测-
Matrix70
·
2024-02-02 13:10
轨迹大数据智能处理
数据分析
spark
大数据
【Spark实践6】特征转换FeatureTransformers实践
Scala
版--补充算子
本节介绍了用于处理特征的算法,大致可以分为以下几组:提取(Extraction):从“原始”数据中提取特征。转换(Transformation):缩放、转换或修改特征。选择(Selection):从更大的特征集中选择一个子集。局部敏感哈希(LocalitySensitiveHashing,LSH):这类算法结合了特征转换的方面与其他算法。FeatureTransformersIndexToStri
周润发的弟弟
·
2024-02-02 13:39
Spark机器学习
spark
scala
大数据
[
Scala
学习笔记] Spark开发小笔记
Spark开发小笔记:从0开始的Spark建图生活持续更新中……0.开发平台Zeppelin支持多种语言,默认是
scala
(背后是sparkshell),SparkSQL,Markdown和Shell。
Rinnki
·
2024-02-02 13:39
Scala笔记
学习笔记
Scala
Spark
图
Scala
与spark 7.23
例如:@transientvalsparkContext:SparkContext,
Scala
多行字符串之stripMargin方法https://www.jianshu.com/
qq_34872215
·
2024-02-02 13:09
spark
【SparkML实践5】特征转换FeatureTransformers实战
scala
版
本节介绍了用于处理特征的算法,大致可以分为以下几组:提取(Extraction):从“原始”数据中提取特征。转换(Transformation):缩放、转换或修改特征。选择(Selection):从更大的特征集中选择一个子集。局部敏感哈希(LocalitySensitiveHashing,LSH):这类算法结合了特征转换的方面与其他算法。本章节主要讲转换1FeatureTransformersTo
周润发的弟弟
·
2024-02-02 13:08
Spark机器学习
spark-ml
scala
开发语言
【livy】Spark Livy深究
什么是livyLivy的特点Livycloudera开发通过REST来连接、管理spark的解决方案从任何地方提交job使用交互式的
Scala
、Python语言与远程的spark集群进行通信无需更改代码
小赵要加油
·
2024-02-02 13:07
livy
大数据
分布式
【SparkML实践4】Pipeline实战
scala
版
Pipeline中的主要概念MLlib标准化了机器学习算法的API,使得将多个算法组合成单一的管道或工作流程变得更加容易。本节介绍了PipelinesAPI引入的关键概念,其中管道的概念主要受到scikit-learn项目的启发。DataFrame:这个机器学习API使用来自SparkSQL的DataFrame作为机器学习数据集,它可以包含多种数据类型。例如,一个DataFrame可以有不同的列存
周润发的弟弟
·
2024-02-02 13:36
Spark机器学习
spark-ml
scala
开发语言
【IC设计】Windows下基于IDEA的Chisel环境安装教程(图文并茂)
Chisel环境安装教程第一步安装jdk,配置环境变量第二步安装sbt,不用配置环境变量第三步安装idea社区版第四步离线安装
scala
的idea插件第五步配置sbt换源1.切换目录2.创建repositories
农民真快落
·
2024-02-02 10:02
ic设计
ic设计
scala
chisel
一生一芯
risc-v
spark题06
4
scala
中trait特征和用法?5.redis和memcache的区别?6.列举Spark中常见的端口,分别有什么功能?8.Spark官网中,你常用哪几个模块?11.yarn的原理?
博弈史密斯
·
2024-02-02 09:59
11.
scala
函数进阶
目录概述函数
scala
函数和方法的区别第一种第二种方法转函数函数柯里化结束概述函数vs方法1.定义方法:def函数:=>2.方法本质上是一个特殊的函数3.函数是一等公民,函数可以当做值来传递,方法的参数
流月up
·
2024-02-02 02:22
scala
scala
函数
方法
柯里化
12.
scala
下划线使用总结
目录概述实践变量初始化导包引入方法转变为函数用户访问Tuple元素简化函数参数传递定义偏函数变长参数结束概述实践变量初始化在
Scala
中,变量在声明时需要显式指定初始值。
流月up
·
2024-02-02 02:22
scala
scala
下划线
使用
总结
程序员/设计师能用上的 75 份速查表
,包括:jQuery、HTML、HTML5、CSS、CSS3、JavaScript、Photoshop、git、Linux、Java、Perl、PHP、Python、Ruby、RubyonRails、
Scala
foveni
·
2024-02-01 20:13
大数据之Spark
HadoopMapReduce所具有的优点但不同于MapReduce的是Job中间输出结果可以缓存在内存中,从而不再需要读写HDFS,减少磁盘数据交互因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的算法Spark是
Scala
进击的-小胖子
·
2024-02-01 12:37
大数据
spark
big
data
scala
大数据
实时大数据
机器学习数学基础
5、正态分布(高斯分布)6、向量的外积(叉积)7、向量的内积(点积)8、超平面(H)1、标量、向量、矩阵、张量标量、向量、矩阵和张量是线性代数中不同维度的数学对象,它们之间的区别在于维数和结构:标量(
Scala
r
对许
·
2024-02-01 11:26
基础理论
机器学习
概率论
线性代数
Spark SQL 中org.apache.spark.sql.functions归纳
SparkSQL中org.apache.spark.sql.functions归纳注意,这里使用的是
scala
2.12.12,spark版本是最新的3.0.1版本1.Sortfunctions/***Returnsasortexpressionbasedonascendingorderofthecolumn
闻香识代码
·
2024-02-01 09:13
spark
scala
dataframe
apache
spark
大数据
分布式计算
scala
spark
国际产能合作领军人才培养计划2020年6月
学习指南
课程主题:海外实务操作与指南授课主题:一、企业海外税务筹划、投资架构设计二、国际商务谈判三、海外投资法律、合规管理四、企业跨国经营成功实践教学目标:帮助学员提升海外实务操作技能,提升学员的国际化水平。同时为学员、企业与优质第三方服务机构搭建一个高效、高质的一站式沟通交流平台。课程要点:国际产能合作境外承包工程情况国际承包工程联合体理论与实操“一带一路”沿线国家资本市场环境海外投资架构与税务考量国际
杜新敏_060f
·
2024-02-01 03:31
Scala
的JDBC操作
scala
对JDBC的操作与Java的类似,这里以连接mysql为例如果新建的的maven项目,直接在xml文件中配置以下代码即可,版本号可根据自己的mysql版本调整mysqlmysql-connector-java5.1.38
简单不过l
·
2024-01-31 19:38
Scala
jdbc
mysql
scala
window环境下安装spark
0环境先给出安装好后的各个软件版本:win1064bitjava1.8.0
scala
2.12.8
FTDdata
·
2024-01-31 17:06
Scala
核心编程 第一章—
Scala
语言概述
一、
Scala
语言解释1.什么是
Scala
语言Spark—新一代内存级大数据计算框架,是大数据的重要内容。Spark就是使用
Scala
编写的。因此为了更好的学习Spark,需要掌握
Scala
这门语言。
我是星星我会发光i
·
2024-01-31 15:47
Scala核心编程
第一章
Scala语言概述
Scala
代码规范
原文链接https://github.com/databricks/
scala
-style-guide
Lonely_Acmen
·
2024-01-31 14:27
100天自学大数据:我用
Scala
复习学统计基础公式
适合人群已经忘记统计学基础的
Scala
刚刚入门的通过对统计学入门公式的实践编程,你可以对
Scala
做到入门,其他语言也类似!
金哥数据分析
·
2024-01-31 11:00
CVE-2020-17518 flink任意文件上传漏洞复现
漏洞描述ApacheFlink是由Apache软件基金会开发的开源流处理框架,其核心是用Java和
Scala
编写的分布式流数据流引擎。
亚瑞塔斯·D·紫耀
·
2024-01-31 10:53
flink
网络安全
Apache Flink -任意文件写入漏洞复现(CVE-2020-17518)
1、产品简介ApacheFlink是高效和分布式的通用数据处理平台,由Apache软件基金会开发的开源流处理框架,其核心是用Java和
Scala
编写的分布式流数据流引擎(简单来说,就是跟spark类似)
OidBoy_G
·
2024-01-31 10:52
漏洞复现
apache
flink
安全
web安全
网络安全
《Docker极简教程》--前言--本书的目的和目标
目的:本书的目的是为读者提供一个简明扼要、易于理解的Docker
学习指南
,使他们能够迅速掌握Docker技术的基础知识和实际应用。
喵叔哟
·
2024-01-31 10:06
Docker极简教程
docker
容器
关于 IntelliJ IDEA 中 Schedule for Addition 的问题
此外,它还支持Kotlin、Groovy、
Scala
和Android开发等多种语言和框架。
Roseann YAN
·
2024-01-31 08:50
intellij-idea
java
ide
【架构论文】SCALE: Secure and
Scala
ble Cache Partitioning(2023 HOST)
SCALE:Secureand
Scala
bleCachePartitioning摘要LLC可以提高性能,但是会引入安全漏洞,缓存分配的可预测变化可以充当侧信道,提出了一种安全的缓存分配策略,保护缓存免受基于时间的侧信道攻击
Destiny
·
2024-01-31 08:36
硬件架构
架构
安全架构
安全
硬件架构
系统安全
缓存
qt5-入门
参考:qt
学习指南
Qt5和Qt6的区别-CSDN博客Qt学习之路_w3cschoolQt教程,Qt5编程入门教程(非常详细)本地环境:win10专业版,64位技术选择Qt5力推QML界面编程。
陆沙
·
2024-01-31 01:28
qt
qt
开发语言
Spark RDD(弹性分布式数据集)
RDD是通过Hadoop文件系统(HDFS)中文件或者驱动程序中现有的
Scala
集合开始,然后对其进行转换来创建的。1.2RDD特性*-Alisto
JOEL-T99
·
2024-01-30 15:15
BigData
spark
RDD
初识 RDD 弹性分布式数据集(Resilient Distributed Datasets)
可以让用户显式地将数据存储到磁盘和内存中,并能控制数据的分区.同时,RDD还提供了一组丰富的操作来操作这些数据.在这些操作中,诸如map,flatMap,filter等转换操作实现了Monad模式,很好地契合了
Scala
腹黑客
·
2024-01-30 15:42
spark
spark
flink sql 语法校验
flinksql语法校验说明:apacheflink源码的校验方式1新增依赖包org.apache.flinkflink-table-planner-blink_${
scala
.binary.version
老鼠扛刀满街找猫@
·
2024-01-30 10:20
flink
flink
sql
java
数据写入HBase(
scala
)
packagesourceimportorg.apache.hadoop.hbase.{HBaseConfiguration,TableName}importorg.apache.hadoop.hbase.client.{ConnectionFactory,Put}importorg.apache.hadoop.hbase.util.Bytesobjectffff{defmain(args:Arr
莫噶
·
2024-01-30 07:51
HBase
hbase
数据库
大数据
Scala
入门01
Spark入门1.入门spark采用
Scala
语言开发Spark是用来计算的
Scala
掌握:特性,基本操作,集合操作,函数,模式匹配,trait,样例类,actor等内容。
chde2Wang
·
2024-01-30 07:48
scala
开发语言
后端
Spark入门02-Spark开发环境配置(idea环境)
archive.apache.org/dist/spark/spark-2.1.2/https://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-3.3.4/2、新建
Scala
chde2Wang
·
2024-01-30 07:41
spark
大数据
分布式
php使用雪花算法
雪花算法的由来:一:Twitter使用
scala
语言开源了一种分布式id生成算法——SnowFlake算法,被翻译成了雪花算法。
haijingjituan
·
2024-01-30 03:06
开发语言
php
算法
最全的RocketMQ
学习指南
,程序员必备的中间件技能
一、简介RocketMq是阿里开发出来的一个消息中间件,后捐献给Apache。官网上是这样介绍的:ApacheRocketMQ™isaunifiedmessagingengine,lightweightdataprocessingplatform.RocketMQ是一个统一的处理消息引擎,轻量级的数据处理平台。低延迟,在高压下,1毫秒内的响应延迟超过99.6%。高可用,具有跟踪和审核功能万亿级消息
丰极
·
2024-01-30 03:53
后端
mq
中间件
你们还在用
Scala
元组Tuple234..? Outer啦
为什么这么说呢,难道我自己多年使用的方式错了嘛,是的,你没错,我错了,哈哈,主要原因是使用Tuple的时候容易搞错对象,Tuple2的时候还知道第一个参数跟第二个参数的意思,后面多来个几参数你会记得_1._2._3._4代表的意思是什么吗?代码结构也不好维护,所以请结束使用Tuple吧请开始你的表演正常使用Tuplevallist=Array((1,2,3,4),(5,6,7,8))list.fi
kikiki2
·
2024-01-29 18:37
Python初学者机器
学习指南
机器学习是人工智能领域的一个突出主题,现在已经成为人们关注的焦点。这个领域可能提供一个有吸引力的机会,并且开始其职业生涯并不像乍看之下那么困难。即使你没有数学或编程****经验,也不是问题。你成功的最重要因素纯粹是你自己的兴趣和学习所有这些东西的动力。如果你是一个新手,你不知道从哪里开始学习,为什么你需要机器学习以及为什么它最近越来越受欢迎,你来到了正确的地方!我收集了所有必要的信息和有用的资源,
李穆
·
2024-01-29 16:40
spark快速入门java_Spark 快速入门
首先我们介绍了通过Spark交互式shell调用API(Python或者
scala
代码),然后演示如何使用Java,
Scala
或者Python编写独立程序。你可以查看Spark编程指南了解完整的参考。
陈兰香
·
2024-01-29 11:54
spark快速入门java
Spark入门01
可以计算:结构化、非结构化,半结构化的数据结构,支持使用Python,Java,
Scala
、Sql语言开发应用程序计算数据。
chde2Wang
·
2024-01-29 11:53
spark
大数据
分布式
“敏态业务”新说
是较新流行的关于传统业务互联网化的描述,而其背后主要想表达的意思大多被理解为业务可随时无感扩缩,以适应在时间和空间两个维度上都无处不在的、碎片化的、精细化的新一代业务数字化转型的要求,而在技术上也大多被映射为微服务化的应用与
Scala
bleSQL
何小朝
·
2024-01-29 10:15
大数据
分布式数据库
TiDB
数据库
database
OpenCV 4 - 图像操作
1读写像素1-1读写单通道像素读一个GRAY像素点的像素值(CV_8UC1)方法一:
Scala
rintensity=img.at(y,x);方法二:
Scala
rintensity=img.at(Point
江凡心
·
2024-01-29 09:42
OpenCV学习笔记
opencv
人工智能
计算机视觉
Vite 使用
学习指南
Vite的基本概念和特点Vite是什么,它的主要特点是什么Vite是一个基于ESmodules的前端构建工具,它的主要特点包括:快速的冷启动:Vite采用了基于浏览器原生ES模块的开发模式,可以在开发时快速启动应用,减少了冷启动时间。按需编译:Vite可以根据需要动态地编译模块,而不是像传统的打包工具一样将所有模块都打包到一个文件中。热更新:Vite支持热更新,可以在开发时实时更新修改后的代码,提
叶落风尘
·
2024-01-29 00:48
前端
webpack
前端
javascript
Vite
学习指南
那本课程都适合哪些人群呢?想要学习前端工程化,在新项目中投入使用Vite构建工具的朋友Webpack转战到Vite的小伙伴前端架构师们,可以充实自己的工具箱当然如果你没有项目相关开发经验,也可以从本课程中受益,让你开阔眼界,将你学到的前端知识融会贯通,应用到你的实战中。2.1什么是ViteVite(法语意为"快速的",发音/vit/,发音同"veet")是一种新型前端构建工具,能够显著提升前端开发
秋の本名
·
2024-01-29 00:17
状态模式
clang-format
https://www.cnblogs.com/tudou/p/13322854.html代码格式化YAML:1:4:error:Gotemptyplain
scala
r.clang-format文件的编码格式必须是
三皮仔
·
2024-01-28 22:29
杂项
clang-format
spark 内核源码剖析七:Work工作原理
image.pngWorker.
scala
caseLaunchDriver(driverId,driverDesc)=>{logInfo(s"Askedtolaunchdriver$driverId")
雪飘千里
·
2024-01-28 18:08
【深度学习实验】TensorBoard使用教程【
SCALA
RS、IMAGES、TIME SERIES】
、环境二、TensorBoard1.使用TensorBoardXa.安装TensorBoardXb.使用示例2.PyTorch内置的TensorBoard3.启动TensorBoard服务三、实战1.
SCALA
RS
QomolangmaH
·
2024-01-28 11:16
深度学习实验
深度学习
人工智能
tensorboard
数据可视化
pytorch
《师说》(一)
学习指南
学习目标:1、整体感知文本。2、积累文言知识,掌握实词“传、师、从”,虚词“以、也、则、于、乎、所以”等词语的意义和用法,区别古今异义的词语。3、了解“说”的文体。学法指导:1、通过诵读熟悉文章内容,借助对比论证的方法,背诵文章。2、学习做知识卡片,归纳重点字词、句式,积累本课的文言知识。可参看示例。3、借助初中学过的《爱莲说》《捕蛇者说》等文章,再次熟悉本文写作的特点,即对社会上某些问题陈述观点
瑞特兹
·
2024-01-28 11:56
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他