E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Scala集合操作
Flink 本地单机/Standalone集群/YARN模式集群搭建
下载地址:下载Flink的二进制包点进去后,选择如下链接:解压flink-1.10.1-bin-
scala
_2.12.tgz,我这里解压到soft目录[root@hadoop1softpackage]#
程序猿进阶
·
2023-12-16 20:26
Flink
flink
大数据
scala
的Trait
Trait基础
scala
中的Trait和Java中的接口(interface)极其类似接口是彻底的抽象类,所以在Trait中方法是抽象方法(abstract)不给出具体的方法体。
起个什么呢称呢
·
2023-12-16 18:55
【星环云课堂大数据实验】kafka消息发布与订阅
、实验目的五、实验步骤5.1、创建KafkaTopic5.2、Kafka消息发布5.3、Kafka消息订阅六、实验感悟一、Kafka概述Kafka是由Apache软件基金会开发的一个开源流处理平台,由
Scala
生生不息~
·
2023-12-16 17:12
大数据
大数据
kafka
分布式
Scala
学习笔记番外篇-学习曲线和应用前景
valobjecttraitpatternmatching类型推断map/filter/flatMapfor表达式implicit可能遇到的问题有:无法忍受它的编译速度、各种类库的缺失、以及各种各样的编译错误进阶因为那些真正让
Scala
Chris刘
·
2023-12-16 12:54
Scala
【2019-06-05】隐式转换和参数
隐式转换
scala
里一个核心集合特质是RandomAccessSeq[T],描述了建立在类型T的元素上的随机访问序列//定义从string到实际为RandomAccessSeqobjectString2Seq
BigBigFlower
·
2023-12-16 08:33
RocketMQ系统性学习-RocketMQ领域模型及Linux下单机安装
ActiveMQ、Kafka、RocketMQ性能方面:三种MQ吞吐量级别为:万,百万,十万消息发送时延:毫秒,毫秒,微秒可用性:主从,分布式,分布式扩展性方面:水平伸缩能力:均支持技术栈:Java,Java/
Scala
无敌少年小旋风
·
2023-12-16 08:58
RocketMQ
rocketmq
学习
linux
Kafka快速实战与基本原理详解
,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、Storm/Spark流式处理引擎,web/nginx日志、访问日志,消息服务等等,用
scala
Memory_2020
·
2023-12-16 06:08
中间件
kafka
分布式
生产环境_使用
Scala
语言_Spark编写灵活的SQL查询生成器
//判断id是否为空validEmpty=id.isEmpty//判断other是否为空valotherEmpty=other.isEmpty//根据不同情况拼接SQL语句valsql=if(idEmpty){//如果id为空if(otherEmpty){//如果other也为空s"""select*from`$table1`where`$time`between'$startTime'and'$
Matrix70
·
2023-12-16 05:35
SQL
数据分析与处理
Spark
scala
spark
sql
pyspark on yarn
背景描述pyspark相当于python版的spark-shell,介于
scala
的诡异语法,使用pysparkonyarn做一些调试工作还是很方便的。配置获取大数据集群配置文件。
骑着蜗牛向前跑
·
2023-12-16 03:34
大数据
pyspark
on
yarn
python
大数据
一篇文章带你搞定Kafka!
ApacheKafka是一个快速、可扩展的、高吞吐的、可容错的分布式“发布-订阅”消息系统,使用
Scala
与Java语言编写,能够将消息从一个端点传递到另一个端点。
vthinkwen
·
2023-12-15 21:31
大数据
分布式
hadoop
数据库
kafka
值得收藏的练习打字网站
无需练习—输入JavaScript、Ruby、C、C++、Java、PHP、Perl、Haskell、
Scala
等开源代码,完成一段之后会
Funny_AI_LAB
·
2023-12-15 20:33
工具
AIGC
编辑器
人工智能
CKKS 同态模约简:切比雪夫插值
[PS73]PatersonMS,StockmeyerLJ.Onthenumberofnon
scala
rmultiplicationsne
山登绝顶我为峰 3(^v^)3
·
2023-12-15 20:16
#
全同态加密
密码学
数学
计算机
线性代数
算法
kmeans设置中心_Spark分布式机器学习源码分析:Kmeans族聚类
本文采用的组件版本为:Ubuntu19.10、Jdk1.8.0_241、
Scala
2.11.12、Hadoop3.2.1、Spark2.4.5,老规矩先开启一系列Hadoop、Spark服务与Spa
weixin_39699121
·
2023-12-15 19:27
kmeans设置中心
spark
kmeans打印质心
Windows平台搭建Spark开发环境(Intellij idea 2020.1社区版+Maven 3.6.3+
Scala
2.11.8)
在开始之前,需要说明的是要跑通基本的wordcount程序,是不需要在windows上安装hadoop和spark的,因为idea在跑程序的时候,会按照pom.xml配置文件,从指定的repository源,按照properties指定的版本,下载dependency中指定的依赖包。如果需要在本地通过spark-shell,或者运行开发完的包,那么就需要完整的hadoop和spark环境,就需要把
阳泉酒家小当家
·
2023-12-15 19:56
大数据
hadoop
spark
scala
spark
intellij-idea
Spark 随机森林算法原理、源码分析及案例实战
图1.Spark与其它大数据处理工具的活跃程度比较回页首环境要求操作系统:Linux,本文采用的Ubuntu10.04,大家可以根据自己的喜好使用自己擅长的Linux发行版Java与
Scala
版本:
Scala
2.10.4
黑谷子
·
2023-12-15 19:51
spark
scala
源码
Scala
学习三:条件语句/循环语句
一、IF…ELSE语句1.1if语句if(布尔表达式){//如果布尔表达式为true则执行该语句块}objectTest{defmain(args:Array[String]){varx=10;if(x<20){println("x<20");}}}1.2if…else语句if(布尔表达式){//如果布尔表达式为true则执行该语句块}else{//如果布尔表达式为false则执行该语句块}1.3
eight_Jessen
·
2023-12-15 14:22
scala
scala
学习
开发语言
Scala
学习二:访问修饰符/运算符
一、
Scala
访问修饰符private,protected,public如果没有指定访问修饰符,默认情况下,
Scala
对象的访问级别都是public。
eight_Jessen
·
2023-12-15 14:52
scala
scala
学习
Scala
学习一:语法基础/数据类型/变量
对于所有的类名的第一个字母要大写,并且用驼峰式写法方法名称-所有的方法名称的第一个字母用小写,如果多个单词,后面的单词驼峰式程序文件名-程序文件的名称应该与对象名称完全匹配(新版本不需要了,但建议保留这种习惯)1.2标识符
Scala
eight_Jessen
·
2023-12-15 14:51
scala
scala
学习
Flink集群搭建
1安装包下载根据自己的环境下载相应的flink安装包:https://flink.apache.org/downloads.html下载的版本要与自己的
scala
版本一致,我安装的
scala
版本为2.11
NemoonFish
·
2023-12-15 12:20
flink集群搭建
flink
你们还在用
Scala
元组Tuple234..? Outer啦
为什么这么说呢,难道我自己多年使用的方式错了嘛,是的,你没错,我错了,哈哈,主要原因是使用Tuple的时候容易搞错对象,Tuple2的时候还知道第一个参数跟第二个参数的意思,后面多来个几参数你会记得_1._2._3._4代表的意思是什么吗?代码结构也不好维护,所以请结束使用Tuple吧请开始你的表演正常使用Tuplevallist=Array((1,2,3,4),(5,6,7,8))list.fi
kikiki4
·
2023-12-15 10:38
元一Seele|深度解读备受争议的区块链4.0
Seeleispoweredbyanup-
scala
bleNeuralConsensusprotocolforhighthroughputconcurrencyamonglargescaleheterogeneousnodesandisabletoformauniqueheterogeneousforestmulti-chainecosystem
上官飞妍
·
2023-12-15 08:01
scala
---03
package
scala
05object
scala
01_Function{defmain(args:Array[String]):Unit={defsayHi(name:String):Unit={println
芝士小熊饼干
·
2023-12-15 07:01
开发语言
scala
Spark安装
本文搭建环境为:Mac+ParallelDesktop+CentOS7+JDK7+Hadoop2.6+
Scala
2.10.4+IDEA14.0.5————————————————————————————
weixin_30755393
·
2023-12-15 07:27
大数据
scala
java
Scala
教程
文章目录第一章
Scala
入门1.1概述1.1.1为什么学习
Scala
1.1.2
Scala
发展历史1.1.3
Scala
和Java的关系1.1.4
Scala
语言特点1.2
Scala
环境搭建1.3IDEA中
Scala
Tanzhiyong97
·
2023-12-15 05:34
scala
spark
intellij-idea
perl读取html文件内容,在Perl中,如何将整个文件读取为字符串?
useFile::Slurp;$all_of_it=read_file($filename);#entirefilein
scala
r@all_lines=read_file($filename);#onelineperelementPerl
allegrohq
·
2023-12-15 03:42
perl读取html文件内容
MongoDB5.x学习笔记
文章目录一、概述1、MongoDB简介1.1简介1.2发展历史1.3特点1.4应用场景2、MongoDB安装2.1原生安装2.2docker安装2.3快捷安装二、核心概念1、概述2、数据库常用操作2.1库和
集合操作
魅Lemon
·
2023-12-15 03:37
#
中间件
学习
笔记
【Flink系列七】TableAPI和FlinkSQL初体验
ApacheFlink有两种关系型API来做流批统一处理:TableAPI和SQLTableAPI是用于
Scala
和Java语言的查询API,它可以用一种非常直观的方式来组合使用选取、过滤、join等关系型算子
周润发的弟弟
·
2023-12-15 03:48
从零开始搞大数据
flink
大数据
Spark-SparkSession.Builder 源码解析
classBuilderSparkSessionExtensionsclassBuilder这个类主要用来builderSparkSession有以下的属性:1.private[this]valoptions=new
scala
.collection.mutable.HashMap
姜上清风
·
2023-12-14 22:36
Spark
源码
spark
scala
Linux 安装 RocketMq
官网:RocketMQ1.RocketMQ、ActiveMQ、Kafka产品ActiveMQKafkaRocketMQ客户端SDKjava,.NET,C++etc.Java,
Scala
etc.Jav
Ocean@上源码
·
2023-12-14 22:05
消息中间件
linux
java
rocketmq
Scala
的安装部署&Maven的安装部署
scala
的基本知识1.
Scala
是什么?
jiangliu
·
2023-12-14 22:03
windows 安装 kafka-manager 客户端管理工具
1.前提条件:1.准备jre1.8环境2.
scala
环境3.sbt环境4.准备kafka-manager源码包:下载地址(https://github.com/yahoo/kafka-manager/tags
做一个懒惰的程序员
·
2023-12-14 20:06
kafka
windows
java
Go社区主流Kakfa客户端简要对比
互联网不拘泥于某种编程语言,但很多人不喜欢Kafka是由
Scala
/Java开发的。尤其是对于那些对某种语言
Tony Bai
·
2023-12-14 20:03
go
java
大数据
linux
区块链
深度学习-必备的数学知识-线性代数-1
线性代数我们先来了解线性代数中几个重要概念:标量、向量、矩阵、张量重要概念标量(
scala
r):标量是一个数。例如:1、2、3。我们
占得世间一味愚
·
2023-12-14 19:10
深度学习
深度学习
人工智能
线性代数
Scala
-初学
前提,已经安装好
Scala
在Linux终端准备资料:a.txt内容HIVE底层是hdfs和mapreduce实现存储和计算的。
Logan_addoil
·
2023-12-14 19:07
大数据学习之旅
scala
开发语言
后端
【Table/SQL Api】Flink Table/SQL Api表转流读取MySQL
引入依赖jdbc依赖flink-connector-jdbc+mysql-jdbc-driver操作mysql数据库org.apache.flinkflink-connector-jdbc_${
scala
.binary.version
不进大厂不改名二号
·
2023-12-14 16:44
flink
sql
flink
mysql
java
kotlin方法传入lambda表达式参数并调用invoke什么意思
1.Lambda表达式简介作用:Lambda表达式可以作为函数参数,传递到函数中,使代码结构更加紧凑;应用场景:集合中扩展
集合操作
,当做函数参数,替代匿名内部类;好处:Lambda表达式语法简洁,避免了冗长的函数声明调用过程
Jason_Lee155
·
2023-12-14 12:42
Android程序
Kotlin
kotlin
开发语言
android
Spark常见算子汇总
从外部存储中读取数据来创建RDDparallelize调用SparkContext的parallelize()方法,将一个存在的集合,变成一个RDDmakeRDD方法一/**Distributealocal
Scala
coll
话数Science
·
2023-12-06 21:05
大数据
面试
Spark
spark
大数据
大数据实战项目_电商推荐系统
一、项目介绍Hadoop+Spark+(Python)
Scala
+SparkSQL+SparkStreaming+MongoDB+Redis+Kafka+Flume+(SpringMVC+vue)1项目介绍
Guff_hys
·
2023-12-06 20:28
大数据开发学习
大数据
服务器
hadoop
spark
zookeeper
flume
kafka
[测试] fuzztest
https://www.qualys.com/2023/10/03/cve-2023-4911/looney-tunables-local-privilege-e
scala
tion-glibc-ld-so.txthttps
mzhan017
·
2023-12-06 16:26
测试
安全
测试
fuzz
test
scala
中的接口与java中的接口抽象类的区别
我们知道java中我们经常看到同时提供接口和抽象基类的做法,那么
scala
中是否也有这些类和操作呢?
会飞的蜗牛66666
·
2023-12-06 15:12
CVPR 2023 精选论文学习笔记:Towards
Scala
ble Neural Representation for Diverse Videos
基于MECE原则,我们给出以下四个分类标准:分类标准1:表示类型隐式神经表示(INR)隐式神经表示(INR)是一类神经网络架构,将场景或对象表示为从3D点映射到颜色和不透明度值的连续函数。该函数通常从一组训练图像或视频中学习,然后可以用于渲染场景或对象的新视图。INR已被证明
结构化文摘
·
2023-12-06 12:35
学习
笔记
人工智能
机器学习
gpu算力
ERROR SparkContext: Error initializing SparkContext.org.apache.spark.SparkException:无效的 Spark URL:
在idea中用
scala
编写spark的WordCount的案例时,老是报错,
scala
能运行其他程序
scala
没有问题,依赖按照视频教程也成功下载,Maven仓库也下载的巴巴适适,报的错误太多了,我节选有价值的错误信息
Guff_hys
·
2023-12-06 11:40
大数据开发学习
spark
大数据
分布式
scala
intellij
idea
服务器
后端
唯一值与其他逻辑集合
对一维ndarry的基础
集合操作
。如np.unique返回的是数组中唯一值排序后形成的数组。
庵下桃花仙
·
2023-12-06 07:50
Android Gson总结
文章目录Gson总结概述依赖库基本API介绍基本用法直接生成JSON字符串操作对象操作数组操作
集合操作
泛型其他用法@SerializedName@ExposeexcludeFieldsWithModifiers
xiangxiongfly915
·
2023-12-06 05:04
Android
Gson
Android
深入探讨网络抓取:如何使用
Scala
和 Dispatch 获取 LinkedIn 图片
网络抓取的过程通常包括以下几个步骤:发送HTTP请求到目标网站解析响应的HTML文档提取所需的数据存储或处理数据在本文中,我们将使用
Scala
语言和Dispatch库来实现一个简单的网络抓取程序,该程序的功能是从
亿牛云爬虫专家
·
2023-12-06 05:02
爬虫代理
代理IP
后端
网络
scala
Dispatch
HTTP
爬虫
爬虫代理
代理IP
从0到1实现Flink 实战实时风控系统的经验总结
以下是一些基本步骤:安装Java和
Scala
开发环境。下载并解压最新版本的ApacheFlink。配置Flink的运行环境,包括设置Flink主节点和工作节点的配置文件。启动Flink集群。二、构建数
沃威2268731
·
2023-12-06 05:14
实战技术
flink
大数据
Scala
--2
package
scala
02object
Scala
07_typeCast{defmain(args:Array[String]):Unit={//TODO隐式转换//自动转换valb:Byte=10vari
芝士小熊饼干
·
2023-12-06 05:24
scala
开发语言
后端
hadoop
Scala
可变参数列表,命名参数和参数缺省
重复参数
Scala
在定义函数时允许指定最后一个参数可以重复(变长参数),从而允许函数调用者使用变长参数列表来调用该函数,
Scala
中使用“*”来指明该参数为重复参数。
达微
·
2023-12-05 22:54
Scala
从入门到精通03之面向对象
1.
Scala
包1)和Java一样,可以在顶部使用import导入,在这个文件中的所有类都可以使用。2)局部导入:什么时候使用,什么时候导入。
Coder-michael
·
2023-12-05 14:00
大数据
大数据
scala
scala面向对象
大数据学习
scala学习
十一、
Scala
从入门到精通一一
集合操作
目录11.1、集合元素的映射-map映射操作11.1.1、看一个实际需求11.1.2、map映射操作11.1.3、使用传统方法11.1.4、高阶函数基本使用案例111.1.5、高阶函数应用案例211.1.6、使用map映射函数来解决11.1.7、深刻理解map映射函数的机制-模拟实现11.1.8、课堂练习11.1.9、flatmap映射:flat即压扁,压平,扁平化映射11.2、集合元素的过滤-f
计算机程序猿
·
2023-12-05 14:30
#
scala
大数据
编程语言
scala
上一页
13
14
15
16
17
18
19
20
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他