E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Scala学习系列
PySpark(一)Spark原理介绍、PySpark初体验及原理
Spark简介ApacheSpark是用于大规模数据(large-
scala
data)处理的统一(unified)分析引擎,其特点就是对任意类型的数据进行自定义计算。
独憩
·
2024-02-02 13:11
PySpark
python
分布式
大数据
spark
轨迹平滑算法_参考资料
python或者
scala
都行【自动驾驶】运动规划丨轨迹规划丨基于改进Dijkstra算法的轨迹平滑方法-知乎【自动驾驶】运动规划丨轨迹规划丨贝塞尔Bezier曲线-知乎使用贝塞尔曲线完成轨迹平滑预测-
Matrix70
·
2024-02-02 13:10
轨迹大数据智能处理
数据分析
spark
大数据
【Spark实践6】特征转换FeatureTransformers实践
Scala
版--补充算子
本节介绍了用于处理特征的算法,大致可以分为以下几组:提取(Extraction):从“原始”数据中提取特征。转换(Transformation):缩放、转换或修改特征。选择(Selection):从更大的特征集中选择一个子集。局部敏感哈希(LocalitySensitiveHashing,LSH):这类算法结合了特征转换的方面与其他算法。FeatureTransformersIndexToStri
周润发的弟弟
·
2024-02-02 13:39
Spark机器学习
spark
scala
大数据
[
Scala
学习笔记] Spark开发小笔记
Spark开发小笔记:从0开始的Spark建图生活持续更新中……0.开发平台Zeppelin支持多种语言,默认是
scala
(背后是sparkshell),SparkSQL,Markdown和Shell。
Rinnki
·
2024-02-02 13:39
Scala笔记
学习笔记
Scala
Spark
图
Scala
与spark 7.23
例如:@transientvalsparkContext:SparkContext,
Scala
多行字符串之stripMargin方法https://www.jianshu.com/
qq_34872215
·
2024-02-02 13:09
spark
【SparkML实践5】特征转换FeatureTransformers实战
scala
版
本节介绍了用于处理特征的算法,大致可以分为以下几组:提取(Extraction):从“原始”数据中提取特征。转换(Transformation):缩放、转换或修改特征。选择(Selection):从更大的特征集中选择一个子集。局部敏感哈希(LocalitySensitiveHashing,LSH):这类算法结合了特征转换的方面与其他算法。本章节主要讲转换1FeatureTransformersTo
周润发的弟弟
·
2024-02-02 13:08
Spark机器学习
spark-ml
scala
开发语言
【livy】Spark Livy深究
什么是livyLivy的特点Livycloudera开发通过REST来连接、管理spark的解决方案从任何地方提交job使用交互式的
Scala
、Python语言与远程的spark集群进行通信无需更改代码
小赵要加油
·
2024-02-02 13:07
livy
大数据
分布式
【SparkML实践4】Pipeline实战
scala
版
Pipeline中的主要概念MLlib标准化了机器学习算法的API,使得将多个算法组合成单一的管道或工作流程变得更加容易。本节介绍了PipelinesAPI引入的关键概念,其中管道的概念主要受到scikit-learn项目的启发。DataFrame:这个机器学习API使用来自SparkSQL的DataFrame作为机器学习数据集,它可以包含多种数据类型。例如,一个DataFrame可以有不同的列存
周润发的弟弟
·
2024-02-02 13:36
Spark机器学习
spark-ml
scala
开发语言
【IC设计】Windows下基于IDEA的Chisel环境安装教程(图文并茂)
Chisel环境安装教程第一步安装jdk,配置环境变量第二步安装sbt,不用配置环境变量第三步安装idea社区版第四步离线安装
scala
的idea插件第五步配置sbt换源1.切换目录2.创建repositories
农民真快落
·
2024-02-02 10:02
ic设计
ic设计
scala
chisel
一生一芯
risc-v
spark题06
4
scala
中trait特征和用法?5.redis和memcache的区别?6.列举Spark中常见的端口,分别有什么功能?8.Spark官网中,你常用哪几个模块?11.yarn的原理?
博弈史密斯
·
2024-02-02 09:59
Jmeter
学习系列
之五:线程组(Thread Group)
前言线程组是一系列线程的集合,每一个线程代表着一个正在使用应用程序的用户。在jmeter中,每个线程意味着模拟一个真实用户向服务器发起请求。在jmeter中,线程组组件运行用户设置线程数量、初始化方式等等配置。例如,如果你设置线程数为100,那么jmeter将创建并模拟测试100个用户请求到服务器端。模拟100个用户一、添加线程组测试计划->右键->添加->线程(用户)->线程组,添加一个新的线程
艳Yansky
·
2024-02-02 08:48
自动化测试
Jmeter
压力测试
jmeter
学习
机器
学习系列
4-特征工程
机器
学习系列
4-特征工程学习内容来自:谷歌ai学习https://developers.google.cn/machine-learning/crash-course/framing/check-your-understanding
喜乐00
·
2024-02-02 07:36
机器学习
人工智能
11.
scala
函数进阶
目录概述函数
scala
函数和方法的区别第一种第二种方法转函数函数柯里化结束概述函数vs方法1.定义方法:def函数:=>2.方法本质上是一个特殊的函数3.函数是一等公民,函数可以当做值来传递,方法的参数
流月up
·
2024-02-02 02:22
scala
scala
函数
方法
柯里化
12.
scala
下划线使用总结
目录概述实践变量初始化导包引入方法转变为函数用户访问Tuple元素简化函数参数传递定义偏函数变长参数结束概述实践变量初始化在
Scala
中,变量在声明时需要显式指定初始值。
流月up
·
2024-02-02 02:22
scala
scala
下划线
使用
总结
程序员/设计师能用上的 75 份速查表
,包括:jQuery、HTML、HTML5、CSS、CSS3、JavaScript、Photoshop、git、Linux、Java、Perl、PHP、Python、Ruby、RubyonRails、
Scala
foveni
·
2024-02-01 20:13
机器
学习系列
——(二)主要任务
导语:随着信息时代的到来,机器学习作为一项重要技术正逐渐渗透到我们的生活和工作中。它的主要任务是通过使用数据和算法,让计算机系统从中学习并改进性能,使其能够更智能地处理问题和做出决策。本文将详细介绍机器学习的主要任务,包括分类、回归、聚类和推荐系统等,让我们一同探索这个引领智能时代的关键技术。分类任务分类任务是机器学习中最常见的任务之一。它的目标是将数据分为不同的类别或标签。分类任务可以应用于各种
飞影铠甲
·
2024-02-01 18:03
机器学习
人工智能
【vim
学习系列
文章 3.2 -- vim 删除 空格】
文章目录vim删除行尾空格vim删除行尾空格在代码开发的过程中,经常会遇到行尾有空格的现象,如下:我们可以在.vimrc中通过map命令来映射删除行尾空格的快捷键,如下:mapd:%s/\s*$//gd:表示delete;:代码空格键。所以执行d+空格键就可以删除行尾空格。
CodingCos
·
2024-02-01 16:50
#
vim
学习系列文章
vim
学习
编辑器
vim
删除行尾空格
大数据之Spark
HadoopMapReduce所具有的优点但不同于MapReduce的是Job中间输出结果可以缓存在内存中,从而不再需要读写HDFS,减少磁盘数据交互因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的算法Spark是
Scala
进击的-小胖子
·
2024-02-01 12:37
大数据
spark
big
data
scala
大数据
实时大数据
机器学习数学基础
5、正态分布(高斯分布)6、向量的外积(叉积)7、向量的内积(点积)8、超平面(H)1、标量、向量、矩阵、张量标量、向量、矩阵和张量是线性代数中不同维度的数学对象,它们之间的区别在于维数和结构:标量(
Scala
r
对许
·
2024-02-01 11:26
基础理论
机器学习
概率论
线性代数
机器
学习系列
——(一)概述
导语:在当今高度数字化和信息化的时代,机器学习作为一项核心技术,正日益渗透到我们生活的方方面面。它不仅为我们提供了更智能、更高效的解决方案,还给予了计算机系统从经验中学习和改进的能力。本文将带您深入了解机器学习的概念、原理以及应用,让我们一同探索这个引领智能时代的关键技术。第一部分:什么是机器学习?机器学习是一种通过利用数据和统计学方法,使计算机系统从中学习并改进性能的人工智能技术。它通过构建模型
飞影铠甲
·
2024-02-01 10:42
机器学习
机器学习
人工智能
Spark SQL 中org.apache.spark.sql.functions归纳
SparkSQL中org.apache.spark.sql.functions归纳注意,这里使用的是
scala
2.12.12,spark版本是最新的3.0.1版本1.Sortfunctions/***Returnsasortexpressionbasedonascendingorderofthecolumn
闻香识代码
·
2024-02-01 09:13
spark
scala
dataframe
apache
spark
大数据
分布式计算
scala
spark
【Spring Boot 源码学习】BootstrapRegistry 详解
《SpringBoot源码
学习系列
》BootstrapRegistry详解一、引言二、往期内容三、主要内容3.1源码初识3.2register方法3.3registerIfAbsent方法3.4isRegistered
Huazie
·
2024-02-01 08:47
开发框架-Spring
Boot
spring
boot
源码学习
对象注册表
Scope
Scala
的JDBC操作
scala
对JDBC的操作与Java的类似,这里以连接mysql为例如果新建的的maven项目,直接在xml文件中配置以下代码即可,版本号可根据自己的mysql版本调整mysqlmysql-connector-java5.1.38
简单不过l
·
2024-01-31 19:38
Scala
jdbc
mysql
scala
读书和
学习系列
之快速阅读(上)
前言:本文是一篇读书笔记!弗兰西斯·培根说:“有些书可以浅尝即止,有些书要生吞活剥,而只有少数的书是要咀嚼和消化的。”图片发自App1.阅读的4个层次基础阅读,检视阅读,分析阅读,主题阅读级别越高所要的主动和能力越强!1.1基础阅读:实则是段和句的理解基本能读懂,就是大众化的随便普通阅读,通常是无读书障碍的中小学生水平,主要在于对句子和段落的理解……1.2检视阅读:对书的筛选和整体理解,主旨的明确
甜的梦想之路修心之旅
·
2024-01-31 17:10
window环境下安装spark
0环境先给出安装好后的各个软件版本:win1064bitjava1.8.0
scala
2.12.8
FTDdata
·
2024-01-31 17:06
Jmeter
学习系列
之二:工具面板必知必会
目录前言一、菜单栏二、功能区编辑2.读入数据总结前言Jmeter面板一共分为4个区域,分别是菜单栏、功能区、视图区和内容区。菜单栏:主要功能包括新建测计划,添加线程组、测试脚本,分布式运行相关,查看日志,生成报告和函数助手。功能区:比较简单,下面详情介绍功能区。视图区:目录树,添加存放测试设计中所使用到的元件。内容区:详细配置区域,主要对元件进行相对应的编辑和配置。一、菜单栏文件:新建、打开、保存
艳Yansky
·
2024-01-31 15:22
Jmeter
压力测试
自动化测试
jmeter
学习
Jmeter
学习系列
之四:测试计划元素介绍
测试计划元素JMeter包含各种相互关联但为不同目的而设计的元素。在开始使用JMeter之前,最好先了解一下JMeter的一些主要元素。注意:测试计划包含至少一个线程组。以下是JMeter的一些主要组件:测试计划(Plan)线程组(ThreadGroup)控制器(Controllers)监听器(Listeners)计时器(Timers)配置元素(ConfigurationElements)预处理器
艳Yansky
·
2024-01-31 15:51
自动化测试
Jmeter
压力测试
jmeter
Scala
核心编程 第一章—
Scala
语言概述
一、
Scala
语言解释1.什么是
Scala
语言Spark—新一代内存级大数据计算框架,是大数据的重要内容。Spark就是使用
Scala
编写的。因此为了更好的学习Spark,需要掌握
Scala
这门语言。
我是星星我会发光i
·
2024-01-31 15:47
Scala核心编程
第一章
Scala语言概述
Scala
代码规范
原文链接https://github.com/databricks/
scala
-style-guide
Lonely_Acmen
·
2024-01-31 14:27
机器
学习系列
-1基础概念
机器
学习系列
-1基础概念学习内容来自:谷歌ai学习https://developers.google.cn/machine-learning/crash-course/framing/check-your-understanding
喜乐00
·
2024-01-31 12:18
机器学习
人工智能
100天自学大数据:我用
Scala
复习学统计基础公式
适合人群已经忘记统计学基础的
Scala
刚刚入门的通过对统计学入门公式的实践编程,你可以对
Scala
做到入门,其他语言也类似!
金哥数据分析
·
2024-01-31 11:00
CVE-2020-17518 flink任意文件上传漏洞复现
漏洞描述ApacheFlink是由Apache软件基金会开发的开源流处理框架,其核心是用Java和
Scala
编写的分布式流数据流引擎。
亚瑞塔斯·D·紫耀
·
2024-01-31 10:53
flink
网络安全
Apache Flink -任意文件写入漏洞复现(CVE-2020-17518)
1、产品简介ApacheFlink是高效和分布式的通用数据处理平台,由Apache软件基金会开发的开源流处理框架,其核心是用Java和
Scala
编写的分布式流数据流引擎(简单来说,就是跟spark类似)
OidBoy_G
·
2024-01-31 10:52
漏洞复现
apache
flink
安全
web安全
网络安全
Jmeter
学习系列
之三:测试计划详细介绍
目录前言步骤1:启动JMeter窗口步骤2:添加/删除测试计划元素步骤3:加载并保存测试计划元素。步骤4:配置树元素步骤5:保存JMeter测试计划步骤6:运行JMeter测试计划
艳Yansky
·
2024-01-31 10:18
自动化测试
Jmeter
压力测试
jmeter
学习
关于 IntelliJ IDEA 中 Schedule for Addition 的问题
此外,它还支持Kotlin、Groovy、
Scala
和Android开发等多种语言和框架。
Roseann YAN
·
2024-01-31 08:50
intellij-idea
java
ide
【架构论文】SCALE: Secure and
Scala
ble Cache Partitioning(2023 HOST)
SCALE:Secureand
Scala
bleCachePartitioning摘要LLC可以提高性能,但是会引入安全漏洞,缓存分配的可预测变化可以充当侧信道,提出了一种安全的缓存分配策略,保护缓存免受基于时间的侧信道攻击
Destiny
·
2024-01-31 08:36
硬件架构
架构
安全架构
安全
硬件架构
系统安全
缓存
机器
学习系列
-2 线性回归&训练损失
机器
学习系列
-2线性回归&训练损失学习内容来自:谷歌ai学习https://developers.google.cn/machine-learning/crash-course/framing/check-your-understanding
喜乐00
·
2024-01-31 07:35
人工智能
机器学习
shiro
学习系列
:shiro自定义filter过滤器
shiro
学习系列
:shiro自定义filter过滤器自定义JwtFilter的hierarchy(层次体系)上代码packagecom.finn.springboot.common.config.shiro.filters
悲雨叹风
·
2024-01-31 03:11
shiro
shiro
filter
过滤器
适合 Kubernetes 初学者的一些实战练习(二)
本文作为Kubernetes
学习系列
的第二篇文章,我们继续学习XX.练习1-使用脚本在Linux服务器上自动安装Kubernetes的包管理器
JerryWang_汪子熙
·
2024-01-30 21:53
Kubernetes operator(二)CRD篇
云原生学习路线导航页(持续更新中)本文是Kubernetesoperator
学习系列
第二篇,主要对CRD进行学习1.CRD介绍1.1.如何使用在K8S系统扩展点中,开发者可以通过CRD(CustomResourceDefinition
格桑阿sir
·
2024-01-30 17:32
云原生学习专栏
kubernetes
容器
云原生
devops
Kubernetes operator(三)code-generator 篇
云原生学习路线导航页(持续更新中)本文是Kubernetesoperator
学习系列
第三篇,主要对使用code-generator进行CRD自动代码生成进行学习Kubernetesoperator
学习系列
快捷链接
格桑阿sir
·
2024-01-30 17:32
云原生学习专栏
kubernetes
容器
云原生
golang
Kubernetes operator(四)controller-tools 篇
云原生学习路线导航页(持续更新中)本文是Kubernetesoperator
学习系列
第四篇,主要对使用controller-tools进行CRD自动代码生成进行学习Kubernetesoperator
学习系列
快捷链接
格桑阿sir
·
2024-01-30 17:32
云原生学习专栏
kubernetes
java
容器
云原生
go
docker
云原生学习路线导航页(持续更新中)
云原生学习路线导航页(持续更新中)本文作为云原生
学习系列
文章的导航页,内容实时更新,笔者会对其中列出的每一项,进行学习并整理成文章,敬请期待1、形成对云原生的基本认识2、golang学习2.1.golang
格桑阿sir
·
2024-01-30 17:02
云原生学习专栏
云原生
kubernetes
容器
go
后端
Spark RDD(弹性分布式数据集)
RDD是通过Hadoop文件系统(HDFS)中文件或者驱动程序中现有的
Scala
集合开始,然后对其进行转换来创建的。1.2RDD特性*-Alisto
JOEL-T99
·
2024-01-30 15:15
BigData
spark
RDD
初识 RDD 弹性分布式数据集(Resilient Distributed Datasets)
可以让用户显式地将数据存储到磁盘和内存中,并能控制数据的分区.同时,RDD还提供了一组丰富的操作来操作这些数据.在这些操作中,诸如map,flatMap,filter等转换操作实现了Monad模式,很好地契合了
Scala
腹黑客
·
2024-01-30 15:42
spark
spark
flink sql 语法校验
flinksql语法校验说明:apacheflink源码的校验方式1新增依赖包org.apache.flinkflink-table-planner-blink_${
scala
.binary.version
老鼠扛刀满街找猫@
·
2024-01-30 10:20
flink
flink
sql
java
机器
学习系列
16:使用 scikit-learn 的 Pipeline
在机器学习项目中,我们经常需要进行大量的数据预处理步骤,最后用处理干净的数据集来拟合机器学习算法得到一个合适的机器学习模型。scikit-learn提供了一个强大的Pipeline类来帮助我们将所有的数据预处理步骤和训练模型的步骤串起来。就像流水线一样,前一个步骤处理完的结果输入到下一个步骤,依次处理。这里我们将使用UCI提供的威斯康星洲乳腺癌数据集,下载地址如下:https://archive.
加百力
·
2024-01-30 07:28
深度学习
机器学习
scikit-learn
人工智能
数据写入HBase(
scala
)
packagesourceimportorg.apache.hadoop.hbase.{HBaseConfiguration,TableName}importorg.apache.hadoop.hbase.client.{ConnectionFactory,Put}importorg.apache.hadoop.hbase.util.Bytesobjectffff{defmain(args:Arr
莫噶
·
2024-01-30 07:51
HBase
hbase
数据库
大数据
Scala
入门01
Spark入门1.入门spark采用
Scala
语言开发Spark是用来计算的
Scala
掌握:特性,基本操作,集合操作,函数,模式匹配,trait,样例类,actor等内容。
chde2Wang
·
2024-01-30 07:48
scala
开发语言
后端
Spark入门02-Spark开发环境配置(idea环境)
archive.apache.org/dist/spark/spark-2.1.2/https://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-3.3.4/2、新建
Scala
chde2Wang
·
2024-01-30 07:41
spark
大数据
分布式
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他