E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Scala学习系列
计算机毕业设计hadoop+spark+hive小说数据分析可视化大屏 小说推荐系统 小说爬虫 小说大数据 机器学习 知识图谱 小说网站 大数据毕业设计
mapreduce对mysql中的小说数据集进行数据清洗,转为.csv文件上传至hdfs文件系统;3.根据.csv文件结构,使用hive建库建表;4.一半分析指标使用hive_sql完成,一半分析指标使用Spark-
Scala
计算机毕业设计大神
·
2024-02-05 14:48
深度
学习系列
56:使用whisper进行语音转文字
1.openai-whisper这应该是最快的使用方式了。安装pipinstall-Uopenai-whisper,接着安装ffmpeg,随后就可以使用了。模型清单如下:第一种方式,使用命令行:whisperjapanese.wav--languageJapanese--modelmedium另一种方式,使用python调用:importwhispermodel=whisper.load_mode
IE06
·
2024-02-05 11:40
深度学习系列
whisper
(阅读笔记)SecureML: A System for
Scala
ble Privacy-Preserving Machine Learning
SecureML动机基础知识SecureML文章总结动机用户(例如物联网设备)计算、电池资源受限,选择外包数据给云或边缘执行密集型计算;用户数据包含隐私信息,数据控制权的转移意味着数据隐私泄露风险;选择加密原语处理数据后上传,实现密文计算(网络推理或训练)是重要挑战。基础知识线性回归模型,值连续,损失函数多选择最小欧式距离计算;逻辑回归模型,二分类任务,值离散,损失函数多选择交叉熵计算;神经网络模
你看见的我
·
2024-02-05 10:27
安全学习
大数据原理-Spark
DAG作业调度运行速度快循环数据流容易使用:可以通过SparkShell交互式编程用途:SQL查询、流式计算、机器学习、图算法组件部署:Hadoop的yarn框架调度、单独部署等等Spark主要语言:
Scala
monster++
·
2024-02-05 09:28
大数据原理
分布式
编程语言
分布式计算
hadoop
spark
0414 VPN & Blockchain learning summary
VPNislikeasubmarinecomparedpublicboatwithprivacyandsecurityofdata.Andthe
scala
bilityofVPNismuchgreaterthanleasedlinesincethedistanceoflocationmattersalittleforcreationofVPN.Dataconfidentialityprobablyi
rusty6kimo
·
2024-02-05 08:48
chisel可选值/模式匹配实例
一、
scala
可选值语法可选值就是类型为Option[T]的一个值。其中,Option是标准库里的一个密封抽象类。T可以是任意的类型,例如标准类型或自定义的类。
耐心的小黑
·
2024-02-05 06:48
#
chisel学习笔记
scala
chisel
可选值
模式匹配
【chisel】 环境,资料
Chisel环境搭建教程(Ubuntu)根据上边的link去安装;目前
scala
最高版本用
scala
-2.13.10,太高了没有chisel的库文件支持;会在sbt下载的过程中报错;[error]sbt.librarymanagement.ResolveException
斐非韭
·
2024-02-04 19:04
chisel
fpga开发
chisel之
scala
语法
Chisel新手教程之
Scala
语言(1)Value&variableValue是immutable的,当它被分配一个数据后,无法进行重新分配。用val表示。
斐非韭
·
2024-02-04 19:32
chisel
scala
数据库
开发语言
大数据技术未来发展前景及趋势分析
Spark适合机器学习以及交互式数据查询工作,包含
Scala
、Python和JavaAPI,这更有利于开发人员使用。Twitter
丨程序之道丨
·
2024-02-04 12:54
机器
学习系列
——(九)决策树
简介决策树作为机器学习的一种经典算法,在数据挖掘、分类和回归等任务中广泛应用。本文将详细介绍机器学习中的决策树算法,包括其原理、构建过程和应用场景。原理决策树是一种基于树状结构的监督学习算法,它通过构建一棵树来对数据进行分类或回归预测。决策树的每个内部节点代表一个特征属性,每个叶子节点代表一个类别或数值。决策树的构建过程:特征选择:根据某种指标选择最佳特征,将数据集划分为不同的子集。决策节点生成:
飞影铠甲
·
2024-02-04 11:45
机器学习
机器学习
决策树
人工智能
机器
学习系列
——(十)支持向量机
一、背景支持向量机(SupportVectorMachine,SVM)是一种用于分类、回归和离群点检测等领域的监督学习方法。它最初由Vapnik和Cortes在1995年提出,被认为是机器学习领域中最成功的算法之一。二、原理2.1线性SVM我们先从最简单的线性支持向量机(LinearSVM)开始。对于一个二分类问题,假设训练数据集为D={(x1,y1),(x2,y2),...,(xn,yn)},其
飞影铠甲
·
2024-02-04 11:09
机器学习
支持向量机
机器学习
算法
kakfa系统架构
A:Kafka是由Apache软件基金会开发的一个开源流处理平台,由
Scala
和Java编写。
齐爱巴
·
2024-02-04 10:27
系统架构
three.js
学习系列
(一)————从概念到构建一个3D场景
Three.js、webGL和Canvas区别Three.js是基于原生WebGL封装的三维引擎。WebGL是JavaScript和OpenGLES2.0结合起来的JavaScriptAPI,在任何兼容的Web浏览器中渲染高性能的交互式3D和2D图形,该API可以在canvas元素中使用,可以html5Canvas提供硬件的3D加速渲染。Canvas是HTML5新增新增的标签,通过js脚本来完成图
0斌果0
·
2024-02-04 08:42
three.js
Rust 第一个rust程序Hello Rust️
文章目录前言一、vscode安装rust相关插件二、CargoNew三、vscode调试rustLLDB前言Rust
学习系列
。今天就让我们掌握第一个rust程序。HelloRust️。
TE-茶叶蛋
·
2024-02-04 07:37
Rust
rust
开发语言
后端
Rust macOS下安装
文章目录前言一、macOS上安装RustrustupCargo前言Rust
学习系列
,本文主要演示如何在macOS下安装rust。
TE-茶叶蛋
·
2024-02-04 07:35
Rust
rust
macos
开发语言
Hadoop2.7.6+Mysql5.7+Hive2.3.2+zookeeper3.4.6+kafka2.11+Hbase1.4.9+Sqoop1.4.7+Kylin2.4单机伪分布式安装及官方案例测
##########################################最新消息:关于spark和Hudi的安装部署文档,本人已经写完,连接:Hadoop2.7.6+Spark2.4.4+
Scala
2.11.12
运维道上奔跑者
·
2024-02-04 05:43
分布式
hbase
zookeeper
hadoop
pyspark_1_理论篇(RDD基础)
跟着Leo学习PySparkchapter1——rdd的基础编程指南一、准备工作1.背景介绍Spark是用
scala
编程语言实现的,为了使Spark支持Python,ApacheSpark社区发布了一个工具
NikolasNull
·
2024-02-04 04:50
大学python题库及答案,大一python期末
有这一篇就足够干货满满不看后悔个人主页→数据挖掘博主ZTLJQ的主页个人推荐python
学习系列
:☄️爬虫JS逆向系列专栏-爬虫逆向教学☄️python系列专栏-从零开始学python目录数据类型和变量
chatgpt001
·
2024-02-04 04:09
windows
服务器
linux
深度学习
python pandas select_dtypes函数选择变量类型
参数:include,exclude:
scala
r或list-like要包含/排除的dtype或字符
Cachel wood
·
2024-02-04 01:24
pandas使用教程
python
pandas
开发语言
Kubernetes operator(一)client-go篇
云原生学习路线导航页(持续更新中)本文是Kubernetesoperator
学习系列
第一篇,主要对client-go进行学习,从源码阅读角度,学习client-go各个组件的实现原理、如何协同工作等参考视频
格桑阿sir
·
2024-02-04 00:08
云原生学习专栏
kubernetes
golang
云原生
容器
Kubernetes operator(七) controller-runtime 篇
云原生学习路线导航页(持续更新中)本文是Kubernetesoperator
学习系列
第七篇,本节会对编写Operator非常重要的controller-runtime库进行学习基于kubernetesv1.24.0
格桑阿sir
·
2024-02-04 00:08
云原生学习专栏
kubernetes
Operator
CRD
Controller
容器
云原生
Webhook
Kubernetes operator(五)api 和 apimachinery 篇
云原生学习路线导航页(持续更新中)本文是Kubernetesoperator
学习系列
第五篇,主要对k8s.io/api和k8s.io/apimachinery两个项目进行学习基于kubernetesv1.24.0
格桑阿sir
·
2024-02-04 00:37
云原生学习专栏
kubernetes
容器
云原生
go
云计算
controller
Kubernetes operator(六)CRD控制器 开发实战篇
云原生学习路线导航页(持续更新中)本文是Kubernetesoperator
学习系列
第六篇,前面5篇的学习,我们已经清楚CRD开发的各个环节,本节就实际设计一个CRD,并为之编写控制器基于kubernetesv1.24.0
格桑阿sir
·
2024-02-04 00:37
云原生学习专栏
kubernetes
容器
云计算
云原生
控制器
Operator
CRD
Java
Scala
混合编程导致 编译失败 ,【找不到符号】问题解决
大致就是工程里分了java代码和
scala
代码。然后在java代码中引用了
scala
的代码。
0X码上链
·
2024-02-03 23:20
大数据
分布式技术
java
scala
开发语言
【Vitis】Vitis HLS
学习系列
笔记 :第一个例程
【Vitis】VitisHLS
学习系列
笔记:第一个例程…………目录1VitisHLS是什么?2例程3很可能遇到的
神仙约架
·
2024-02-03 22:22
xilinx
FPGA
vitis
学习
fpga开发
Vitis
HLS
入门笔记
例程
SVG学习
svgMDN较为详细地址:https://developer.mozilla.org/zh-CN/docs/Web/SVGsvg:
scala
blevectorgraphics可缩放矢量图该图片使用代码书写而成缩放不会失帧内容轻量如何使用
WhiteStruggle
·
2024-02-03 19:25
Scala
-数组、映射
创建定长数组,使用new关键字,指定数组泛型为Int,长度为5,默认会初始化这5个值为指定类型的默认值,比如Int的话则5个默认值都是0//注意:如果new,相当于调用了数组的apply方法,直接为数组赋值
scala
数据萌新
·
2024-02-03 19:54
机器
学习系列
——(七)简单分类算法
机器学习是目前人工智能领域最热门的分支之一,其中朴素贝叶斯分类算法是一种常用的分类算法。本文将详细介绍朴素贝叶斯分类算法的原理、应用以及优缺点。一、原理朴素贝叶斯分类算法是一种基于贝叶斯定理的分类算法。在分类问题中,我们需要根据给定的数据集,将不同的实例分成不同的类别。朴素贝叶斯分类算法的核心思想就是利用已知类别的训练数据来估计每个特征对于分类结果的影响,并通过这些特征值的联合概率分布来确定新实例
飞影铠甲
·
2024-02-03 17:12
机器学习
机器学习
分类
人工智能
机器
学习系列
——(八)KNN分类算法
当谈到机器学习中的分类算法时,K最近邻(K-NearestNeighbors,简称KNN)是一个简单而又常用的算法。在本篇博客中,我们将探讨KNN算法的原理、应用和优缺点。一、原理K最近邻算法是一种基于实例的学习方法,它通过利用已知类别的训练样本集来对新的实例进行分类。其核心思想是通过测量不同实例之间的距离来确定新实例的类别。具体来说,KNN算法的原理可以概括为以下几个步骤:数据准备:首先,我们需
飞影铠甲
·
2024-02-03 17:12
机器学习
机器学习
分类
人工智能
机器
学习系列
——(五)数据清洗
引言在机器学习领域,数据是训练模型的基础。然而,现实世界中的数据往往存在噪声、缺失值、异常值和不一致等问题,这些问题会对模型的性能产生负面影响。因此,数据清洗作为机器学习流程中至关重要的一步,可以帮助我们处理这些问题,提高模型的准确性和鲁棒性。本文将详细介绍机器学习中的数据清洗过程,以及常见的数据清洗方法和技术。一、概念和目标数据清洗是指通过一系列的操作和技术,对原始数据进行预处理,使其符合模型训
飞影铠甲
·
2024-02-03 17:11
机器学习
机器学习
人工智能
spark WordCount
SparkWC.
scala
packageday06importorg.apache.spark.rdd.RDDimportorg.apache.spark.
lehuai
·
2024-02-03 16:27
Spring5系列学习文章分享---第三篇(AOP概念+原理+动态代理+术语+Aspect+操作案例(注解与配置方式))
*JDK**动态代理代码AOP(术语)AOP操作(准备工作)**AOP****操作(**AspectJ注解)**AOP****操作(**AspectJ**配置文件)**开篇:欢迎再次来到Spring5
学习系列
码农阿豪
·
2024-02-03 15:39
Spring5系列
java
开发语言
aop
spring5
2020李宏毅学习笔记——1.概论
Theoutputofthefunctionisa
scala
r.:函数的输出是一个数值例如:
是汤圆啊
·
2024-02-03 15:38
大数据实时处理 1.1搭建
Scala
开发环境。
Scala
简介。
Scala
编程语言抓住了很多开发者的眼球。如果你粗略浏览
Scala
的网站,你会觉得
Scala
是一种纯粹的面向对象编程语言,而又无缝地结合了命令式编程和函数式编程风格。
saddwe
·
2024-02-03 15:52
scala
大数据
java
【学习笔记】大数据技术之
Scala
(上)
【学习笔记】大数据技术之
Scala
(下)尚硅谷大数据技术之
Scala
(新版)思考:1.为什么
scala
在生成字节码文件的过程中,会有类名$.class文件生成?2.闭包时如何实现的?
在学习的王哈哈
·
2024-02-03 15:51
大数据
大数据
scala
Spark大数据分与实践笔记(
Scala
语言基础-1)
目录1.1
Scala
概述1.1.1
Scala
的下载安装1.1.2在IDEA开发工具中下载安装
Scala
插件1.1.3开发第一个
Scala
程序Spark是专为大规模数据处理而设计的快速通用的计算引擎,它是由
妉妉师姐
·
2024-02-03 15:49
大数据-linux-spark
scala
spark
java
大数据
大数据应用开发3-
Scala
笔记1
一、编程框架
Scala
语言是在JVM上运行的,兼容Java语法区分大小写-
Scala
是大小写敏感的,这意味着标识Hello和hello在
Scala
中会有不同的含义。
争渡争渡!
·
2024-02-03 15:19
大数据
scala
笔记
【pytorch】利用tensorboard记录训练过程与查看
文章目录代码读取保存的log代码fromtorch.utils.tensorboardimportSummaryWriter在epoch内保存,三个参数分别为保存字符串名、保存变量和步数writer.add_
scala
r
Jiazhou_garland
·
2024-02-03 13:29
pytorch
pytorch
机器
学习系列
——(六)数据降维
引言在机器学习领域,数据降维是一种常用的技术,旨在减少数据集的维度,同时保留尽可能多的有用信息。数据降维可以帮助我们解决高维数据带来的问题,提高模型的效率和准确性。本文将详细介绍机器学习中的数据降维方法和技术,以及其在实际应用中的重要性。一、概念数据降维是指通过对原始数据进行变换或压缩,将其映射到一个低维空间中,从而减少特征的数量。数据降维的目标主要包括以下几个方面:减少计算复杂性:高维数据可能导
飞影铠甲
·
2024-02-03 11:55
机器学习
机器学习
人工智能
大数据
算法
学习系列
(三十一):组合数
目录引言一、CnmC_n^mCnm二、递推1.公式2.例题三、预处理1.公式2.例题四、卢卡斯定理1.公式2.例题五、高精度计算2.例题引言这个组合数的问题还是很常见的,就是问CnmC_n^mCnm,然后会根据询问的次数,以及n和m的大小来判断怎么去做。本文用了一写基本的数论公式来进行推导,包括卢卡斯定理等,进行计算。一、CnmC_n^mCnmCnm=n⋅(n−1)⋅(n−2)⋯(n−m+1)m⋅
lijiachang030718
·
2024-02-03 10:38
算法
算法
学习
【机器学习】3万字长文,PySpark入门级学习教程,框架思维
作为数据从业者多年,个人觉得Spark已经越来越走进我们的日常工作了,无论是使用哪种编程语言,Python、
Scala
还是Java,都会或多或少接触到Spark,它可以让我们能够用到集群的力量,可以对BigData
风度78
·
2024-02-03 08:00
大数据
entity
opencl
spark
hadoop
机器
学习系列
- Mean Shift聚类
文章目录前言一、原理前置知识点MeanShift计算步骤二、应用举例-图像分割三、聚类实战-简单实例bandwidth=1bandwidth=2总结前言MeanShift(均值漂移)是基于密度的非参数聚类算法,其算法思想是假设不同簇类的数据集符合不同的概率密度分布,找到任一样本点密度增大的最快方向(最快方向的含义就是MeanShift),样本密度高的区域对应于该分布的最大值,这些样本点最终会在局部
学海一叶
·
2024-02-03 07:08
机器学习
算法
聚类
机器学习
python
计算机视觉
Business Insider日读新闻随记81
2019年5月29日HuaweiupsitslegalbattleagainsttheUSoverfederalbanHuaweie
scala
teditslegalbattleagainsttheUSonWednesday
江暮白
·
2024-02-03 07:07
flink sql 部署_Flink SQL Client + Mysql CDC 部署实践
简单的读取mysqlbinlog增量同步数据到kafkatopic中的Flink任务应用准备清单DockerDesktopwindows桌面版/DockerFlinkdocker镜像(Flink1.11.2
scala
2.12
weixin_39934257
·
2024-02-03 06:33
flink
sql
部署
flinkjar开发 自定义函数
编写自定义加密函数,继承
Scala
rFunction类,实现eval方法,参数个数类型和返回值根据业务来自定义。
今朝花落悲颜色
·
2024-02-02 22:22
python
开发语言
TryHackMe-Valley
靶场介绍Boottheboxandfindawayintoe
scala
teallthewaytoroot!启动盒子,找到一种方法,一路升级到root!
0415i
·
2024-02-02 21:36
TryHackMe靶场合集
tryhackme
ssh
wireshark
linux
web
ftp
基于
scala
使用flink将kafka数据写入mysql示例
使用Flink消费Kafka中ChangeRecord主题的数据,统计每三分钟各设备状态为“预警”且未处理的数据总数。将结果存入MySQL的shtd_industry.threemin_warning_state_agg表(追加写入),表结构如下,同时备份到Hbase一份,表结构同MySQL表的。请在将任务启动命令截图,启动且数据进入后按照设备id倒序排序查询threemin_warning_st
内向仓鼠
·
2024-02-02 21:10
scala
flink
kafka
Scala
-类、对象、继承、特质
1、类1、类的定义和访问限制符/***类的定义,变量声明与访问限制*在
Scala
中,类并不用声明为public。*
Scala
源文件中可以包含多个类,所有这些类都具有公有可见性。
__元昊__
·
2024-02-02 19:38
CJFS: Concurrent Journaling for Better
Scala
bility——论文泛读
FAST2023Paper分布式元数据论文汇总问题和挑战重量级的EXT4可扩展性较差,由于日志存在两个限制:日志提交是一个严格的串行活动;日志提交使用原始页缓存条目,而不是其副本,随后任何对正在进行的页缓存条目的访问都将被阻塞。现有方法局限性ScaleFS[15]为每个CPU内核[6,8]分配一个正在运行的事务,其中每个内核都分配了单独的文件系统分区。Son等人[44]对日志事务采用了无锁数据结构
妙BOOK言
·
2024-02-02 18:57
论文阅读
论文阅读
文件系统
flink-cdc 使用
接上一篇文章用上cdc基于flink-
scala
1.14当前cdc最新版本2.2.1com.ververicaflink-connector-mysql-cdc2.2.1看官方文档是和flink13.5
csncn21
·
2024-02-02 17:46
flink
flink
scala
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他