E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Scala集合操作
PyTorch学习笔记(二)——TensorBoard
2、模型在不同阶段的输出2需要导入的类和常用的方法fromtorch.utils.tensorboardimportSummaryWriterwriter.add_image()writer.add_
scala
r
routine1o1oo
·
2023-11-28 01:18
pytorch
Pytorch中的Tensorboard常用API
默认会在当前程序所在的文件夹下创建个runs文件夹存储flush_secs:表示写入tensorboard文件的时间间隔comment:文件夹名称的后缀filename_suffix:文件名字后缀add_
scala
r
u013308709
·
2023-11-28 01:15
Pytorch
pytorch
人工智能
python
来自 Google、YouTube、Twitter、Amazon、eBay、Facebook 和 Instagram 的可扩展性经验教训
【搬运】文章来源:https://www.dodgycoder.net/2012/04/
scala
bility-lessons-from-google-youtube.html我在一个地方收集了来自七个流量最大的网站的一些可扩展性课程
粥粥粥少女的拧发条鸟
·
2023-11-27 23:06
TEE
twitter
facebook
spark体验
几大特点快-100*hadoop运行易用-搭好框架之后,支持Java,
Scala
,Python,R,andSQL.通用-sql、流式计算、复杂分析灵活运行-hadoop集群,mesos、k8s等有广泛集成使用体验在接触
scofielong
·
2023-11-27 12:00
技术精进之路
spark
Kafka 设计原理
Round-robinRandomnessKey-ordering2.4、消费者2.4.1、消息队列模型2.4.2、消费方式2.4.3、分区策略RangeRoundRobin2.5、消息可靠性1、Kafka使用场景Kafka是采用
Scala
摸鱼呀
·
2023-11-27 10:20
linux_中间件开发
kafka
分布式
Kafka分布式设计原理
Kafka是啥Kafka是一个由
Scala
语言开发的,多分区,多副本,可扩展,分布式流式平台。
夜晚在编程
·
2023-11-27 10:16
分布式
分布式
队列
kafka
Kafka基本原理详解
,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎,web/nginx日志、访问日志,消息服务等等,用
scala
昙花逐月
·
2023-11-27 10:46
KAFKA
kafka
分布式
big
data
spark篇(一)——Spark核心概念与操作
Spark是用
Scala
语言编写
许志辉Albert
·
2023-11-27 08:53
Intellij之Spark
Scala
开发环境搭建
https://www.jianshu.com/p/200473f264bchttps://blog.csdn.net/a2011480169/article/details/52712421参考博客:1、http://wwwlouxuemingcom.blog.163.com/blog/static/20974782201321953144457/2、http://blog.csdn.net/s
piziyang12138
·
2023-11-27 08:32
Spark分布式机器学习源码分析:线性模型
本文结合机器学习思想与Spark框架代码结构来实现分布式机器学习过程,希望与大家一起学习进步~本文采用的组件版本为:Ubuntu19.10、Jdk1.8.0_241、
Scala
2.11.12、Had
大数据之眸
·
2023-11-27 06:55
【漏洞复现】OpenTSDB 2.4.0 命令注入(CVE-2020-35476)漏洞复现
漏洞描述官方文档这样描述:OpenTSDBisadistributed,
scala
bleTimeSeriesDatabase(TSDB)writtenontopofHBase;翻译过来就是,基于Hbase
丢了少年失了心1
·
2023-11-27 05:34
网络安全
web安全
渗透测试
漏洞复现
opentsdb
漏洞复现
渗透测试
网络安全
window环境下安装spark
0环境先给出安装好后的各个软件版本:win1064bitjava1.8.0
scala
2.12.8
FTDdata
·
2023-11-26 22:42
spark
spark
大数据
记录Windows系统上传文件至虚拟机的方法
获取虚拟机的ip地址ifconfig2.于Window系统传输文件至虚拟机打开cmdscpwin文件路径虚拟机ip:需要保存的文件路径示例:scpC:\Work\Flink\flink-1.14.4-bin-
scala
黑洞边界
·
2023-11-26 22:08
Linux
linux
windows
平台环境部署的相关大数据
本文利用云服务器对大数据平台进行环境部署,包含:服务器使用、环境准备、Hadoop集群完全分布式安装、Zookeeper集群完全分布式安装、HBase完全分布式安装、Hive、
Scala
、Spark、Sqoop
云建站架构师rain
·
2023-11-26 19:45
腾讯云
服务器
云计算
【基础架构】part-2 可扩展性
文章目录可扩展性(
Scala
bility)2.1水平扩展2.2垂直扩展2.3弹性扩展三、可靠性(Reliability)3.1容错机制3.2错误处理和恢复策略3.3监控和自动化运维四、安全性(Security
我の唯一
·
2023-11-26 18:28
架构Node
java
系统架构
[架构相关]基础架构设计原则
基础架构设计原则文章目录基础架构设计原则一、可用性(Availability)1.1、引入冗余1.2、负载均衡1.3、故障转移1.4、备份和恢复策略二、可扩展性(
Scala
bility)2.1水平扩展2.2
我の唯一
·
2023-11-26 18:52
架构Node
架构
php
智能路由器
java
可用性测试
系统架构
jvm
SOFAJRaft-RheaKV 分布式锁实现剖析 | SOFAJRaft 实现原理
SOFAStack(
Scala
bleOpenFinancialArchitectureStack)是蚂蚁金服自主研发的金融级分布式架构,包含了构建金融级云原生架构所需的各个组件,是在金融场景里锤炼出来的最佳实践
SOFAStack
·
2023-11-26 16:39
MongoDB丨(一)MongoDB 快速入门
:::tip补充三高:HighPerformance:对数据高并发读写的需求HugeStorage:对海量数据的高效率存储和访问的需求High
Scala
bility&&HighAvailabi
-Hedon
·
2023-11-26 13:06
数据库
mongodb
nosql
数据库
Spark多文件输出的两种形式
#所需环境版本jdk=1.8
scala
.version=2.11.0spark.version=2.3.2hadoop.verison=2.7.2importorg.apache.hadoop.io.
一只咸鱼va
·
2023-11-26 09:58
spark
spark
scala
大数据
scala
中F[_]中的_是什么意思
在
Scala
中,F[_]表示一个高阶类型(Higher-KindedType)或类型构造器(TypeConstructor)。
血太少了
·
2023-11-26 07:20
图书管理系统源码,图书管理系统开发,图书借阅系统源码SqlHelper数据库访问操作方法简述
SqlHelper是封装了数据库操作方法的类库,使用它我们可以链接数据库操作数据库表数据增删改查,其中主要SqlConnection,ExecuteNonQuery,Execute
Scala
r,ExecuteDataTable
mabanbang
·
2023-11-26 04:46
数据库
oracle
.net
2311skia,02绘制图片
Skia绘图的流程1,API用法(1)drawBitmapvoiddrawBitmap(constSkBitmap&bitmap,Sk
Scala
rleft,Sk
Scala
rtop,constSkPaint
fqbqrr
·
2023-11-26 01:26
skia
c++
cpp
skia
第21章 JUC并发编程
并且可以使用此类实现日期时间数据转换,掌握多线程原子操作类的实现以及与volatile关键字的应用,理解ThreadFactory类的作用与使用,掌握线程同步锁的作用,理解互斥锁与读写锁的应用,掌握线程同步工具类的使用,掌握并发
集合操作
访问
布林组-?
·
2023-11-25 23:43
Java从入门到项目实战
开发语言
java
Postman接口自动化测试之——批量参数化(参数文件)
请求参数化在“CollectionRunner”设置参数文件在集合中点击右侧的三角箭头,打开
集合操作
页,点击“Run”;“DataFileType
潇潇说测试
·
2023-11-25 20:43
软件测试工程师
自动化测试
软件测试
压力测试
功能测试
软件测试
自动化测试
程序人生
职场和发展
Scala
代写:CSE262 Table Driven Scanner代写R编程、R语言程序帮写
代写
Scala
作业,练习
Scala
的编程设计。
wenhuyao
·
2023-11-25 20:16
基于centos7的hadoop2.7、zookeeper3.5、hbase1.3、spark2.3、
scala
2.11、kafka2.11、hive3.1、flume1.8、sqoop1.4组件部署
部署前准备修改主机名1、修改主机名(6台机器都要操作,以Master为举例)hostnamectlset-hostnameMaster(永久修改主机名)reboot(重启系统)修改hosts将第一行127.0.0.1xxxx注释掉,加上:195.168.2.127master195.168.2.128slave1195.168.2.129slave2确认网卡信息vi/etc/sysconfig/n
luoz_python
·
2023-11-25 19:42
大数据平台运维
hadoop
大数据
spark
flume
kafka
Scala
深海奇遇记-当case class遇到了Spark的聚集函数
自从知道有caseclass这个东西以后,一直都比较常用这个东西。但是,最近在测试的时候,突然发现,其实这个东西并不简单,它导致了一个看起来很无厘头的错误,并且花了我两天的时间来调试。在这篇文章里,我会详细记录调试的过程,以及结论。致谢在调试的过程中,得到了我们Hadoop组老大,项目组老大,以及其他同事的深度支持与帮助,非常感谢他们。结论先说结论。如果有朋友不感兴趣,不想深究原理,只是想知道怎么
AlstonWilliams
·
2023-11-25 18:58
在dss中运行
scala
任务报java.lang.NullPointerException: null
版本信息:dss:1.1.1linkis1.1.1hadoop:3.1.3hive:3.1.2spark:3.0.0修改文件:Spark
Scala
Executor.
scala
修改文件内容如下:上图红色标记内容
heheha_zj
·
2023-11-25 18:18
dss
or
linkis
Linux:strace 简介
追踪指定进程3.1.1通过程序名追踪进程3.1.2通过进程ID(PID)追踪程序3.1.3追踪子进程或线程3.2系统调用情况统计3.3追踪过滤3.3.1追踪指定的系统调用集合3.3.2追踪对指定文件句柄
集合操作
的系统调用
JiMoKuangXiangQu
·
2023-11-25 17:45
#
追踪
&
调试
&
性能
调试追踪
strace
Linux
MySQL存储Kafka偏移量-快速入门
Scala
篇
所需pom依赖org.scalikejdbcscalikejdbc_2.112.5.2org.scalikejdbcscalikejdbc-config_2.112.5.2在Mysql中创建表CREATETABLE`offset`(`groupId`varchar(255)DEFAULTNULL,`topic`varchar(255)DEFAULTNULL,`partition`int(11)DE
Climber_ty
·
2023-11-25 17:12
笔记
kafka
mysql
spark
Opencv 在图像上进行标注(画框+写字)
通常要用矩形框框选出目标的位置,并在旁边附上标签在opencv实现这一目标主要用到两个函数,rectangle()和putText()函数原型:voidrectangle(Mat&img,Rectrec,const
Scala
r
璇焱如柳
·
2023-11-25 14:03
图像处理
opencv
opencv
计算机视觉
scala
系列之 16
scala
的柯理化
20柯理化柯里化(Currying)是把接受多个参数的函数变换成接受一个单一参数(最初函数的第一个参数)的函数,并且返回接受余下的参数且返回结果的新函数的技术。是把接受多个参数的函数变成接受一个参数的函数;柯理化的两种表现形式:以加法函数为例:defcurring(x:Int)(y:Int)=x+ydefcurring(x:Int)=(y:Int)=>x+y在柯理化形式的基础上,固定一个参数,传入
海牛大数据_青牛老师
·
2023-11-25 13:11
opencv中的全部绘图函数(文字,线,矩形,圆,椭圆)
voidputText(Mat&img,//原图conststring&text,//带绘制文字Pointorg,//文字绘制的左下角intfontFace,//字体类型doublefontScale,//字体大小
Scala
rcolor
神域炎阳
·
2023-11-25 09:19
opencv
opencv
计算机视觉
c++
用opencv绘制一个箭头,沿着圆运动并留下运动轨迹(c++)
usingnamespacecv;intmain(){//创建一个黑色背景的图像,大小为400*400Matimage(400,400,CV_8UC3,
Scala
r(0,0,0));//设置箭头的初始位置和方向
大风吹~~~~~
·
2023-11-25 09:12
opencv
c++
人工智能
flask-sqlalchemy输出json格式数据
flask-sqlalchemy查询数据:user=db.session.execute(db.select(User).filter_by(username=username)).
scala
r_one
一叶晨风
·
2023-11-25 08:03
flask
json
python
sql
【曹工杂谈】Maven IOC容器的下半场:Google Guice
Guice的应用也还比较广泛,以下轮子中(仅部分)都有它活跃的身影:google内部
scala
testTestNGCaffeineCacheSpringSecurityConfigelasticsearchjenkins
逐日者
·
2023-11-25 08:12
Eclipse集成
scala
-maven-plugin插件
1.概述
scala
-maven-plugin这个插件是用来让maven能够编译、测试、运行
scala
项目的,使用文档参考:
scala
-maven-plugin2.使用插件net.alchim31.maven
scala
-maven-plugin3.2.0
scala
-compile-firstprocess-resourcesadd-sourcecompile
scala
-test-compilepro
南归北隐
·
2023-11-25 08:58
scala
maven
eclipse
Flume采集Kafka并把数据sink到OSS
安装环境Java环境,略(Flume依赖Java)Flume下载,略
Scala
环境,略(Kafka依赖
Scala
)Kafak下载,略Hadoop下载,略(不需要启动,写OSS依赖)配置Hadoop下载JindoSDK
不住在隔壁的老王
·
2023-11-25 07:34
大数据
flume
kafka
大数据
01-详细介绍函数式接口和Lambda表达式语法
该接口可以包含其他非抽象方法)接口上使用@FunctionalInterface注解可以验证该接口是否为函数式接口,javadoc生成的文档时也会保留该注解,若接口中有多个抽象方法编译器会报错随着Python,
Scala
echo 云清
·
2023-11-24 20:41
Java8
开发语言
Java8
函数式接口
Lambda表达式
HTML5之SVG的使用
SVG指可伸缩矢量图形(
Scala
bleVectorGraphics);SVG用于定义用于网络的基于矢量的图形;SVG使用XML格式定义图形;SVG图像在放大或改变尺寸的情况下其图形质量不会有损失;SVG
暖A暖
·
2023-11-24 20:29
vue使用SVG矢量图
SVG(
Scala
bleVectorGraphics,可缩放矢量图形)是一种使用XML标记语言描述二维图形和图形应用的开放标准,其核心特性是可缩放性,即使放大缩小都不会失去清晰度和质量。
我的椰子啊
·
2023-11-24 19:53
vue
vue.js
前端
javascript
乐字节-Java8核心特性实战-Lambda表达式
很多语言(Groovy、
Scala
等)从设计之初就支持Lambda表达式。但是java中使
乐字节
·
2023-11-24 19:52
如何在vue项目中引入svg图标
概述svg,即
Scala
bleVectorGraphics,可缩放矢量图形。相对于jpg,png图标,svg可以在任意分辨率下保证不会模糊,即便是网页缩放了。
别说小李
·
2023-11-24 19:49
前端
vue.js
javascript
elementui
Vue新项目中如何使用SVG矢量图
SVG指可伸缩矢量图形(
Scala
bleVectorGraphics)SVG用来定义用于网络的基于矢量的图形SVG使用XML格式定义图形SVG图像在放大或改变尺寸的情况下其图形质量不会有所损失SVG是万维网联盟的标准二
run-Ameng
·
2023-11-24 19:18
vue
项目
前端
Java与
Scala
中的偏函数与偏应用函数
在Java和
Scala
中,偏函数(PartialFunction)和偏应用函数(PartialApplicationFunction)是函数式编程中常用的概念。它们可以帮助简化代码并增加代码的可读性。
HackLogic
·
2023-11-24 18:11
java
scala
开发语言
Java
Kotlin —— 内联函数
一、前言Kotlin标准库中所有
集合操作
的函数都是内联的(inline),例如:publicinlinefunIterable.forEach(action:(T)->Unit):Unit{for(elementinthis
青叶小小
·
2023-11-24 17:01
【Spark源码分析】事件总线机制分析
LiveListenerBus相关的部分类图如下:由于Spark使用
scala
语言
顧棟
·
2023-11-24 16:02
Spark
spark
大数据
Doris系列之高级功能-Rollup操作
Doris系列注:大家觉得博客好的话,别忘了点赞收藏呀,本人每周都会更新关于人工智能和大数据相关的内容,内容多为原创,PythonJava
Scala
SQL代码,CVNLP推荐系统等,SparkFlinkKafkaHbaseHiveFlume
陈万君Allen
·
2023-11-24 16:31
Java和大数据
大数据
数据库
Doris系列之物化视图操作
Doris系列注:大家觉得博客好的话,别忘了点赞收藏呀,本人每周都会更新关于人工智能和大数据相关的内容,内容多为原创,PythonJava
Scala
SQL代码,CVNLP推荐系统等,SparkFlinkKafkaHbaseHiveFlume
陈万君Allen
·
2023-11-24 16:31
Java和大数据
大数据
数据库
kafka常见面试问题(1)
这个消息传递应用程序是用“
scala
”编码的。基本上,这个项目是由Apache软件启动的。Kafka的设计模式主要基于事务日志设计。问题2:Kafka中有哪几个组件?
Computer_hello
·
2023-11-24 15:18
kafka
上一页
16
17
18
19
20
21
22
23
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他