E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Spark安装部署
Nginx介绍与安装
3、异步,非阻塞4、nginx的内部技术架构5、yum
安装部署
nginx和配置管理1.获取nginx的yum源2.安装nginx3.启动nginx4.检查是否启动5.设置开机启动6.通过nginx命令控制
Starts️
·
2024-01-13 01:59
linux
服务器
nginx
产品调研——AI平台
腾讯云-TI平台TI平台将tensorflow、pytorch、
spark
环境等均集成到一个Notebook容器中,供用户进行使用。sh-4.2$condaenvlist#condae
chenxy02
·
2024-01-13 00:49
人工智能
人工智能
linux安装tomcat_【实战演练】Linux操作系统07-用tomcat搭建网站
源码程序:JSPGOU(开源代码分享:https://www.jb51.net/codes/552125.html,侵权删除)tomcat:8.0.36数据库:mysql5.7JAVA:JDK7u80一、
安装部署
weixin_39864601
·
2024-01-13 00:41
linux安装tomcat
tomcat网站测试linux,【实战演练】Linux操作系统07-用tomcat搭建网站
实验环境:操作系统:CentOS6.5tomcat:8.0.36数据库:mysql5.7JAVA:JDK7u80一、
安装部署
1、初始化配置关闭selinux设置setenforce0vi/etc/selinux
weixin_39533174
·
2024-01-13 00:11
tomcat网站测试linux
Hazelcast使用详解
使用介绍主要优缺点应用场景Java使用案例
安装部署
单节点部署集群部署最新版本特性介绍架构设计作为集群管理器的使用示例监控管理工具Hazelcast与SpringBoot整合Hazelcast与Vert.x
有梦想的攻城狮
·
2024-01-12 23:30
架构设计
hazelcast
缓存
Spark
中Rdd算子和Action算子--学习笔记
RDD算子filter"""rdd.filter(f):根据f函数中的判断条件对rdd追踪的数据进行过滤保留条件为True对应的rdd数据"""frompy
spark
import
Spark
Contextsc
祈愿lucky
·
2024-01-12 23:24
大数据
spark
学习
笔记
如何进行大数据系统测试
Apache
Spark
架构:
Spark
提供了基于内存
Feng.Lee
·
2024-01-12 21:41
系统测试
项目管理
测试工具
大数据
出海企业如何 "借力" 实现快速成长 | Google Play 开发者中文播客节目
image本期简介"独行快,众行远",作为帮助初创企业获得快速成长的加速器,Lean
Spark
是连接不同伙伴资源的整合者,更是技术赋能的有力后盾、帮助创业团队出海开辟市场时避坑的引路人。
谷歌开发者
·
2024-01-12 21:20
VMware vcenter6.7安装(基于windows客户端)
从官网或者百旺网盘(可以自行搜索,或者私信我要)二、
安装部署
vcenter6.7将下载好的镜像文件拷贝到一台Windows机器上,解压。
忍冬行者
·
2024-01-12 20:39
linux
师傅带练|在线实习项目,提供实习证明
机器学习)某平台广东省区采购数据分析(Excel供需分析)产品订单的数据分析与需求预测(Python营销分析)基于注意力机制的评论者满意度分析(TensorFlow与NLP)基于锅炉工况实现蒸汽产生量预测(
Spark
泰迪智能科技
·
2024-01-12 19:11
大数据
大数据在线实习项目
大数据
Linux学习笔记——ZooKeeper集群
安装部署
5.8、ZooKeeper集群
安装部署
5.8.1、简介Zookeeper是一个分布式的、开放源码的分布式应用程序协调服务,是Hadoop和HBase的重要组件。
kxttmx
·
2024-01-12 18:16
linux
学习
zookeeper
71、
Spark
SQL之JDBC数据源复杂综合案例实战
JDBC数据源实战
Spark
SQL支持使用JDBC从关系型数据库(比如MySQL)中读取数据。读取的数据,依然由DataFrame表示,可以很方便地使用
Spark
Core提供的各种算子进行处理。
ZFH__ZJ
·
2024-01-12 18:37
zookeeper下载
安装部署
zookeeper是一个为分布式应用提供一致性服务的软件,它是开源的Hadoop项目的一个子项目,并根据google发表的一篇论文来实现的。zookeeper为分布式系统提供了高效且易于使用的协同服务,它可以为分布式应用提供相当多的服务,诸如统一命名服务,配置管理,状态同步和组服务等。1、下载zookeeper下载地址:ApacheZooKeeper先在Windows系统下载,下载完之后可以通过X
倚-天-照-海
·
2024-01-12 18:38
kafka
zookeeper
linux
分布式
kafka下载
安装部署
它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、storm/
spark
流式处理引擎。kafka的特性:1.高吞吐量、低延迟
倚-天-照-海
·
2024-01-12 15:25
kafka
kafka
分布式
在浏览器中使用js-
spark
-md5计算文件的MD5
在浏览器中使用js-
spark
-md5计算文件的MD5最近开发一个视频系统,用户需要把文件上传到服务器。服务器再上传到转码服务器,编码为m3u8格式。我觉得客户端可以直接上传到转码服务器。
JonathanYee
·
2024-01-12 14:29
流量主答题小程序源码系统:自定义题库或一键导入,采用PHP+MySQL 带完整的
安装部署
教程
随着互联网的发展,答题类小程序因其互动性强、用户粘性高等特点,受到了广泛的欢迎。小编来给大家分享一款流量主答题小程序源码系统。该系统采用PHP+MySQL技术,功能强大且易于扩展,为开发者提供了一个完整的答题平台解决方案。以下是部分代码示例:系统特色功能:1.自定义题库:开发者可根据需求,自由添加、编辑、删除题目,支持单选、多选、填空等多种题型。题库可按分类管理,方便后续的题目筛选和推送。2.一键
源码集结地
·
2024-01-12 13:55
源码分享
流量主答题小程序
流量主答题小程序源码
流量主答题小程序系统
答题小程序源码系统
答题小程序源码
小程序
微信小程序
AI系统ChatGPT网站系统源码AI绘画详细搭建部署教程,支持GPT语音对话+DALL-E3文生图+GPT-4多模态模型识图理解
一、前言
Spark
Ai创作系统是基于ChatGPT进行开发的Ai智能问答系统和Midjourney绘画系统,支持OpenAI-GPT全模型+国内AI全模型。
白云如幻
·
2024-01-12 12:39
人工智能
ChatGPT
软件源码
人工智能
chatgpt
语音识别
midjourney
AI作画
gpt
【
spark
】
spark
启动报错“
spark
RpcEnv already stopped“
原因:write时候没添加awaitTermination()造成rpcEnv提前结束了。fakeDf.writeStream.format("console").outputMode("append").trigger(Trigger.Continuous("3second")).start().awaitTermination()
lisacumt
·
2024-01-12 09:09
spark
【scala】编译build报错 “xxx is not an enclosing class“
private[sources]valcreationTimeMs:Long={valsession=
Spark
Session.getActiveSession.orElse(
Spark
Session.getDefaultSession
lisacumt
·
2024-01-12 09:07
scala
后端
ubuntu18.04
安装部署
环境
部署项目云服务器放开端口,虚拟机关闭防火墙#防火墙状态,如果输出显示Status:inactive,表示UFW处于禁用状态sudoufwstatus#关闭防火墙sudoufwdisable#启动防火墙sudoufwenable#设置防火墙默认策略的命令,将所有出站连接允许通过防火墙sudoufwdefaultallowoutgoing#设置防火墙默认策略的命令,将所有入站连接禁止通过防火墙sudo
救救可怜孩子吧
·
2024-01-12 09:04
linux
Keepalived 实现 Kibana 的高可用
目录一、Keepalived
安装部署
1.1准备工作1.2下载安装包并解压1.3编译1.4创建服务文件夹1.5创建服务文件1.6创建检测脚本二、启动keepalived三、检测是否安装成功3.1查看服务状态
季风泯灭的季节
·
2024-01-12 09:02
ELK技术栈
linux
运维
keepalived
高可用
kibana
Spark
避坑系列(三)(
Spark
Core-RDD 依赖关系&持久化&共享变量)
大家想了解更多大数据相关内容请移驾我的课堂:大数据相关课程剖析及实践企业级大数据数据架构规划设计大厂架构师知识梳理:剖析及实践数据建模Py
Spark
入坑系列第三篇,该篇章主要介绍
spark
的编程核心RDD
garagong
·
2024-01-12 09:13
大数据
spark
大数据
hadoop
分布式
数据处理
分布式任务调度平台XXL-JOB
安装部署
分布式任务调度平台XXL-JOB相关教程:使用教程分布式任务调度平台XXL-JOB使用教程_foxofwind的博客-CSDN博客分布式任务调度平台XXL-JOB使用教程https://blog.csdn.net/foxofwind/article/details/120783695集成CAS单点登录调度平台XXL-JOB集成CAS单点登录_foxofwind的博客-CSDN博客本文用最简单的方法
菜鸟老胡~
·
2024-01-12 08:43
技术学习
分布式
实时大数据
大数据
数据仓库
定时任务
Spark
- 直接操作数据源 MySQL
答案就是使用
spark
的计算能力的,我们可以将mysql数据源接入到
spark
中。
kikiki2
·
2024-01-12 07:49
Spark
指令参数,RDD--学习笔记
1,
Spark
的指令参数参数对
spark
所有指令都有效
Spark
指令参数#表示引用运行的模式,要么是本地local要么是集群(Standalone、YARN、Mesos)了--masterMASTER_URL
祈愿lucky
·
2024-01-12 07:05
大数据
大数据
spark
python
Spark
基础
Spark
基础建库一定要指定字符集,错了好多次了pip卸载某个模块pipuninstallpandas--下载其它的改掉pandas即可pipinstall-ihttps://pypi.tuna.tsinghua.edu.cn
中长跑路上crush
·
2024-01-12 07:33
Spark阶段
spark
大数据
分布式
Spark
on Hive及
Spark
SQL的运行机制
Spark
onHive集成原理HiveServer2的主要作用:接收SQL语句,进行语法检查;解析SQL语句;优化;将SQL转变成MapReduce程序,提交到Yarn集群上运行
Spark
SQL与Hive
小希 fighting
·
2024-01-12 07:56
spark
hive
sql
Spark
SQL基础
Spark
SQL基本介绍什么是
Spark
SQL
Spark
SQL是
Spark
多种组件中其中一个,主要是用于处理大规模的结构化数据什么是结构化数据:一份数据,每一行都有固定的列,每一列的类型都是一致的我们将这样的数据称为结构化的数据例如
小希 fighting
·
2024-01-12 07:55
spark
sql
大数据
Spark
六:
Spark
底层执行原理
Spark
Context、DAG、TaskScheduler
Spark
底层执行原理学习
Spark
运行流程学习链接:https://mp.weixin.qq.com/s/caCk3mM5iXy0FaXCLkDwYQ一、
Spark
运行流程流程:
Spark
Context
eight_Jessen
·
2024-01-12 07:19
scala
spark
spark
大数据
Spark
九:
Spark
调优之Shuffle调优
Spark
shuffle调优方法map端和reduce端缓存大小设置,reduce端重试次数和等待时间间隔,以及bypass设置学习资料:https://mp.weixin.qq.com/s/caCk3mM5iXy0FaXCLkDwYQ
eight_Jessen
·
2024-01-12 07:19
scala
spark
spark
大数据
py
spark
使用udf 进行预测,发现只起了一个计算节点
Py
Spark
UDF只使用一个计算节点的问题原因分析默认的并行度设置Py
Spark
在执行UDF(用户定义函数)时,默认可能不会利用所有可用的计算节点。
samoyan
·
2024-01-12 07:18
服务器
python
机器学习
Spark
: 检查数据倾斜的方法以及解决方法总结
1.使用
Spark
UI
Spark
UI提供了一个可视化的方式来监控和调试
Spark
作业。你可以通过检查各个Stage的任务执行时间和数据大小来判断是否存在数据倾斜。
samoyan
·
2024-01-12 07:18
python
spark
大数据
分布式
Spark
SQL进阶
DataFrame详解清洗相关API去重API删除空缺值的API替换缺失值的APIfrompy
spark
import
Spark
Conf,
Spark
Contextimportosfrompy
spark
.sqlimport
Spark
Session
小希 fighting
·
2024-01-12 07:44
spark
sql
大数据
Zookeeper+Hadoop+
Spark
+Flink+Kafka+Hbase+Hive
说明Zookeeper+Hadoop+
Spark
+Flink+Kafka+Hbase+Hive完全分布式高可用集群搭建下载https://archive.apache.org/dist/我最终选择Zookeeper3.7.1
nsa65223
·
2024-01-12 06:08
hadoop
zookeeper
spark
Structured Streaming 官方例子
packageohmysummerimportjava.sql.Timestampimportorg.apache.
spark
.sql.
Spark
Sessionimportorg.apache.
spark
.sql.streaming
焉知非鱼
·
2024-01-12 02:08
Spark
完全分布式集群搭建
环境准备服务器集群我用的CentOS-6.6版本的4个虚拟机,主机名为hadoop01、hadoop02、hadoop03、hadoop04,另外我会使用hadoop用户搭建集群(生产环境中root用户不是可以任意使用的)
spark
小猪Harry
·
2024-01-12 00:41
RabbitMQ 入门指南——安装
RabbitMQQuick(快速手册)RabbitMQ从入门到精通-CSDN专栏RabbitMQ入门教程ForJavaRabbitMQ原理介绍及
安装部署
RabbitM
weixin_33704234
·
2024-01-11 21:39
py
spark
config设置、增加配置、限制_success文件生成;
spark
-submit 集群提交参数
1、py
spark
增加config设置javaheap错误增加内存
spark
=(
Spark
Session.builder.config("
spark
.hadoop.hive.exec.dynamic.partition
loong_XL
·
2024-01-11 18:00
机器学习
python
数据挖掘
linux
运维
服务器
《Py
Spark
大数据分析实战》-27.数据可视化图表Pyecharts介绍
对大数据技术栈Hadoop、Hive、
Spark
、Kafka等有深入研究,对Data
wux_labs
·
2024-01-11 16:21
PySpark大数据分析实战
数据分析
数据挖掘
大数据
数据科学
PySpark
Docker
安装部署
Zabbix
一、Zabbix概述1、Zabbix简介Zabbix是一个企业级的分布式开源监控方案。Zabbix是一款能够监控各种网络参数以及服务器健康性和完整性的软件。Zabbix使用灵活的通知机制,允许用户为几乎任何事件配置基于邮件的告警。这样可以快速反馈服务器的问题。基于已存储的数据,Zabbix提供了出色的报告和数据可视化功能。这些功能使得Zabbix成为容量规划的理想方案。Zabbix支持主动轮询和被
wespten
·
2024-01-11 16:35
Docker
K8s
云原生
CICD
DevOps
docker
zabbix
运维
Prometheus
安装部署
官网安装包下载:https://prometheus.io/download/Prometheus组件:https://github.com/prometheus架构图1、下载并解压安装包下载位置[root@prometheus~]#wgethttps://github.com/prometheus/prometheus/releases/download/v2.18.1/prometheus-2
UStarGao
·
2024-01-11 15:20
What does `rpm -ivh` do?
rpm安装rpm-ivh--relocate/=/opt/gaimgaim-1.3.0-1.fc4.i386.rpm指定安装到/opt/gaim[Ref]rpm-uvh和-ivh有什么区别以及zabbix
安装部署
张紫娃
·
2024-01-11 13:08
LInux
linux
运维
服务器
完整的JAVA酒店管理系统源码带
安装部署
文档
完整的JAVA酒店管理系统源码带
安装部署
文档002.png(135.63KB,下载次数:0)下载附件设为封面半小时前上传
依星net188.com
·
2024-01-11 13:39
酒店管理系统
Linux Centos7.x下
安装部署
VNC的实操详述
1、获取当前系统启动模式[root@localhost~]#systemctlget-defaultmulti-user.target2、查看配置文件[root@localhost~]#cat/etc/inittab#inittabisnolongerusedwhenusingsystemd.##ADDINGCONFIGURATIONHEREWILLHAVENOEFFECTONYOURSYSTEM
Almeche
·
2024-01-11 11:16
工作
Ambari
安装部署
教程(手把手教学)【超级详细】
Ambari的
安装部署
这里有详细的Ambari的
安装部署
,快来围观,保证成功!
小伍_Five
·
2024-01-11 11:20
ambari
php
服务器
AI绘画Midjourney绘画提示词Prompt大全,各种风格大全
一、Midjourney绘画工具
Spark
Ai创作系统是基于ChatGPT进行开发的Ai智能问答系统和Midjourney绘画系统,支持OpenAI-GPT全模型+国内AI全模型。
白云如幻
·
2024-01-11 10:48
人工智能
AIGC
教程
人工智能
chatgpt
语音识别
midjourney
AI作画
prompt
全志V853 NPU开发之工具安装
经测试NPU工具支持下列Linux发行版:Ubuntu20.04其他部分Linux发行版理论上也可以支持
安装部署
,但此处未作验证。
DOT小文哥
·
2024-01-11 08:17
全志V853
全志-工具&测试
全志
NPU
人工智能
开发工具
V853
Spark
---RDD序列化
文章目录1什么是序列化2.RDD中的闭包检查3.Kryo序列化框架1什么是序列化序列化是指将对象的状态信息转换为可以存储或传输的形式的过程。在序列化期间,对象将其当前状态写入到临时或持久性存储区。以后,可以通过从存储区中读取或反序列化对象的状态,重新创建该对象。2.RDD中的闭包检查从计算的角度,算子以外的代码都是在Driver端执行,算子里面的代码都是在Executor端执行。那么在scala的
肥大毛
·
2024-01-11 07:33
scala
大数据
spark
spark
大数据
分布式
Spark
---行动算子RDD
1.1reduce1.2collect1.3first1.4count1.5take1.6takeOrdered1.7aggregate1.8fold1.9countByKey1.10countByValue1.11save相关算子1.12foreach1.行动算子
Spark
肥大毛
·
2024-01-11 07:03
大数据
spark
scala
spark
大数据
分布式
spark
相关
提示:以下是本篇文章正文内容,下面案例可供参考一、算子1.1sample在调用
spark
的samp
晴山ぺ
·
2024-01-11 07:29
java
spark
大数据
分布式
上一页
31
32
33
34
35
36
37
38
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他