E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
大数据系统运维笔记
基于Ubuntu 18.04.3操作系统的TensorFlow 2.1.0、PyTorch 1.4.0、OpenCV 4.2.0、Darknet深度学习环境搭建
回顾研究生毕业的一年半,期间从事过桌面应用开发、CAN\串口开发、无人机目标检测开发、爬虫、数据工程、
大数据系统
运维等。
micromicrofat
·
2022-07-11 07:57
深度学习
Python
tensorflow
pytorch
ubuntu
opencv
darknet
再也不怕面试官追问我设计模式了
1.策略模式1.1业务场景假设有这样的业务场景,
大数据系统
把文件推送过来,根据不同类型采取不同的解析方式。多数的小伙伴就会写出以下的代码:if(type=="A"){//按照A格式解析}elsei
·
2022-06-23 15:38
设计模式java程序员面试
数栈技术大牛分享:云原生
大数据系统
架构的实践和思考
ArchSummit2021年全球架构师峰会于4月25日-26日在上海举办,袋鼠云运维开发技术专家沙章利(花名:浣熊)应邀出席此次峰会,并在4月26日下午的《弹性架构实践》专题会场上为大家带来《弹性云原生
大数据系统
架构实践
数栈DTinsight
·
2022-06-10 07:42
数栈精品技术文章
数据库
大数据
hadoop
分布式
云原生
大数据系统
学习路线
一,题记要说当下IT行业什么最火?ABC无出其右。所谓ABC者,AI+BigData+Cloud也,即人工智能、大数据和云计算(云平台)。每个领域目前都有行业领袖在引领前行,今天我们来讨论下大数据BigData这个方向。二,大数据里面的角色角色一:大数据工程大数据工程需要解决数据的定义、收集、计算与保存的工作,因此大数据工程师们在设计和部署这样的系统时首要考虑的是数据高可用的问题,即大数据工程系统
✾ ͡冷೨夏ʚɞ͜✿
·
2022-05-22 07:29
大数据学习
大数据开发
Hadoop
大数据
大数据学习
大数据开发
编程语言
程序员
谷歌三件套 - Bigtable
值得注意的是,看Bigtable的内容千万不要带着关系型数据库的思维,建议看之前看看《数据密集型应用系统设计》的第三章,里面提到了LSM-Tree以及
大数据系统
设计思想,或
·
2022-05-21 19:05
google
八种解决 Spark 数据倾斜的方法
一、什么是数据倾斜对Spark/Hadoop这样的分布式
大数据系统
来讲,数据量大并不可怕,可怕的是数据倾斜。对于分布式系统而言,理想情况下,随着系统规模(节点数量)的增加,应用整体耗时线性下降。
坨坨的大数据
·
2022-05-10 16:46
计算机毕业设计springboot实验填报系统
最新计算机专业原创毕业设计参考选题都有源码+数据库是近期作品ling取参考你的选题刚好在下面有,有时间看到机会给您发1ssm儿童成长记录系统2ssm基于UNI的个人云相册管理系统3jsp人才库构建研究4ssm医疗
大数据系统
尉~~qhc8886
·
2022-05-03 20:53
java
运维笔记
-nginx详解
目录1.简介2.正向代理与反向代理3.nginx的安装部署(基于Centos8-stream操作系统)4.nginx配置文件详解5.高效的Web服务器-nginx5.1nginx服务器基本配置5.2nginx-基于IP的访问控制5.2基于授权的访问控制5.3apache与nginx的访问控制对比6.反向代理服务器-nginx6.1.配置环境说明6.2.反向代理配置6.3.负载均衡7.工作状态统计监
言一☜
·
2022-05-01 16:04
运维
apache
nginx
“进入亚马逊让我的简历发光,我却选择离职”
由
大数据系统
软件国家工程研究中心、中国计算机学会开源发展委员会主办的CCF高校行清华开源大讲堂第三期将于今天下午2点正式开讲,扫码立即预约!
CSDN 程序人生
·
2022-04-15 08:34
java
linux
物联网
大数据
面试
java spring boot 自动化
运维笔记
-rancher
rancher@centos7@hyperv在win10hyperv上安装centos7启动centos7githubip地址不做这一步,k3s安装命令“curl-sfLhttps://get.k3s.io|sh-”中访问github将无法访问echo"#去https://github.com/521xueweihan/GitHub520找######githubhostsend">/etc/ho
Leibniz infinity sml
·
2022-03-25 14:08
java
MPC引爆信息安全全生态
嵌入区块链技术的
大数据系统
,充分运用区块链可追溯、难复制的特性,实现信息不可复制的分享,相较基于传统网络的管理模式大大提高了数据信息安全程度。再通过建设分层安全技术体系
·
2022-03-13 16:40
区块链5g人工智能云计算大数据
Snowflake如日中天是否代表Hadoop已死?大数据体系到底是什么?
简介:本文作者关涛是
大数据系统
领域的资深专家,在微软(互联网/Azure云事业群)和阿里巴巴(阿里云)经历了大数据发展20年过程中的后15年。
阿里云云栖号
·
2022-02-25 15:43
云栖号技术分享
hadoop
大数据
大数据系统
和分析技术综述【程学旗】
本文结构1大数据处理与系统1.1批量数据处理系统1.1.1批量数据的特征与典型应用1.1.2代表性的处理系统1.2流式数据处理系统1.2.1流式数据的特征及典型应用1.2.2代表性的处理系统1.3交互式数据处理1.3.1交互式数据处理的特征与典型应用1.3.2代表性的处理系统1.4图数据处理系统1.4.1图数据的特征及典型应用1.4.2代表性图数据处理系统1.5小结2大数据分析2.1深度学习2.2
weixin_30362083
·
2022-02-23 09:57
冰火两重天:新零售后半场,天猫速度带来行业新希望
图片发自App在产品上,从小龙虾到进口水果甚至是冰镇西瓜,天猫超市为了获得用户可以说是用出了浑身解数,但是重点仍然放在依托于阿里庞
大数据系统
的配送速度上,利用在人群聚集点例如
赵九_22ec
·
2022-02-20 16:57
大数据系统
的多种处理技术
对于仅需要批处理的工作负载,如果对时间不敏感,比其他解决方案实现成本更低的Hadoop将是一个比较好的选择。仅需流式处理的工作负载,Starm可支持更广泛的语言并实现极地延迟的处理。但默认配置可能产生重复结果并且无法保证顺序。Smaza与YARN和kafka密集成可提供更大灵活性,更易用的多团队使用,以及更简单的复制和状态管理。对于混合型工作负载,Spark可提供高速批处理和微批处理批次的流处理,
黑道皇后红红火火
·
2022-02-16 00:21
智慧城市规划
大数据系统
软件解决方案
智慧城市规划
大数据系统
软件解决方案智慧城市数据融合可视化系统的设计实施经验进行总结,在设计理念、设计方法、技术实现、常见问题等方面,对设计实施经验进行总结,以方便读者更好的了解可视化系统的设计实现。
·
2022-02-15 23:57
javascript
大数据就业的三大方向和十种岗位
他们的基础岗位分别是
大数据系统
研发工程师、大数据应用开发工程师、大数据分析师。对于求职者来说,大数据只是所从事事业的一个方向,而职业岗位则是决定做什么事?
编程小世界
·
2022-02-15 16:08
实时 OLAP 系统 Druid
0.Overview后面将写几篇文章介绍一下OLAP的
大数据系统
架构。这里的Druid不是阿里巴巴的连接池,而是用于大数据实时OLAP的Druid。OLAP和OLTP经常被拿到一起来讨论。
legendtkl
·
2022-02-14 19:17
Kafka 系统学习
在
大数据系统
中,常常会碰到一个问题,整个大数据是由各个子系统组成,数据需要在各个子系统中高性能、低延迟的不停流转。传统的企业消息系统并不是非常适合大规模的数据处理。为了同
向梦而来
·
2022-02-07 16:28
mysql8.0版本的服务器名称_MySQL 8.0安装部署-
运维笔记
MySQL8正式版8.0.11已发布,官方表示MySQL8要比MySQL5.7快2倍,还带来了大量的改进和更快的性能!一.Mysql8.0版本相比之前版本的一些特性1)默认编码utf8默认编码使用utf8mb4,utf8mb4编码是utf8编码的超集,兼容utf8,并且能存储4字节的表情字符历史,MySQL数据库的"utf8"并不是真正概念里的UTF-8。MySQL中的"utf8"编码只支持最大3
weixin_39716043
·
2022-02-06 13:26
Elasticsearch——聚合搜索
实时性高,所有的计算结果都是即时返回的,而hadoop等
大数据系统
一般都是T+1级别的。聚合框架有助于根据搜索查询提供聚合数据。聚合查询是数据库中重要的功能特性,ES作为搜索引擎兼数据库,同样提
小波同学
·
2022-02-04 18:53
大数据系统
与大规模数据分析--第二次作业操作,hadoop编程、同步图计算
大数据第二次作业操作大家好,我是【豆干花生】,这次我带来了大数据的第二次实践作业~主要内容为hadoop编程,使用GraphLite进行同步图计算可以说十分具体了,包含了具体操作、代码指令、各个步骤截图。文章目录大数据第二次作业操作一.作业内容二.第一个作业--hadoop编程1.具体代码如下:2.准备工作:3.具体操作三.第二个作业--同步图计算,SSSP1.具体代码2.准备工作3.具体操作完成
豆干花生
·
2021-08-11 16:40
大数据
hadoop
大数据
hbase
hdfs
大数据系统
与大规模数据分析--第一次作业操作,HDFS、HBase编程
第一次作业操作大家好,我是【豆干花生】,这次我带来了大数据的第一次实践作业~可以说十分具体了,包含了具体操作、代码指令、各个步骤截图。文章目录第一次作业操作一.作业内容二.准备工作三.编写程序四.运行程序五.保存一.作业内容这里选择docker来配置环境这里采用第0组的中间处理二.准备工作docker里已经配置好的环境:1.进入容器dockerrun-itddingms/ucas-bdms-hw-
豆干花生
·
2021-08-11 16:04
大数据
hadoop
docker
java
大数据
Kettle on MaxCompute使用指南
Kettle支持丰富的数据输入输出源,数据库支持Oracle,MySql,DB2等,也支持业界各种开源的
大数据系统
,例如HDFS,HBase,Cassandra,MongoDB等。
·
2021-08-10 12:03
sqljob
Snowflake如日中天是否代表Hadoop已死?大数据体系到底是什么?
简介:本文作者关涛是
大数据系统
领域的资深专家,在微软(互联网/Azure云事业群)和阿里巴巴(阿里云)经历了大数据发展20年过程中的后15年。
·
2021-08-04 12:45
hadoop大数据
TDengine在黑格智造的落地应用
【作者介绍】:大罗,黑格智造架构师,主要从事云原生,
大数据系统
开发,曾参与国家示范级工业互联网系统建设等。
·
2021-07-27 19:05
大数据就业的三大方向和十种岗位
他们的基础岗位分别是
大数据系统
研发工程师、大数据应用开发工程师、大数据分析师。对于求职者来说,大数据只是所从事事业的一个方向,而职业岗位则是决定做什么事?
yoku酱
·
2021-06-27 05:11
编译优化 | LLVM代码生成技术详解及在数据库中的应用
近年来,我们可以在数据库、
大数据系统
和AI平台等领域看到很多性能优化的技术,技术涵盖体系结构、编译技术和高性能计算等领域。
·
2021-06-25 15:28
llvm数据库阿里云
编译优化 | LLVM代码生成技术详解及在数据库中的应用
近年来,我们可以在数据库、
大数据系统
和AI平台等领域看到很多性能优化的技术,技术涵盖体系结构、编译技术和高性能计算等领域。
·
2021-06-24 23:23
编译优化 | LLVM代码生成技术详解及在数据库中的应用
近年来,我们可以在数据库、
大数据系统
和AI平台等领域看到很多性能优化的技术,技术涵盖体系结构、编译技术和高性能计算等领域。
·
2021-06-24 18:03
Docker容器内部端口映射到外部宿主机端口
[Docker容器内部端口映射到外部宿主机端口-
运维笔记
]Docker允许通过外部访问容器或者容器之间互联的方式来提供网络服务。
yichen_china
·
2021-06-22 16:11
运维笔记
:购买vps服务器后,在Linux最初需要做的几件事
本人系统为CentOS8可通过命令cat/etc/redhat-release查看自己系统版本[root@EasygoingEssential-VM/]#cat/etc/redhat-releaseCentOSLinuxrelease8.0.1905(Core)[root@EasygoingEssential-VM/]#命令uname-a可查看内核版本[root@EasygoingEssentia
the丶only
·
2021-06-15 22:20
运维笔记
linux
运维
centos
服务器
来自大数据时代的招聘启事
研发相应的工作:负责
大数据系统
的研发,包括大规模非结构化数据业务模型构建、大数据存储、数据库构设、优化数据库构架、解决数据库中心设计
陆嘉_大美嘉
·
2021-06-15 12:31
解决Spark数据倾斜(一) 分散同一Task的不同Key
什么是数据倾斜对Spark/Hadoop这样的
大数据系统
来讲,数据量大并不可怕,可怕的是数据倾斜。何谓数据倾斜?
王知无
·
2021-06-14 22:12
Linux
运维笔记
之强大文本处理工具Sed
今天学习了一下Linux自带的文本处理工具Sed感觉挺实用的,写个笔记巩固一下吧Sed是什么?Sed是一款流编辑工具,用来对文本进行过滤与替换操作,特别是想修改几十个配置文件时,Sed时很实用的。工作模式:Sed通过一次仅读取一行内容来对某些指令进行处理然后输出,所以sed很适合处理大数据文件。ps:sed默认不修改源文件,只是将读入的内容复制到一个叫做模式空间的地方,指令操作都是在模式空间中进行
l友人B
·
2021-06-10 12:49
大企业征管思路:抓住千户集团关键少数
一是,建立全国统一的
大数据系统
,整合千户集团及其成员企业的数据,加强对数据的整合、监控、分析。二是,规范
HenryYUE
·
2021-06-06 21:37
全网最全最新的
大数据系统
学习路径
大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段,处理的数据量通常是TB级,甚至是PB或EB级的数据,大数据是对海量数据进行存储、计算、统计、(想了解更多☞☞☞☞)分析处理的一系列处理手段,处理的数据量通常是TB级,甚至是PB或EB级的数据,这是传统数据处理手段所无法完成的,其涉及的技术有分布式计算、高并发处理、高可用处理、集群、实时性计算等,汇集了当前IT领域热门流行的IT技术。
烽火程序猿
·
2021-06-06 12:07
不要在意别人的议论
今天上午在工厂上班,提前闹钟提醒报名时间,给女儿在网上报名,因为网上报名人数太多,
大数据系统
卡顿,迟迟报名报不上,于是我借同事手机试着报名,还是报不上,叫儿子报名,也报名不上,叫之前同事报名也同样报不上
韦祥群
·
2021-06-05 22:55
2021云计算技能竞赛真题卷(附标准答案)
试按照赛卷给出的云平台架构进行IaaS、PaaS、
大数据系统
部署及运维管理;根据企业给出的岗位数据信息进行相应的统计分析处理和微信小程序开发;编写相应的工程文档。
九分横南
·
2021-05-19 11:25
运维
docker
linux
运维
[图list]Flume入门
Flume入门-爱编程http://www.w2bc.com/Article/47910Paste_Image.pngPaste_Image.png
大数据系统
数据采集产品的架构分析-OPEN开发经验库http
葡萄喃喃呓语
·
2021-05-19 05:17
小程序接轨智慧零售,无人店线下场景扩展优势不可替代
RFID、人脸识别等正在逐渐改变传统的经营模式,
大数据系统
也在不断优化零售模式,随着技术革新,智慧零售也变得更加清晰可见。可以说,未来零售市场是智慧零售的天下。
公子清羽
·
2021-05-05 10:23
大数据培训就业靠谱吗?
大数据主要的三大就业方向:
大数据系统
研发类人才、大数据应用开发类人才和大数据分析类人才。在此三大方向中,各自的基础岗位一般为
大数据系统
西线学院
·
2021-05-04 01:59
1500平方米的“衣帽间”你值得拥有
充满了时尚生活气息与互动,配着专业的私人专用服装造型师(时尚
大数据系统
),一年四季随时提供最新款式美衣的明星衣橱线下店!明星衣橱正在各地陆续推出线下店,主力店铺面积在1500平以上
杂谈老者
·
2021-05-03 23:38
依靠人工智能大数据,2018我们与您一起继续向前冲
1我们在2017年,靠百度人工智能
大数据系统
,我们帮着客户们冲出了重围,不仅如此,2018,我们与天惠的客户将继续向前冲。
天山客
·
2021-05-02 08:30
大数据方向的十个岗位
目前,大数据方面的工作人员主要有三大就业方向:
大数据系统
研发类人才、大数据应用开发类人才和大数据分析类人才。
Albert陈凯
·
2021-05-01 18:24
推荐零基础学习大数据的10本经典图书
1、大数据时代《大数据时代》是国外
大数据系统
研究的先河之作,本书
日常分享Python
·
2021-04-28 15:55
关于Python
大数据
编程语言
人工智能
ambari
spark
如何构建数据库产品的运营体系—聊聊2B产品的推广
那么,如何快速出击,赶上这一风口,已成为各类
大数据系统
公司最为关心的问题。这里,我针对某款数据库产品来简单剖析一下,如何快速有效的建立产品的运营体系。
听风听雨卧愁眠
·
2021-04-27 16:19
Linux初级
运维笔记
----无法使用securecrt进行远程连接?
问题描述:虚拟机安装完成后,无法使用securecrt进行远程连接?问题排查:(1)检查服务器的sshd服务是否启动命令:ps-ef|grepsshd[root@web1~]#ps-ef|grepsshdroot2104102017?00:00:11/usr/sbin/sshd-Droot44642104000:52?00:00:00sshd:root@pts/0root44874466000:5
小钟钟同学
·
2021-04-26 19:04
《自己动手做
大数据系统
》
《自己动手做
大数据系统
》--电子工业出版社http://www.feiguyun.com/support/
葡萄喃喃呓语
·
2021-04-25 22:49
解决Spark数据倾斜(一) 分散同一Task的不同Key
什么是数据倾斜对Spark/Hadoop这样的
大数据系统
来讲,数据量大并不可怕,可怕的是数据倾斜。何谓数据倾斜?
程序员高级码农
·
2021-04-23 14:59
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他