E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
A大数据开发
怎样快速掌握
大数据开发
并拿到BAT高薪offer
01大数据发展前景及薪资状况随着5G的到来移动互联网、物联网得到高速发展,同时也产生了海量的数据,大数据计算技术完美地解决了海量数据的收集、存储、计算、分析等问题。大数据时代开启人类社会利用数据价值的另一个时代。2016年3月,《十三五规划纲要》首次提出要实施国家大数据战略,促进大数据发展行动,深化大数据在各行业的创新应用,加快完善大数据产业链。多个国家级产业促进政策的相继落地使大数据行业迎来了新
金乐笑
·
2023-02-06 22:35
IT技术人员转行大数据应该考虑哪些问题
大数据人才需求迫切,高薪资、高福利,因此转行的大数据的人也很多,那么对于一些普通技术开发人员,在进行转行
大数据开发
时有哪些必要的考虑因素呢?
Alukar
·
2023-02-06 19:58
spark 简单实战_Spark从入门到实战(11天完整版)
简介从零开始,逐层深入掌握Spark,掌握本套教程完全可以胜任企业
大数据开发
人员。
weixin_39609650
·
2023-02-06 15:13
spark
简单实战
大数据--毕业生
前序本篇文章适合初级
大数据开发
,初级java开发,如果文章有错误,请及时指出常见基础问题//之前已经背过许多题了,这里都是默写,根据我的理解,所以有时候可能不对,望指正。
编程爱上我吧
·
2023-02-06 09:11
大数据
java
big
data
hadoop
hdfs
大数据开发
:HDFS Namenode元数据管理
今天的
大数据开发
分享,我们就主要来讲讲HDFSNamenode元数据管理。Namenode元数据管理首先明确Namenode的职责:响应客户端请求、管理元数据。
成都加米谷大数据
·
2023-02-06 04:13
CentOS 7 下Hadoop虚拟机配置
写在前面由于自己对
大数据开发
也比较感兴趣,于是乎开始学习一些大数据的框架,将自己学习大数据的经历记录下来,一方面可以方便自己及时回顾,另一方面也起到督促自己的作用。
Emeraki
·
2023-02-05 16:01
转行
大数据开发
应该怎么学习
转行进入大数据,首先需要了解的就是大数据是做什么,工作内容,然后就是找个完整的学习路线跟着去学习了,大数据的学习内容也是不少的~简单来说,分为6步,
大数据开发
入门,大数据核心基础,千亿级数仓技术,PB级内存计算
我想去吃ya
·
2023-02-05 03:04
大数据
学习
压力测试
开发语言
python
大数据专业需要学习python么
但是不会python也是没有关系的,大数据还是需要以java为基础的~学大数据必学Java,当前大数据领域的岗位主要集中在开发、分析、运维三大领域,其中
大数据开发
对于Java语言的依赖程度比较高,如果从事大数据
我想去吃ya
·
2023-02-05 03:04
大数据
学习
python
开发语言
数据库开发
大数据程序员的工作职责是什么?
大数据开发
要负责公司大数据平台产品的技术工作,如需求分析、架构设计、研发、以及性能分析工作;提升Hadoop集群的高可用性、高性能、高扩展特性;海量数据的导入优化工作;理和完善各类文档等工作。
我想去吃ya
·
2023-02-05 03:33
big
data
大数据
spark
职场和发展
数据库
学大数据一定要会Java开发吗?
学大数据必学Java,当前大数据领域的岗位主要集中在开发、分析、运维三大领域,其中
大数据开发
对于Java语言的依赖程度比较高,如果从事
大数据开发
岗学习Java语言很有必要。
我想去吃ya
·
2023-02-04 17:51
大数据
人工智能
学习
数据仓库
数据库
2020时代详解如何从0开始学大数据
不仅如此,越来越多的软件工程师开始转型成为大数据工程师,从事
大数据开发
与应用的工作。市场对于大数据的人才需求与日俱增,大数据方向俨然成为了业内炙手可热的职位。
juan333
·
2023-02-04 17:49
Hadoop
大数据开发
程序员
程序员
编程语言
大数据开发
Hadoop
linux
大数据开发
:Spark RDD、DataFrame、DataSet
今天的
大数据开发
分享,我们就主要来讲讲SparkRDD、DataFrame、DataSet。
加米谷大数据张老师
·
2023-02-04 17:14
大数据
大数据
spark
大数据开发
:消息队列如何确保消息不丢失
围绕消息队列,今天的
大数据开发
学习分享,我们主要来聊聊,消息队列如何确保消息不丢失。1、检测消息丢失的方法可以利用消息队列的有序性来验证是否有消息丢失。
成都加米谷大数据
·
2023-02-04 04:18
pandas数据结构
创建series对象Series对象的属性DataFrame创建DataFrame对象Python在数据处理上独步天下:代码灵活、开发快速;尤其是Python的Pandas包,无论是在数据分析领域、还是
大数据开发
场景
CarveStone
·
2023-02-03 16:39
数据分析
pandas
数据结构
python
尚硅谷
大数据开发
Day02
这个博客是学习尚硅谷大数据课程所作的笔记,课程原地址可以访问https://www.bilibili.com/video/BV1Qp4y1n7EN?p=7&spm_id_from=pageDriver,感谢尚硅谷免费提供的课程资料,同时感谢尚硅谷大海老师的讲解。第1章Hadoop概述1.1Hadoop是什么1)Hadoop是一个由Apache基金会所开发的分布式系统基础架构。2)主要解决,海量数据
JiangHe1997
·
2023-02-02 14:29
大数据
hadoop
HTML速写语法规则(Emmet)
1.聊点闲话今天大数据课程学习到前端可视化技术(拉勾教育
大数据开发
训练营),终于开始接触我不熟悉的内容了。
回笼觉觉猪
·
2023-02-01 12:13
产品经理学习
学习感受:(1)因为要从
大数据开发
转产品经理,所以找入门课程。这门课程的好处是上下班路上可以听音频,不用专门抽时间学习。2.
清水一一
·
2023-02-01 05:07
【
大数据开发
】HDFS小文件合并四种方式
直接写数据到HDFS时,我们不可避免的要处理小文件问题,一般有1.落地之前增大batch(即增大了延迟)2.coalesce(分区合并)3.外部程序Merge4.Append(如果文件没有达到指定大小,下一个批次写数据的时候不创建新文件,而是和已存在的小文件合并)四种方式,各有其使用场景,如论哪种方式,无疑会增加我们的工作量。但是如果通过hudi写入数据,小文件的问题hudi自身会帮你解决,hud
这个妹妹我见过
·
2023-01-31 22:19
#
HDFS
学习总结
#
大数据面试题
hadoop
数据仓库之建设
背景篇目前所在项目中,人员配置:项目经理(4)业务分析师报表开发工程师(2,4)etl工程师
大数据开发
工程师(4)人员压缩可参考括号内分析篇从人员配置可知,现在企业对人员的要求比较高,恨不得你啥都会每个人最好了解业务
OverLight
·
2023-01-30 14:53
大数据理论体系
本专栏为笔者,在多年读书笔记的基础上,结合自身的
大数据开发
心得体会,呕心沥血之作。来点关注吧,万分感谢!
Shockang
·
2023-01-30 07:58
大数据理论体系
大数据
重构实时离线一体化数仓,Apache Doris 在思必驰的应用实践
作者:赵伟,思必驰大数据高级研发,10年
大数据开发
和设计经验,负责大数据平台基础技术和OLAP分析技术开发。社区贡献:Doris-spark-connector的实时读写和优化。
张家锋
·
2023-01-30 06:45
大数据开发
:spark core核心讲解
今天的
大数据开发
学习分享,我们就主要来讲讲Spark框架核心SparkCore。SparkCore简介SparkCore包含Spark的基本功能,如内存计算、任务调度、部署模式、故障恢复、存储管理等。
加米谷大数据张老师
·
2023-01-24 20:58
大数据
大数据
分布式
spark
大数据 -
大数据开发
技术课程总结(未完)
1.课程介绍
大数据开发
课程主要从了解大数据概念、特征开始,再介绍大数据Java开发和Hadoop的环境配置,较为全面地讲解了HDFS分布式存储,MapReduce分布式计算框架,Spark平台开发和Scala
陈杉菜
·
2023-01-22 19:40
#
大数据开发
大数据
spark
hadoop
大数据处理的关键技术及应用
大数据采集技术在这里我还是要推荐下我自己建的大数据学习交流qq裙:957205962,裙里都是学
大数据开发
的,如果你正在学习大数据,小编欢迎你加入,大家都是软件开发党,不定期分享干货(只有
大数据开发
相
数据工程师大牛
·
2023-01-22 19:37
大数据
大数据
人工智能
机器学习
数据挖掘
数据分析
Spark修炼之道(基础篇)——Linux
大数据开发
基础:第七节:进程管理
本节主要内容进程管理简介进程管理常用命令计划任务1.进程管理简介(1)进程概念进程是操作系统中非常重要的一个概念,进程是程序的执行过程,相对于程序,进程是动态的,在linux系统中,它与用户权限相关,程序与进程并没有一一对应,一个程序可能对应多个进程,例如://ps命令列出当前所有对应当前用户的活动进程xtwy@ubuntu:~$psPIDTTYTIMECMD2087pts/000:00:00ba
zhouzhihubeyond
·
2023-01-21 16:15
Spark
Linux
Spark修炼之道
ubuntu
大数据
spark
大数据平台到底该如何设计?
实际上,从大数据运营平台沿着数据链路的产生方向往上游推,还存在着大数据采集与存储平台、
大数据开发
与计算平台、大数据治理平台等。他们分别服务者不同的用户,比如大数据采集与存储
咬定青松
·
2023-01-20 08:31
大数据
产品运营
2023版大数据学习路线图(适合自学)
大数据成为目前最具前景的高薪行业之一,大数据分析工程师、
大数据开发
工程师等大数据人才也成为市场紧缺型人才,薪资一涨再涨。很多人想要加入到
大数据开发
行列,却又不知道怎么入手。
千锋IT教育
·
2023-01-18 09:00
大数据
大数据
学习
hadoop
1万2千字长文助力春招 | Netty面试篇
大数据技术与架构点击右侧关注,
大数据开发
领域最强公众号!暴走大数据点击右侧关注,暴走大数据!
王知无(import_bigdata)
·
2023-01-18 03:16
如何在mac上使用idea做
大数据开发
1软件包下载jdk1.8(jdk1.8.0_231)idea(包括2018,2019)(ideaIC-2019.3.3/ideaIC-2018.3.5)汉化包:汉化包.rarmaven3.6.3(apache-maven-3.6)2jdk的安装第一:把包直接放到自定义目录下第二:配置环境变量a)打开终端输入sudovi/etc/profile或者sudovi.bash_profile解释:etc/
·
2023-01-17 18:08
intellij-idea
如何在mac上使用idea做
大数据开发
1软件包下载jdk1.8(jdk1.8.0_231)idea(包括2018,2019)(ideaIC-2019.3.3/ideaIC-2018.3.5)汉化包:汉化包.rarmaven3.6.3(apache-maven-3.6)2jdk的安装第一:把包直接放到自定义目录下第二:配置环境变量a)打开终端输入sudovi/etc/profile或者sudovi.bash_profile解释:etc/
·
2023-01-17 18:35
intellij-idea
大数据开发
之路:hive篇
引语
大数据开发
之路漫漫其修远兮,吾将上下而求索。很多入门大数据的小伙伴,可能第一个接触到的,就是一只可爱的“小象”,也就是我们的大数据领域的数据仓库工具hive。
乐姐
·
2023-01-17 15:03
大数据
大数据
大数据学习
大数据开发
大数据入门
hive
大数据开发
学习教程——大数据的基本概念
什么是大数据?大数据(BigData),是一个描述大量高速,复杂和可变数据的术语,需要先进的技术来实现信息的捕获,存储,分发,管理和分析。大数据是指无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。大数据的特点4VVolume:数据量异常庞大,一般达到PB量级Variety:数据呈
比屋大数据
·
2023-01-17 15:02
大数据架构师源码零基础教程
big
data
数据挖掘
学习
网易云音乐数据全链路基线治理实践
作者:石烁摘要:在
大数据开发
领域,大家都会被一个问题困扰:调度任务延迟,然后被老板、被业务“灵魂拷问”。
·
2023-01-17 11:02
大数据数据仓库
大数据挖掘与
大数据开发
学徒班
大数据挖掘与
大数据开发
学徒班课程体系完善,师资力量雄厚,全程项目式培训
泰迪智能科技
·
2023-01-16 20:25
数据挖掘技术
大数据
数据挖掘
大数据
数据分析
大数据开发
-Linux操作
目录1.1touch:创建空文件1.2mv:move剪切粘贴--重命名和移动功能1.3cat命名:查看文件内容1.4cp:copy复制粘贴1.5ps、kill、ifconfig、clear1.6回顾:1.1touch:创建空文件toucha.txtb.txt—创建空文件a.txt与b.txttouch/root/a.txt----在/root目录创建a.txt文件Linux与Windows共用--
海星?海欣!
·
2023-01-16 06:28
Linux
linux
大数据
运维
Spring boot读取Excel并存入PG数据库(一)
我最开始并非专职Java开发,本职是
大数据开发
,奈何公司环境如此,也时常参与Java项目开发。很久没有认真写博客了,经历了整个忙碌的夏天,特别是9月以来,笔者有
风碎峰
·
2023-01-15 04:24
spring
boot
后端
java开发
java
spring
boot
excel
大数据学习路线图(2023版自学路线)
大数据成为目前最具前景的高薪行业之一,大数据分析工程师、
大数据开发
工程师等大数据人才也成为市场紧缺型人才,薪资一涨再涨。很多人想要加入到
大数据开发
行列,却又不知道怎么入手。
·
2023-01-13 17:28
大数据
大数据学习路线图(2023版自学路线)
大数据成为目前最具前景的高薪行业之一,大数据分析工程师、
大数据开发
工程师等大数据人才也成为市场紧缺型人才,薪资一涨再涨。很多人想要加入到
大数据开发
行列,却又不知道怎么入手。
·
2023-01-13 16:57
大数据
大数据开发
:Hadoop入门学习路线
学习大数据,核心重点就是对于专业技术的掌握,我们判断一个机构的课程是否具备足够的专业度,也往往是从这些核心技术体系的课程规划来看的。以Hadoop来说,这是大数据学习当中必不可少的部分。今天大数据学习分享,我们来聊聊Hadoop学习路线。Hadoop生态最初在大数据领域绝对是无可争议的霸主,虽然近年来大数据领域新技术层出不穷,这些新技术确实在很多方面比起Hadoop强,但是Haoop作为最早的、目
加米谷大数据张老师
·
2023-01-12 21:05
大数据
大数据
分布式
hadoop
2022年度总结与2023未来规划
业务开发常见错误/Java并发编程深入理解计算机系统MySQL-SQL必知必会/高性能MySQL重构:改善既有代码的设计计算机系统知识:图解TCP/IP、LinuxC编程一站式学习软件设计:编程范式/设计模式
大数据开发
luxinfeng666
·
2023-01-09 08:05
生活随笔
程序人生
学习方法
数据库
java
学习
大数据开发
零基础是不是限制,小白能否快速学会?附上学习路线图
其实无论是学习IT还是学习
大数据开发
,大家都是从0开始的,即使你没有基础也无需担心,毕竟大家最开始都是从小白度过的。J
juan188
·
2023-01-08 15:45
大数据
大数据开发
程序员
spark
Linux
大数据学习
人工智能
数据分析
hadoop
大数据
大数据学习
大数据开发
大数据入门
数据分析
数仓构建-架构与模型设计
MaxCompute作为整个
大数据开发
过程中的离线计算引擎。DataWorks则包括数据开发、数据质量、数据安全、数据管理等在内的一系列功能。
胜利的曙光
·
2023-01-06 01:24
数据仓库
阿里云
架构
数据仓库
big
data
阿里云DataWorks学习——数仓架构设计
MaxCompute作为整个
大数据开发
过程中的离线计算引擎。DataWorks则包括数据开发、数据质量、数据安全、数据管理等在内的一系
zhisheng_blog
·
2022-12-31 16:36
数据仓库
大数据
dbcp
数据分析
odbc
阿里云
大数据开发
一面面经,已过,面试题已配答案
参考答案来源:大数据面试题V3.0,523道题,679页,46w字二面:阿里云
大数据开发
二面面经,已过,面试题已配答案_蓦然_的博客-CSDN博客1、实习经历这一点就不多说了,每个人都不一样,根据自己的介绍就行
蓦然_
·
2022-12-31 16:35
大数据面试题
hadoop
面试
大数据
Hadoop总结
目录大数据概述Hadoop
大数据开发
平台资源管理YARN分布式文件系统HDFS非关系型数据库NOSQL分布式数据库HBASE批处理和MapReduce数据仓库查询分析和Hive基于内存计算的Spark流计算和
普通网友
·
2022-12-31 13:04
面试
学习路线
阿里巴巴
android
前端
后端
7&的2022年终总结
…2、技术定位
大数据开发
领域,这一年来,学习了大数据常见的组件或者框架,
7&
·
2022-12-30 19:05
数据库
【Java学习笔记】(一)Java简介&程序基础
(Java为解释型语言)跨平台的实现:不同的操作系统上有不同的JVM解释.class文件学习路线JavaSE:语言本身,核心开发技术,标准库的使用JavaEE:Spring框架,数据库开发,分布式框架
大数据开发
m0_61819793
·
2022-12-30 12:08
Java学习笔记
java
学习
jvm
Python语言Django开发框架Mysql数据库 开发简单在线美食推荐网 个性化推荐算法开发 美食推荐系统 基于用户、物品的协同过滤推荐算法 机器学习、人工智能、分布式
大数据开发
Python语言Django开发框架Mysql数据库开发简单在线美食推荐网个性化推荐算法开发美食推荐系统基于用户、物品的协同过滤推荐算法机器学习、人工智能、分布式
大数据开发
SimpleFoodRecommendWebPython
linge511873822
·
2022-12-29 13:21
基于用户的协同过滤推荐算法
基于项目的协同过滤推荐算法
python
python
数据库
django
推荐算法
协同过滤
1024程序员节
使用Python语言+Django框架+Mysql数据库 开发简单在线课程推荐网 课程推荐系统 个性化推荐算法开发 基于用户、物品的协同过滤推荐算法 人工智能、机器学习、
大数据开发
使用Python语言+Django框架+Mysql数据库开发简单在线课程推荐网课程推荐系统个性化推荐算法开发基于用户、物品的协同过滤推荐算法人工智能、机器学习、
大数据开发
SimpleCourseRecommendWebPython
linge511873822
·
2022-12-29 03:00
python
基于项目的协同过滤推荐算法
基于用户的协同过滤推荐算法
python
数据库
django
协同过滤
推荐算法
使用 DataWorks 将 PolarDB-X 中的数据同步到 MaxCompute
大数据开发
治理平台DataWorks基于MaxCompute/EMR/MC-Hologres等大数据计算引擎,为客户提供专业高效、安全可靠的一站式
大数据开发
与治理平台。
·
2022-12-27 18:01
数据库数据库开发云计算阿里云
上一页
11
12
13
14
15
16
17
18
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他