E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
大数据工程师
新书《Linux集群和自动化运维》目录
对“互联网+”最有力的支撑就是Linux运维架构师、云计算和
大数据工程师
,以及自动化开发工程师等!
weixin_33736649
·
2020-09-14 11:27
【2016年第3期】大数据时代的数据科学家培养
1,21.复旦大学计算机科学技术学院,上海200433;2.上海市数据科学重点实验室,上海200433摘要:大数据时代,最热门的职业是数据科学家(datascientist),而不是传统的信息科学家,也不是
大数据工程师
唐名威
·
2020-09-13 20:22
阿里巴巴大数据实践:大数据建设方法论OneData
阿里巴巴的
大数据工程师
在这一体系下,构建统一、规范、可共享的全域数据体系,避免数据的冗余和重复建设,规避数据烟囱和不一致性,充分发挥阿
阿里云云栖号
·
2020-09-13 14:27
我是程序员
云栖号技术分享
大数据
java
数据分析
学完大数据后能找什么工作,大数据就业岗位方向
学完大数据可以从事很多工作,比如说:hadoop研发工程师、大数据研发工程师、大数据分析工程师、数据库工程师、hadoop运维工程师、大数据运维工程师、java
大数据工程师
、spark工程师等等都是我们可以从事的工作岗位
y南风知我意
·
2020-09-13 09:37
大数据
hive&impala查询准备工作
一开始我们的方案是java直接连hive去查,数据是存hbase的,
大数据工程师
在hive和hbase之间做了映射,所以在hive中能查到。
jspyth
·
2020-09-12 19:19
大数据
java
年薪达不到25W
大数据工程师
、拿不到Offer全额退款
自大数据迅速进入各行各业以来,全世界已经进入大数据/AI时代这已成为不争的事实。出于大数据对时代的影响,现如今,大数据技术甚至已经成为晋升高级JAVA开发工程师所必备的技能。阿里、腾讯、滴滴、美团......几乎现在所有的一线大厂的高级JAVA开发工程师,都要求具备分布式、大数据开发经验。大数据才是JAVA的就业“钱景”目前来看Java转型大数据是最容易的,如果你已经具备Java开发2年以上工作经
无精疯
·
2020-09-12 19:04
数据湖技术 Iceberg 的探索与实践
本文资料来自2020年9月5日由快手技术团队主办的快手大数据平台架构技术交流会,分享者邵赛赛,腾讯数据平台部数据湖内核技术负责人,资深
大数据工程师
,ApacheSparkPMCmember&committer
过往记忆
·
2020-09-12 11:41
大数据
java
编程语言
人工智能
数据库
大数据工程师
技术面攻略
这篇《
大数据工程师
技术面攻略》博客对我帮助很大。
cuidiwhere
·
2020-09-11 14:30
大数据
ElasticSearch
ElasticSearch1.ElasticSearch2.类似框架①Solr(重量级对手)②Katta③HadoopContrib--大数据相关的东西(
大数据工程师
)3.Solr和ES区别:4.ES安装及使用说明
weixin_45591311
·
2020-09-11 11:12
Dao持久层
整理的最全大数据学习之路「大神必修课」
前言:一、背景介绍二、大数据介绍正文:一、大数据相关的工作介绍二、
大数据工程师
的技能要求三、大数据学习规划四、持续学习资源推荐(书籍,博客,网站)五、项目案例分析(批处理+实时处理)前言一、背景介绍本人目前是一名
大数据工程师
金罗老师
·
2020-09-10 16:44
大数据
大数据开发
大数据学习
人工智能
编程开发
大数据分析
hadoop
spark
基于 Apache Kylin 的微博舆情实时分析(内含 Demo)
Kyligence
大数据工程师
俞霄翔将通过一个Demo,来演示如何实际使用Real-timeOLAP,并且会在配置过程中讲解重要的技术点,帮助大家深入了解Real-tim
chuiqi5871
·
2020-09-10 13:47
浅谈数据相关工作及其技术栈、岗位特点和核心竞争力
比如说数据工程师、数据分析师、
大数据工程师
、数据挖掘工程师、数据科学家等,又或是虽然没有数据二字,但是总让我们觉着和大数据关系很深,或是岗位要求技能有一些重合,看起来都和机器学习算法统计有些关联。
敲代码的乔帮主
·
2020-08-26 12:15
大数据成神之路
其他
IT之路
数据工程师
数据分析师
算法工程师
数据科学家
研究员
【备忘】最新极客学院
大数据工程师
视频教程下载
一、走进大数据Hadoop框架的世界01、Hadoop概述02、Hadoop架构介绍03、Yarn的发展背景及基本原理04、安装HadoopYARN二、用户行为分析项目01、Hadoop用户行为分析项目之应用概述02、Hadoop用户行为分析项目之分析与设计03、Hadoop用户行为分析项目之编码实践三、调优01、Hadoop性能调优与运维四、Hive01、初识Hive02、Hive环境搭建03、
qq_38472425
·
2020-08-25 07:34
时隔一年后的面经总结
当时的目标厂家是字节跳动,目标岗位
大数据工程师
。在此记录我印象最深刻的一个问题。由于在大三期间有过实习经历,写过爬虫,并且将这一点写在了我的求职简历中。
nuc2015
·
2020-08-25 07:12
算法
面试
算法
阿里巴巴OneData
阿里巴巴的
大数据工程师
在这一体系下,构建统一、规范、可共享的全域数据提醒,避免数据的冗余和重复建设,规避数据烟囱和不一致性,充分发挥阿里巴巴在大数据海量、多样性方面的独特优势。
pptb
·
2020-08-24 11:03
怎样进行大数据的入门级学习?
大数据方向的工作目前分为三个主要方向:01.
大数据工程师
02.数据分析师03.大数据科学家04.其他(数据挖掘本质算是机器学习,不过和数据相关,也可以理解为大数据的一个方向吧)由于本人曾是
大数据工程师
的角色
煎蛋侠_
·
2020-08-23 05:18
大数据可以从事哪些职位,大数据就业方向有哪些?
大数据领域分为二个方向:一是大数据维护、研发、架构工程师方向;所涉及的职业岗位为:
大数据工程师
、大数据维护工程师、大数据研发工程师、大数据架构师等;二是大数据挖掘、分析方向;所
大数据在说话
·
2020-08-23 03:34
大数据工程师
培训班通知
培训地点北京市计算中心(北京市海淀区丰贤中路7号北科产业3号楼)培训时间2018年7月15日-7月19日课程为多期,其他时间其他地点还有相同课程安排,具体请加微信咨询。一、培训收益本培训课程主要从组件的架构原理、安装、配置、运维、调优等方面进行讲解。通过此次课程培训,可使学习者获得如下收益:1、掌握大数据平台实现安装、配置、监控;2、理解并掌握分布式存储HDFS上的文件操作及运维命令;3、外部数据
wanghr323
·
2020-08-22 23:10
TalkingData的研发面试题目
这里我们也向如下有志之士发出邀请,有意者请发简历至
[email protected]
:
大数据工程师
/架构师Java开发工程师/架构师Html5/web前端开发iOS/安卓SDK开发机器学习研究员
肖文峰
·
2020-08-22 01:14
综合
酷工作丨 第四范式多个职位内推、shopee长期大量招聘测试/
大数据工程师
值班编辑:芒果果SegmentFault思否社区致力于成为科技企业和开发者沟通的桥梁。为此特设「酷工作板块」,以便企业发布相关招聘信息,也为社区开发者提供招聘信息参考。点击https://segmentfault.com/grou...可查看更多招聘信息;有招聘需求的企业也可于社区自助发布相关信息。*更多合作可发送邮件咨询:
[email protected]
北京【内推】第四范式丨JAVA研发工
芒果果
·
2020-08-21 19:43
酷工作
招聘
大数据
工程师
前端测试
大数据工程师
面试题(一)
讲一下第一个项目hive中shuffle的优化压缩压缩可以使磁盘上存储的数据量变小,通过降低I/O来提高查询速度。对hive产生的一系列MR中间过程启用压缩sethive.exec.compress.intermediate=true;setmapred.map.output.compression.codec=org.apache.hadoop.io.compress.SnappyCodec;对
觉地求生
·
2020-08-20 21:46
hadoop
hive
spark
面试
sqoop
大数据工程师
面试题(一)
讲一下第一个项目hive中shuffle的优化压缩压缩可以使磁盘上存储的数据量变小,通过降低I/O来提高查询速度。对hive产生的一系列MR中间过程启用压缩sethive.exec.compress.intermediate=true;setmapred.map.output.compression.codec=org.apache.hadoop.io.compress.SnappyCodec;对
觉地求生
·
2020-08-20 16:08
hadoop
hive
spark
面试
sqoop
大数据工程师
面试题(一)
讲一下第一个项目hive中shuffle的优化压缩压缩可以使磁盘上存储的数据量变小,通过降低I/O来提高查询速度。对hive产生的一系列MR中间过程启用压缩sethive.exec.compress.intermediate=true;setmapred.map.output.compression.codec=org.apache.hadoop.io.compress.SnappyCodec;对
觉地求生
·
2020-08-20 16:08
hadoop
hive
spark
面试
sqoop
大数据工程师
面试笔试题
Linux笔试题参考答案一、1B,2B,3B,4D,5C,6D7B块设备概念:一种具有一定结一种具有一定结构的随机存取设备,对这种设备的读写是按块进行的,他使用缓冲区来存放暂时的数据,待条件成熟后,从缓存一次性写入设备或者从设备一次性读到缓冲区。可以随机访问,块设备的访问位置必须能够在介质的不同区间前后移动。8B,9B9Bcrontab文件的格式:minutehourdaymonthweekday
击水三千里
·
2020-08-20 14:15
云计算/大数据
大数据工程师
(ETL)面试系列(1)
1.你觉得Spark和Hadoop的区别是什么,请简要说一说?我:Hadoop适合离线分析,是批处理;Spark适合实时分析,是近实时流,微批处理。2.你觉得Python和Java在使用起来,有什么区别?我:其实自己在平时使用的时候,并没有过度割裂开这两种,因为毕竟自己是结果导向所以无论Python的缩进格式还是Java的要加逗号,最后可以实现我的需求就可以了。补:如今,再来审视这个问题,会发现其
司小幽
·
2020-08-20 06:21
关于[谁能做
大数据工程师
]的摘要
先附原文链接谁能做
大数据工程师
?在国内,大数据的应用刚刚萌芽,“你很难期望有一个全才来完成整个链条上的所有环节。更多公司会根据自己已有的资源和短板,招聘能和现有团队互补的人才。”
我去北门吃碗面
·
2020-08-20 02:22
阿里《
大数据工程师
必读手册》限时免费下载
点击上方“肉眼品世界”,选择“设为星标”回复“666”加入启明星技术社群!如何免费下载扫码,发送"大数据001",即可免费获得▲持续关注获取更多免费福利额外福利下面是之前入门学习Python时候的学习资料,非常全面,从Python基础、到web开发、数据分析、机器学习、深度学习、金融量化统统都有。如何下载:扫码后台回复:python007即可获取全部手册的电子版本扫码后台回复:java开发手册泰山
肉眼品世界
·
2020-08-18 12:46
人工智能
编程语言
数据可视化
web开发
大数据
大数据开发必备技能
大数据必备技能详细因为笔者本身是偏Java应用方向的,所以整理的大数据必备技能详细,也是偏向于
大数据工程师
方向。
大数据基础入门教程
·
2020-08-18 11:09
大数据
编程语言
hadoop
spark
kafka
大数据就业前景怎么样 学后能从事什么工作
学习大数据可以从事很多工作,比如说:hadoop研发工程师、大数据研发工程师、大数据分析工程师、数据库工程师、hadoop运维工程师、大数据运维工程师、java
大数据工程师
、spark工程师等等都是我们可以从事的工作岗位
千锋郑州
·
2020-08-16 14:30
尝试大数据和数据挖掘,该怎么规划学习?
推荐一个大数据学习群119599574晚上20:10都有一节【免费的】大数据直播课程,专注大数据分析方法,大数据编程,大数据仓库,大数据案例,人工智能,数据挖掘都是纯干货分享,一.大数据方向工作介绍二.
大数据工程师
的技能要求三
weixin_41780944
·
2020-08-16 09:39
大数据学习
大数据入门
大数据
大数据工程师
大数据开发
微职位:IT金领:年薪百万
大数据工程师
高端培训学习体会【1】
我的学习我也分享下吧,其实每个阶段学完都想分享一下,只是想不起来写博文。我学大数据的理由其实吧,主要就是我现在的岗位是测试,未来比较担心发展,如果有机会可能会考虑下转岗,感觉大数据这个领域可能更合适点,也跟我现在公司所属行业更接近。我现在公司所属行业是存储行业,接触的技术比较多的是Ceph与OpenStack,公司内也有个大数据组,未来会有大数据结合存储的产品,也许基础有点,入门容易点。当然我学习
weixin_33743248
·
2020-08-16 09:49
大数据工程师
的学习路线图
大数据是什么?每个企业每天都会生成数据,数据量根据企业业务的复杂度而变化。如果业务量大,我们可以很容易地使用常用的软件工具来管理,但是如果业务体系庞大,那么就将这些数据合理归档整合。这就是我们称之为“大数据”的原因。大数据能让用户处理大量的原始数据,并根据业务需要进行合理分析报表,以备将来参考和预测。大数据有助于管理数据,并为将来的有用目的存储全部数据。数据首先在不同类型中生成,包括非结构化数据、
小学生ing
·
2020-08-16 08:57
学习线路图
大数据
大数据工程师
学习大纲汇总
大数据工程师
技能图谱大数据通用处理平台SparkFlinkHadoop分布式存储HDFS资源调度YarnMesos机器学习工具MahoutSparkMlibTensorFlow(Google系)AmazonMachineLearningDMTK
silentanytime
·
2020-08-16 08:47
hadoop
大数据工程师
微职位学习分享
近期我个人学习了
大数据工程师
微职位这门课,并且已经通过了所有的考核。下面切入正题,分享一下我的学习心得,因为篇幅关系,不涉及具体知识点。因为这门课是偏大数据分
weixin_34354173
·
2020-08-16 05:40
大数据工程师
的日常工作内容
1写SQL(很多入职一两年的
大数据工程师
主要的工作就是写SQL)2为集群搭大数据环境(一般公司招
大数据工程师
环境都已经搭好了,公司内部会有现成的大数据平台,但我这边会私下搞一套测试环境,毕竟公司内部的大数据系统权限限制很多
北京小辉
·
2020-08-14 19:56
【工
具】杂文
程序员必备75道逻辑思维题(附答案)之五
逻辑训练身为一个
大数据工程师
,平时的算法训练还是不能少的,今天给大家看几道我曾经看到的逻辑思维题觉得很好,想分享一下。
蛋蛋淡淡定
·
2020-08-14 11:29
75道逻辑思维题
程序员必备75道逻辑思维题(附答案)之二
逻辑训练身为一个
大数据工程师
,平时的算法训练还是不能少的,今天给大家看几道我曾经看到的逻辑思维题觉得很好,想分享一下。【6】一个球、一把长度大约是球的直径2/3长度的直尺.你怎样测出球的半径?
蛋蛋淡淡定
·
2020-08-14 09:15
75道逻辑思维题
大数据工程师
分布式思维入门与面试真题讲解
免费报名链接:https://www.jiuzhang.com/seminar/152/?utm_source=sc-csdn-fks课程内容:解析MapReduce原理,夯实基础,厚积薄发。精讲Hadoop核心组件——MapReduce执行流程,掌握入门大数据必备知识。通过WordCount经典案例深入探索MapReduce原理,融会贯通,加强记忆。讲师介绍:韩愈前BAT员工,有多年大厂工作经验
九章算法
·
2020-08-11 20:28
九章算法课程/讲座
"
大数据工程师
"和"java后台开发"的技术要求有什么区别?
大数据工程师
和后台开发的技能差别有多大?本人非计算机专业出身,java没系统学过,喜欢写代码,要找工作了。现在很迷茫,不知道应该往哪个方面突击突击,是老老实实的弄弄java看看hadoop源码?
金曜软件工程师
·
2020-08-11 00:14
大数据
数据挖掘、数据分析、
大数据工程师
面试准备
各大公司面试题及答案总结数据挖掘:链接1:https://blog.csdn.net/sinat_30316741/article/details/79930604链接2:https://blog.csdn.net/Bryan__/article/details/52672912数据分析:京东数据分析岗(秋招):https://blog.csdn.net/u013382288/article/de
Janice18
·
2020-08-08 19:46
笔试
面试
32岁领导的忠告:别把报表不当回事,早点放弃Excel才是出路
以前搞大数据的,随便会搭建个hadoop就叫
大数据工程师
了,现在不行了,需要掌握的工具越来越多,大数据的工作也被逐渐分解到不同的数据岗位上,这是一件好事,优胜劣汰。
Leo.yuan
·
2020-08-06 10:51
大数据
数据分析
数据可视化
hadoop
数据库
时间序列预测问题中特征工程和训练的经验小结
特征工程/训练:许多
大数据工程师
都认为,预测任务中80%的时间用来做特征工程,20%的时间用来做训练。
WS0
·
2020-08-04 21:18
回归预测
大数据最佳学习路线总结
因此,在设计和部署这样的系统时,
大数据工程师
考虑数据
次世代群901739356
·
2020-08-04 17:02
大数据
大数据入门到精通
工信部认证的
大数据工程师
证书你有多了解?
大数据工程师
证书可登录:www.ceiaec.org(工信部教育与考试中心官网)进行查询,查询时间是在证书
你知道原因
·
2020-08-04 16:35
工信部
大数据工程师
认证考试顺利举行
7月24日上午10:00整,工信部
大数据工程师
认证考试在成都天府软件园开考,科多大数据组织了本次考试。
你知道原因
·
2020-08-04 16:04
大数据培训
大数据工程师
大数据学习
大数据
大数据学习资料下载,新手攻略,数据分析工具、软件使用教程
作为IT类职业中的“大熊猫”,
大数据工程师
的收入待遇可以说达到了同类的顶级。国内IT、通讯、行业招聘中,有10%都是和大数据相关的,且比例还在上升。
FMI飞马网
·
2020-08-04 11:16
大数据
大数据工程师
面试题(四)
2.23.我们开发job时,是否可以去掉reduce阶段。可以。设置reduce数为0即可。2.24.datanode在什么情况下不会备份datanode在强制关闭或者非正常断电不会备份。2.25.combiner出现在那个过程出现在map阶段的map方法后等。2.26.hdfs的体系结构hdfs有namenode、secondraynamenode、datanode组成。为n+1模式nameno
快乐真真
·
2020-08-04 02:52
大数据
hadoop
大数据工程师
面试题(五)
2)HashMap和HashTable,ArrayList和Vector,ArrayList和LinkedList的区别1HashMap不是线程安全的hashmap是一个接口是map接口的子接口,是将键映射到值的对象,其中键和值都是对象,并且不能包含重复键,但可以包含重复值。HashMap允许nullkey和nullvalue,而hashtable不允许。2HashTable是线程安全的一个Col
快乐真真
·
2020-08-04 02:52
大数据
hadoop
想成为
大数据工程师
的第一天
JAVA部分:final关键字1、修饰类不能被继承;2、修饰方法,被final修饰的方法不能被重写;3、修饰成员变量(必须初始值);直接赋值;在构造方法里赋值;基本类型不能改;引用类型地址不能改变,引用所指向的对象可以改。StringTokenizer是一个用来分隔String的应用类StringTokenizer(Stringstr,Stringdelim,booleanreturnDelims
BreaK1221
·
2020-08-02 15:08
大数据之路
HDFS、YARN、MapReduce原理--读书笔记
hadoop
大数据工程师
/hadoop工程师目的:高效的存储、处理这些海量、多种类、高速流动的数据hadoop来源google03~06年的三篇论文hadoop利用分而治之的朴素思想为大数据处理提供了一整套新的解决方案
BBlue-Sky
·
2020-08-01 14:11
云计算
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他