大数据运维第3页

择业迷茫期？非IT专业如何进入互联网行业

一，选择合适自己的技术方向IT方向的岗位有很多，包括大数据开发工程师、大数据运维工程师、Java语言开发、前后端开发、云

超级实习生·2022-05-11 12:28

阿里巴巴云原生大数据运维平台 SREWorks 正式开源

简介：阿里巴巴云原生大数据运维平台SREWorks，沉淀了团队近10年经过内部业务锤炼的SRE工程实践，今天正式对外开源，秉承“数据化、智能化”运维思想，帮助运维行业更多的从业者采用“数智”思想做好高效运维

·2022-03-25 11:48

从码农到高级工程师：尚学堂1810期大数据全套视频教程全新上线

如今企业对于大数据高端人才的需求度越来越紧迫，在大数据团队主要分三种角色：大数据开发工程师、大数据运维工程师、大数据架构师。

北京尚学堂·2022-02-16 18:21

【上海】京东 | 大数据运维工程师

【上海】京东|大数据运维工程师【任职要求】1、计算机相关专业本科以上，3年以上相关行业经验；2、熟悉nginx、tomcat等中间件运维，了解HA切换原理；3、大数据生态系统，对hdfs，yarn，mr

·2021-10-26 16:50

2021-09-15

负责伴鱼数据库运维、大数据运维以及数据库平台化建设。本文来自于伴鱼英语DBA组负责人刘江在**「能量钛」第二期活动的分享**，刘江为大家分享了TiDB慢日志在伴鱼的实践。

TiDB_PingCAP·2021-09-15 17:04

TiDB 慢日志在伴鱼的实践

负责伴鱼数据库运维、大数据运维以及数据库平台化建设。本文来自于伴鱼英语DBA组负责人刘江在「能量钛」第二期活动的分享，刘江为大家分享了TiDB慢日志在伴鱼的实践。

·2021-09-15 17:41

大数据岗位要求之大数据运维

继续介绍大数据系列岗位要求，大数据运维可能是“技术含量最高”的职位之一，这里说的大数据运维主要是指hadoop生态体系方面的运维，在一些小公司或者传统行业的大公司也会使用oracle、db2等技术栈

数据追随者·2021-06-22 07:35

你了解“数据挖掘吗”

大数据目前分三个方向：①、大数据开发方向②、数据挖掘、数据分析&机器学习方向③、大数据运维&云计算方向那么你了解数据挖掘吗？

banana很香蕉·2021-06-20 22:39

2021年大厂业务运维面试题

应用运维面试之路（2021.3.15-2021.6.2）一、恒大面试3月15日19:30-20:00电话面试业务运维1.redis怎么保证高可用和高扩展，怎么扩展的2.业务流程是怎么样的二、shoppee大数据运维面试

爱笑的眼睛22·2021-06-10 21:30

01_1_Linux云计算岗位的发展前景

Linux运维岗位：Linux系统运维工程师、应用运维工程师、运维开发工程师、云计算运维工程师、大数据运维工程师、系统运维架构师Linux知识技能进化路径：系统管理、服务管理、脚本开发~~~系统扩展、系统冗余

宾果go·2021-05-21 04:17

大数据轻量云和全新大数据管家

现场我在A厂一直负责大数据运维，三年前选择专有云这块新业务。

DreamCalifornia·2021-05-04 19:00

Linux云计算岗位的发展前景笔记

liunx岗位：liunx系统运维工程师、应用运维工程师，运维开发工程师，大数据运维工程师，云计算运维工程师，系统运维架构师liunx知识进化路径：1、系统管理，服务管理，脚本开发2、系统扩展，系统冗余

吃藕丑_bce8·2021-05-02 13:13

大数据运维面试总结

一、前言“金三银四”跳槽季，我成功的入职了自己理想的公司（深圳shopee）。在这里给大家分享下这段时间的真实体验，也给即将跑路或者有想法的同学借鉴一下。二、过程1、俗话说“不打无准备的仗”，既然想要跳槽，那一定要提前准备好。拿我个人的经历来说，这一次跳槽历时3个月，前两个月主要是调整心态与复习，最后一个月全在面试与总结。我归纳为以下三个阶段：心态复习方案练手（模拟面试）心态：为什么我把心态放在第

jhonshonjs·2021-04-19 23:12

大数据运维存档（9）HBase常识整理

一、hbase是什么1.1、hbase的概念HBase基于Google的BigTable论文，是建立的HDFS之上，提供高可靠性、高性能、列存储、可伸缩、实时读写的分布式数据库系统。在需要实时读写随机访问超大规模数据集时，可以使用HBase。1.2、hbase的特点海量存储可以存储大批量的数据列式存储HBase表的数据是基于列族进行存储的，列族是在列的方向上的划分。极易扩展底层依赖HDFS，当磁盘

pub.ryan·2020-12-27 13:33

大数据运维存档（8）数仓构建与Hive实现常识整理、生产中调优

目录一、数仓基础1、数仓基本介绍1.1、数仓基本概念1.2、数仓的定义1.2.1、面向主题1.2.2、集成性1.2.3、稳定性1.2.4、时变性1.3、数据仓库与数据库的区别1.4、构建数仓常用手段1.5、数仓分层1.5.1、数仓分层描述1.5.2、为什么要进行数仓分层1.6、获取数据1.7、同步策略2、数据仓库建模2.1、范式建模法（ThirdNormalForm3NF）2.2、维度建模法2.2

pub.ryan·2020-12-27 13:52

云计算和python学哪个_大数据、云计算该如何学习？

大数据之Linux+大数据开发篇阶段一、大数据、云计算-Hadoop大数据开发技术课程一、大数据运维之Linux基础本部分是基础课程，帮大家进入大数据领域打好Linux基础，以便更好地学习Hadoop，

weixin_39968592·2020-11-25 01:42

Zanbix监控开源监控自动化运维大数据运维数字化运维大屏网络设备配置集中备份

CentOS7下部署Maxserver1Jdk安装1.1下载tar.gz包，上传到服务器使用FTP连接工具连接服务器，并上传jdk的tar.gz包到/opt目录下wget下载运行以下命令即可cd/optwgethttp://www.xybcbc.com:8888/app/jdk-8u191-linux-x64.tar.gz1.2卸载系统自带的OpenJDK以及相关的java文件查看相关java文件

益达_glmsb·2020-09-24 13:08

学完大数据后能找什么工作，大数据就业岗位方向

学完大数据可以从事很多工作，比如说：hadoop研发工程师、大数据研发工程师、大数据分析工程师、数据库工程师、hadoop运维工程师、大数据运维工程师、java大数据工程师、spark工程师等等都是我们可以从事的工作岗位

y南风知我意·2020-09-13 09:37

大数据职业规划所感所悟

等hive+java+算法+业务+架构（高并发）-------------------------linux运维工程师转型大数据运维工程师：精通linux，hadoop、spark、storm、hbase

不急吃口药·2020-09-13 08:28

ELK多种架构及优劣

wlx_1001·2020-09-12 17:04

大数据运维学习之路

今天我们就来聊一聊大数据运维工程师。一.Linux发展与学习线路二.大数据运维的工作职责一.集群管理大数据需要分布式系统，也就是集群：Hadoop，Hbase，Sp

无精疯·2020-09-10 12:41

在VMware上安装CentOS 7.6步骤

Linux运维技术交流群:QQ:833196402Python技术交流群:QQ:971440453大数据运维技术交流群:QQ:766173537

老徐是个铁憨憨·2020-08-23 15:02

HBase2.0新特性详解

作者|个推大数据运维工程师行者升级背景个推作为专业的数据智能服务商，在业务开展过程中存在海量的数据存储与查询的需求，为此个推选用了高可靠、高性能、面向列、可伸缩的分布式数据存储系统——HBase。

个推开发者·2020-08-22 15:39

大数据运维问题记录(三)

问题描述：在resourcemanager页面查看到一些节点的Healthreport中报1/4local-dirsarebad:/opt/data/hadoop/nm1-local-dir;问题解决：查找该目录，发现/opt/data/hadoop下没有nm1-local-dir，而是nm1-local-dir%0A%20%20%20%20%20%20%20%20%20%20%20%20%20f

火车飞侠·2020-08-21 02:21

每天5分钟玩转Linux系列-CentOS7x64 1810安装net-tools工具

yuminstall-ynet-tools安装完毕以后百度可以Ping获得更多Linux知识Linux运维技术交流群:QQ:833196402Python技术交流群:QQ:971440453大数据运维技术交流群

程序员亮哥·2020-08-20 20:45

每天5分钟玩转Linux系列-CentOS7x64 1810安装lrzsz插件实现文件上传和下载

Linux运维技术交流群:QQ:833196402Python技术交流群:QQ:971440453大数据运维技术交流群:QQ:766173537

程序员亮哥·2020-08-20 20:44

大数据的整理

主要分为，大数据运维方向，大数据数仓方向，大数据的计算方向。接下来的4天会输出一份impala的文档

metooman·2020-08-20 17:15

【Linux入门第二天】Linux云计算岗位的发展前景

各大型互联网公司IDC主机的操作系统（4）各种智能设备，如智能监控等等除此之外，马哥也介绍了一下Linux运维的岗位情况，从下到上顺序有：1、系统运维架构师2、云计算运维工程师、运维开发工程师3、应用运维工程师、大数据运维工程师

change_cf15·2020-08-20 13:13

大数据运维2--MapReduce的配置,简单的词频分析,hadoop节点的管理,搭建NFS挂载HDFS系统

目录MapReduce的配置(主要是给开发用的,程序呢)hadoop统计词频移除节点NFS配置MapReduce的配置(主要是给开发用的,程序呢)需要修改两个配置文件mapred-site.xml和yarn-site.xml,在nn01节点安装之后,需要同步到其他的主机上.[root@nn01hadoop]#cd/usr/local/hadoop/etc/hadoop/[root@nn01hado

zhy-dream·2020-08-18 07:03

大数据运维3--zookeeper和kafaka的简单使用

Zookeeper概述是一个开源的分布式应用程序协调服务,它是用来保证数据在集群间的事物一致性的举例,比如A公司和B公司达成某个协议,A公司需要到B公司取对应的文件过程,这个过程叫通信的过程.计算机中的程序比较多,会出现资源争抢,这个时候会发生死锁,这时整个资源会出现运转不了.这个时候,如果有个交警,指挥资源的流动,这个时候就不会出现死锁.如下图,如果在单机上,资源XY可以打包一起,当需要访问的时

zhy-dream·2020-08-18 07:03

大数据就业前景怎么样学后能从事什么工作

学习大数据可以从事很多工作，比如说：hadoop研发工程师、大数据研发工程师、大数据分析工程师、数据库工程师、hadoop运维工程师、大数据运维工程师、java大数据工程师、spark工程师等等都是我们可以从事的工作岗位

千锋郑州·2020-08-16 14:30

Linux-day01

IT行业的工作方向云计算–大数据运维-Linux操作系统（Windows–桌面工程师）其中包含：Linux运维（web架构）（搭建自己的个人网站）虚拟化KVM\XEN——openstack——docker

LY_struggle·2020-08-15 12:08

大数据运维Mahout

Mahout题：在master节点安装MahoutClient,打开LinuxShell运行mahout命令查看Mahout自带的案例程序。[root@master~]#mahoutMAHOUT_LOCALisnotset;addingHADOOP_CONF_DIRtoclasspath.Runningonhadoop,using/usr/hdp/2.6.1.0-129/hadoop/bin/ha

mn525520·2020-08-10 06:57

运维Linux基础介绍

购买服务器，上架调整网络设备的设置部署操作系统的运行环境，部署代码，设计和部署监控，防止漏洞攻击对于大型公司，运维工作：网站运维，基础运维，系统运维，网络运维，数据库运维，IT运维，运维开发，大数据运维

运维方便面·2020-08-05 19:58

简影+7.30课堂笔记

IT行业的工作方向一：云计算--大数据运维lLinux操作系统（Windows--桌面工程师）l-----------------------------------------------------

weixin_38169927·2020-08-02 19:02

大数据、云计算该如何学习？

大数据之Linux+大数据开发篇【大数据开发学习资料领取方式】：加入大数据技术学习交流群458345782，点击加入群聊，私信管理员即可免费领取阶段一、大数据、云计算-Hadoop大数据开发技术课程一、大数据运维之

yyyyyyyyyooi·2020-08-01 08:24

Python爬虫入门实战

--Python+大数据：即Python企业级开发与大数据运维，作为

Muchen灬·2020-07-31 23:36

[Linux入门第二天]Linux云计算岗位的发展前景笔记

系统无处不在安卓手机、pad底层系统基于安卓的各种VR设备各大互联网IDC主机操作系统智能设备、监控系统(2)Linux运维在公司中有哪些岗位系统运维架构师运维开发工程师云计算运维工程师应用运维工程师大数据运维工程师

lvdunlinux·2020-07-29 15:04

大数据运维MapReduce

MapReduce题：在集群节点中/usr/hdp/2.4.3.0-227/hadoop-mapreduce/目录下,存在一个案例JAR包hadoop-mapreduce-examples.jar。运行JAR包中的PI程序来进行计算圆周率π的近似值,要求运行5次Map任务,每个Map任务的投掷次数为5。root@master~]#suhdfs[hdfs@master~]$cd/usr/hdp/2.

mn525520·2020-07-28 03:32

五组数据告诉你倒闭企业的“死亡画像”

数据猿·2020-07-27 18:34

智领云发布BDOS大数据操作系统V2.0版本，BDOS Online版本同步上线

2018年09月10日，智领云发布BDOS大数据操作系统V2.0最新企业版，通过领先的技术，提供性能稳定的大数据平台(大数据运维，数据流水线，机器学习，人工智能，流数据处理，大数据组件集成)，基于Mesos

LinkTime_Cloud·2020-07-27 16:01

漫谈ELK在大数据运维中的应用

茄肥猫·2020-07-16 02:53

Linux 运维工程师学习成长路线上要经历哪四个阶段？

比如云计算系统工程师，大数据运维工程师，运维开发工程师

运维派V·2020-07-15 17:17

2019年超新超全的大数据运维技能图谱

运维是一个融合多学科(网络、系统、开发、安全、应用架构、存储等)的综合性技术岗位，从最初的网络管理（网管）发展到现在的系统运维工程师、网络运维工程师、安全运维工程师、运维开发工程师等，可以看出，运维的分工一直在细化，并且对综合技能要求越来越高，可以看出，未来运维的发展趋势是高、精、尖，高表示高度，精表示精通，尖表示尖端，也就是运维职场一定要站在一定的技术高度，在多个技术领域中，要精通某项技能，同时

xiaokaiabcde·2020-07-15 10:35

视频教程-CM&CDH大数据运维官方课程-Hadoop

CM&CDH大数据运维官方课程任老师，Cloudera管理/开发/分析认证讲师，华为高级特聘讲师，新华三大学高级特聘讲师，中国大数据技术与应用联盟高级讲师，全国高校大数据联盟特聘讲师，中国移动高级讲师，

weixin_33379282·2020-07-15 04:14

Linux63期 day-12 操作系统阶段梳理

第一次复习回顾一、服务器硬件知识1.系统运维工作：网络安全运维云计算运维大数据运维数据库运维（DBA）运维开发（自动化运维）监控运维运维三大职责：保证数据不丢失，不泄露保证服务器7*24小时稳定运行不宕机提升用户访问体验

木孑楊·2020-07-14 18:46

Linux运维发展方向及运维技能

一、Linux运维工作划分1、按领域来划分（1）基础设施运维：IDC/网络运维、服务器/存储设备运维（2）系统运维：系统中间件运维、云计算运维（3）数据运维：数据库运维、大数据运维（4）应用运维：应用软件运维

linux言叙·2020-07-11 17:23

巨杉案例：基于日志的大数据运维管理平台

在电信行业，运营商构建了非常多的应用系统为广大消费者提供各种特色服务，有一些系统的功能由于在业务操作的上下文中，涉及到多个业务系统的子功能，需要多个系统共同提供服务才能正常工作，导致任何系统出现异常都会影响到其余的系统，对企业形象和社会造成非常恶劣的影响。而各业务系统的应用日志是了解业务系统是否正常运行的最直接可靠的窗口，通过统一收集、分类应用日志，并实现日志分析，可实现如下价值：加强网络运营效率

csdn郭芮·2020-07-11 08:03

一个暑假打通 Linux 任督二脉，技术天团带你11周成为运维大咖！

据统计，2017年上海的大数据运维工程师平均薪资为15500/月。实验楼推出了「楼+linux运维与DevOps实战」实训

实验楼v·2020-07-10 22:05

HIVE- 大数据运维之hive管理

我现在在一家公司负责大数据平台（CDH平台）的运维管理，最常遇见的问题我总结出来，并且继续在下面更新。希望方便自己以后troubleshooting以及方便各位同行解决问题与学习。关于做运维有几个重要的要点一定一定要遵守的：遇到问题冷静，冷静，冷静，就山崩都要冷静，心态关乎你是否能将问题解决同时不会给人留下不好的印象。凡是关于对集群更改与变动的操作，一定要在测试环境测试到没问题才上生产，不然可能会

weixin_34186950·2020-07-10 08:37

推荐频道

大数据运维