python大数据运维工程师

什么样的程序员能称为架构师

一个软件产品的开发需要一系列角色的配合才能够完成，从一个产品的设计到最终的部署需要产品经理、策划、交互工程师、视觉工程师、架构师、产品经理、程序员、测试、运维工程师等一系列角色的配合。
Java高级架构狮·2023-12-01 08:50

实施工程师&运维工程师面试题

Linux1.请使用命令行拉取SFTP服务器/data/20221108/123.csv文件，到本机一/data/20221108目录中。使用命令行拉取SFTP服务器文件到本机指定目录，可以使用sftp命令。假设SFTP服务器的IP地址为192.168.1.100，用户名为username，密码为password，要拉取的文件路径为/data/20221108/123.csv，目标路径为本机/da
IT北辰·2023-11-30 16:47

学网络安全能找哪些工作？这8个方向越早知道越好！

1.安全服务和安全运维首先是安全服务工程师和安全运维工程师，这2个职业要求的门槛不高，做的活比较杂，在网安领域属于末端了，在长沙的月收入大概是7~10K左右。
网络安全学习库·2023-11-29 23:33

学网络安全能找哪些工作？这六个方向越早知道越好！

建议每个准备走这条路的人一定要提前了解这6个方向，越早知道的话对你越有利1.安全服务和安全运维首先是安全服务工程师和安全运维工程师，这2个职业要求的门槛不高，做的活比较杂，在网安领域属于末端了，在长沙的月收入大概是
一个很黑的黑客·2023-11-29 23:32

【RPA之家转载】RPA+AI，有力促进财务共享服务应用升级

其中包括RPA开发工程师、售前工程师、业务分析师、架构师、运维工程师、项目管理、项目负责人、企业高管、HR等多种角色。
爽朗的木兮呀·2023-11-29 09:22

新手想做IT运维工程师该详细学习哪些知识？

你首先要考虑一个问题：运维工程师必须掌握的基础技能有哪些?
程序员小颖-·2023-11-29 03:41

Linux常用监控指标

在各位运维工程师长期的工作实践中，我们总结了在系
touch_The_Sky·2023-11-28 13:03

Python大数据基础之数据清洗（数据转换篇）

数据转换是指将数据转换或统一成适合于挖掘的形式。数据规范化大致分为三种最大最小规范化、z-score规范化、按小数定标规范化。一、z-score规范化z-score规范化：又称标准差规范化或零均值规范化，数据处理后服从标准正态分布，也是比较常用的规范化方法。其中为对应特征的均值，为标准差。python中有两种方法实现：利用Pandas中DataFrame的apply函数；利用sklearn库已经封
小华6不6·2023-11-28 07:58

python大数据之数据清洗

数据决定模型的上限，好的数据或数据处理，对模型的影响是非常大的，同样，对于数据的处理，不同的数据，处理情况也不一样，具体情况如下所示：缺省值处理异常值处理样本的数量特征的数量：特征筛选特征的类型（连续，整形，类别）缺省值处理对于缺省值，这个需要根据不同的情况，不同类型的数据来进行不同的处理。删除法：如果缺失值样本较少的话，直接删除，或删除缺省值较大的零近值填补：对每一列的缺失值，采用临近位置的数据
addict_jun·2023-11-28 07:25

腾讯云运维工程师认证TCA原题（2）

21.初始化腾讯云MySQL数据库时，支持下列哪些相关参数的初始化配置?A.支持字符集B.自定义端口C.root用户的密码D.表名大小写敏感正确答案ABCD解释说明腾讯云Mysql支持初始化的参数有：支持字符集、表名大小写敏感、自定义端口、设置r001帐号密码、确认密码22.云监控提供了多种方式帮助用户判断资源异常并通过多种渠道使异常信息第一时间触达用户。通过云监控控制台找出异常原因的操作流程有哪
送个祝福给小豪·2023-11-27 18:45

腾讯云tca认证要具备哪些能力？腾讯云tca认证适合那些人群

二、腾讯云运维工程师认证tca简介腾讯云运维工程
huainian·2023-11-27 18:10

腾讯云运维工程师认证TCA

1、TSF控制台的配置中心，目前支持以下哪一种格式的配置文件?JSON格式XML格式YAML格式Properties配置格式正确答案：C解答：无2、传统应用开发采用瀑布开发模型，瀑布开发模型将软件生命周期划分如下六个基本活动:1.编码;2.计划;3.需求分析;4.测试;5.设计;6.维护;以下关于瀑布开发模型的生命周期顺序，正确的是哪一项?2-3-5-1-4-62-1-5-3-4-63-5-2-4
八月的冰可乐·2023-11-27 18:06

计算机基础作业

**答：先是产品经理谈项目决定做什么，之后是UI设计师决定产品做成什么样子，之后是前端、后端实现产品，然后是测试工程师测试产品性能和bog，最后是运维工程师维护产品。
snsd_cc·2023-11-27 12:58

运维工程师之路

一、什么是大型网站运维？首先明确一下，全文所讲的”运维“是指：大型网站运维，与其它运维的区别还是蛮大的；然后我们再对大型网站与小型网站进行范围定义，此定义主要从运维复杂性角度考虑，如网站规范、知名度、服务器量级、pv量等考虑，其它因素不是重点；因此，我们先定义服务器规模大于1000台，pv每天至少上亿（至少国内排名前10），如sina、baidu、QQ，51.com等等；其它小型网站可能没有真正意
weixin_33694172·2023-11-27 03:16

Python大数据考题

Python大数据考题：2022找工作是学历、能力和运气的超强结合体，遇到寒冬，大厂不招人，可能很多算法学生都得去找开发，测开测开的话，你就得学数据库，sql，oracle，尤其sql要学，当然，像很多金融企业
冰露可乐·2023-11-26 16:06

运维工程师学习路线

运维工程师在前期是一个很苦逼的工作，在这期间可能干着修电脑、掐网线、搬机器的活，显得没地位！时间也很碎片化，各种零碎的琐事围绕着你，很难体现个人价值，渐渐的对行业很迷茫，觉得没什么发展前途。
Serp·2023-11-26 06:10

大数据开发之运维面试题汇总分享

A:课堂所示兼顾了小白同学，所以是手把手纯人肉搭建，产线环境扩容数量少则几十多则上百，人肉肯定不行，我们公司的运维分为IAAS运维、大数据运维、应用运维，大数据运维工程师在扩容集群时，需要向IAAS运维工程师以工单的方
at小白在线中·2023-11-25 19:43

Linux 系统下strace命令遇到的坑

运维工程师都是实践派的人，我们还是先来个例子吧。我们从别的机器copy了个叫做some
全干工程师007·2023-11-25 17:20

Redis运维精讲之密码设置篇

网络上大多数都是第一种的设置方法，但作为一个专业的运维工程师，小孩子才做选择，我们全都要。
fenglei2020·2023-11-25 02:53

项目部署&上线原理

Nginx根据运维工程师配置好的规则，进行请求的转发，将请求分配到不同的服务器(对应不同的IP地址)上，从而减轻服务器处理压力。【附】一个服务器上可以起多个服务，多个服务IP相同，端口号不同，每个服务
南慕瑶·2023-11-24 11:34

2022-10-03

核酸检测软件方案开发周期：30d地点：克拉玛依预计招聘人数：6职位产品经理（兼项目经理）开发工程师服务端开发工程师运维工程师测试工程师UI设计师预计工资软件工程.png汇总：20+18+18+15+8+
iboy_b13a·2023-11-24 07:50

GPU服务器常见故障修复记录

日常写代码写方案文档，偶尔遇上服务器出现问题的时候，也需要充当一把运维工程师，此帖用来记录GPU服务器报错的一些解决方案，仅供参考！
酒酿小圆子～·2023-11-24 07:17

分布式微服务架构体系详解

在最初系统架构的搭建，或者当现有架构已到达瓶颈需要进行架构演进时，很多架构师、运维工程师会考虑是否需要搭建微服务架构体系。
Theriseof·2023-11-23 07:38

【Python大数据笔记_day11_Hadoop进阶之MR和YARN&ZooKeeper】

MR单词统计流程已知文件内容:  hadoophivehadoopsparkhive flinkhivelinuxhivemysql​input结果:   k1(行偏移量) v1(每行文本内容)   0 hadoophivehadoopsparkhive   30 flinkhivelinuxhivemysqlmap结果:   k2(split切割后的单词)v2(拼接1)     hadoop1 
LKL1026·2023-11-22 21:37

linuxz之shell编程

linuxz之shell编程1.为什么要学习shell编程1）Linux运维工程师在进行服务器集群管理时，需要编写shell程序来进行服务器管理。
刘晶123·2023-11-22 21:52

python大数据分析基础教程_基于Python的大数据分析基础及实战

第1部分基础篇第1章Python语言基础/21.0引子/21.1工欲善其事，必先利其器（安装Python）/31.2学跑得先学走（语法基础）/91.3程序结构/111.3.1HelloWorld!/111.3.2运算符介绍/121.3.3顺序结构/141.3.4判断结构/171.3.5循环结构/181.3.6异常/201.4函数/241.4.1基本函数结构/241.4.2参数结构/251.4.3回
weixin_39760919·2023-11-22 19:42

AIOps探索 | 应急处置中排障的降本增效方法探索（上）

文章来源：公众号ID-布博士（擎创科技资深产品专家）哈喽~友友们大家好，最近运维界也是蛮热闹的，前有语雀多次崩溃，后有阿里全系产品集体故障，不管是哪种，都足够逼疯一个运维工程师。
擎创夏洛克AIOps·2023-11-22 18:58

【数据库表及字段统计SQL】【mysql】【clickhouse】【oracle】

最近在一些元数据整理时，需要对数据库进行澄清，奈何数据库没有专门的运维工程师，得自行取相关信息，故最终整理了相关统计语句。
辅猪之王·2023-11-20 23:15

Python学习教程 不走弯路 提高效率！学霸都在用

学霸都在用对于初学者想更轻松的学好Python开发技术，Python爬虫，Python大数据分析,人工智能等技术，这里给大家分享一套系统教学资源，加一下我建的Python技术的学习裙；九三七六六七五零九
IT编程联盟·2023-11-20 09:12

Python大数据之linux学习总结——day10_hive调优

hive调优hive调优hive命令和参数配置1.hive数据压缩压缩对比开启压缩2.hive数据存储[练习]行列存储原理存储压缩比拓展dfs-du-h3.fetch抓取4.本地模式5.join的优化操作6.列裁剪7.分区裁剪8.groupby操作9.count(distinct)10.笛卡尔积11.动态分区[练习]12.如何调整map和reduce的数量13.并行执行14.严格模式15.JVM重
笨小孩124·2023-11-19 20:50

Python大数据之linux学习总结——day11_ZooKeeper

ZooKeeperZK概述ZooKeeper概念:Zookeeper是一个分布式协调服务的开源框架。本质上是一个分布式的小文件存储系统ZooKeeper作用:主要用来解决分布式集群中应用系统的一致性问题。ZooKeeper结构:采用树形层次结构，ZooKeeper树中的每个节点被称为—Znode。且树中的每个节点可以拥有子节点ZK集群环境zookeeper概念:分布式协调服务zookeeper的服
笨小孩124·2023-11-19 20:50

Python大数据之linux学习总结——day10_hadoop原理

Hadoop原理Hadoop基础分布式和集群Hadoop框架概述生态圈版本更新hadoop架构[重点]官方示例圆周率练习词频统计[重点]需求:步骤:Hadoop-HDFS特点hdfs架构块和副本shell命令Hive环境准备[重点]前提启动hadoop集群启动hdfs和yarn集群启动mr历史服务检查服务配置Hive环境变量回顾shell脚本执行方式配置环境变量先启动hive服务知识点:示例:再连
笨小孩124·2023-11-19 20:38

Python大数据之linux学习总结——day06_hive02

hive02hive内外表操作建表语法数据类型表分类内部表基本操作[练习]知识点：外部表基本操作[练习]知识点:示例:查看/修改表示例:默认分隔符示例:快速映射表[练习]知识点:示例:数据导入和导出文件数据加载导入1.直接上传文件window页面上传linux本地put上传2.load加载文件:load移动HDFS文件:load上传Linux文件3.insert插入数据insert追加数据inse
笨小孩124·2023-11-19 15:58

运维和网工的差别，跟你们说一说

网络运维工程师属于网络工程师里售后的一个分支网络工程师如果按销售可分为售前、售后。按工程步骤分设计、建设、运行、维护，运维就是后两个，工作职责主要是维护、升级和出问题的时候解决问题。
网络工程师阿俞·2023-11-18 23:15

网工内推 | 高级运维，需有制造业运维经验，IE认证优先

01深圳市飞荣达科技股份有限公司招聘岗位：高级运维工程师职责描述：1.参与、负责集团公司IT基础技术架构的规划设计、实施及维护、性能优化，包括数据中心机房、网络架构、虚拟化平台、信息安全设备及灾备系统等
HCIE考证研究所·2023-11-18 23:34

网工内推 | Linux运维，六险二金，最高30K，IE认证优先

01上海域起招聘岗位：Linux运维工程师职责描述：1.负责游戏产品运维相关的工作，流程文档、技术文档、功能脚本的编写整理2.负责分析并排除系统、数据库、网络、应用等游戏产品运维中出现的故障及错误3.负责对游戏产品项目进行线上部署
HCIE考证研究所·2023-11-18 23:31

【Python大数据笔记_day10_Hive调优及Hadoop进阶】

hive调优hive官方配置url:ConfigurationProperties-ApacheHive-ApacheSoftwareFoundationhive命令和参数配置hive参数配置的意义:开发Hive应用/调优时，不可避免地需要设定Hive的参数。设定Hive的参数可以调优HQL代码的执行效率，或帮助定位问题。然而实践中经常遇到的一个问题是，为什么我设定的参数没有起作用？这是对hive
LKL1026·2023-11-18 19:33

2023最新大数据毕设选题

1.3难度把控1.4题目名称1.5最后2大数据-选题推荐2.1大数据挖掘类2.2大数据处理、云计算、区块链毕设选题2.3大数据+安全类2.4python大数据游戏设计、动画设计类2.5大数据-图像识别算法类
m0_76217654·2023-11-17 15:00

2024最新python大数据毕设选题推荐

文章目录0前言1如何选题1.1选题技巧：如何避坑(重中之重)1.2为什么这么说呢？1.3难度把控1.4题目名称1.5最后2选题推荐2.1数据分析可视化选题推荐2.2算法类选题推荐(深度学习机器学习)最后0前言Hi，大家好，大四的同学马上要开始毕业设计啦，大家做好准备了没！学长给大家详细整理了最新的大数据专业相关选题，对选题有任何疑问，都可以问学长哦~1如何选题如何选题这是大部分同学最关心的事情，选
caxiou·2023-11-17 15:58

python大数据毕业设计题目100例

文章目录0前言1python-算法类毕设选题2python-数据挖掘毕设选题3python-大数据处理、云计算、区块链毕设选题4python-网络安全毕设选题5python游戏设计、动画设计类毕设选题(适合数媒的同学)6如何选题1.1起因1.2如何避坑(重中之重)1.3为什么这么说呢？1.4难度把控1.5题目名称1.6最后0前言Hi，大家好，大四的同学马上要开始毕业设计啦，大家做好准备了没！学长给
caxiou·2023-11-17 15:57

2024python大数据毕设选题推荐（详细）

文章目录0前言1如何选题1.1选题技巧：如何避坑(重中之重)1.2为什么这么说呢？1.3难度把控1.4题目名称1.5最后2选题推荐2.1数据分析可视化选题推荐2.2算法类选题推荐(深度学习机器学习)最后0前言Hi，大家好，大四的同学马上要开始毕业设计啦，大家做好准备了没！学长给大家详细整理了最新的大数据专业相关选题，对选题有任何疑问，都可以问学长哦~1如何选题如何选题这是大部分同学最关心的事情，选
caxiou·2023-11-17 15:57

python大数据毕设选题

文章目录0前言1大数据毕设选题推荐2开题指导3最后0前言大家好！大四的同学们，毕业设计的时间即将到来，你们准备好了吗？为了帮助大家更好地开始毕设，我作为学长给大家整理了最新的计算机大数据专业的毕设选题。如果在开题选题的过程中有任何疑问，都可以随时向我提问，我会根据你们的情况提供帮助。对于大数据专业的毕设选题，重要的是选择与该领域紧密相关且具有实际意义的课题。大数据技术在各个行业中的应用日益广泛，所
DanCheng-studio·2023-11-17 14:51

python大数据之MySQL学习总结——day06_kettle的使用

KettleKettle1.安装环境先安装java环境安装jdk8配置环境变量再解压kettle软件启动注意:2.kettle入门简介步骤3.txt转换excel[练习]第一步:新建转换第二步:构建流图第三步:配置组件先配置输入组件再配置输出组件第四步:保存运行4.mysql连接①配置mysql环境②kettle连接mysql③共享mysql连接5.excel转换mysql[练习]第一步:新建转换
笨小孩124·2023-11-17 09:46

Python大数据之linux学习总结——day07_hive03

hive03分区表[练习]一级分区知识点：示例：多级分区知识点:示例：分区表知识点：示例：hadoop_hive文档分桶表[练习]重要参数基础分桶表:知识点:示例:分桶表排序:知识点:示例:随堂练习注意事项:分桶原理分区表和分桶表区别复杂类型hvie的SerDe机制复杂类型:array示例:struct示例:map示例:select查询[预习]类sql基本查询类sql多表查询hive整体语句格式h
笨小孩124·2023-11-17 09:46

Python大数据之linux学习总结——day09_hive函数

hive函数函数分类标准[重点]知识点:原生分类标准:内置函数和用户定义函数(UDF,UDAF,UDTF)分类标准扩大化:本来，UDF、UDAF、UDTF这3个标准是针对用户自定义函数分类的；但是，现在可以将这个分类标准扩大到hive中所有的函数，包括内置函数和自定义函数；目前hive三大标准UDF:（User-Defined-Function）普通函数:特点是一进一出(输入一行数据输出一行数据)
笨小孩124·2023-11-17 09:46

Python大数据之linux学习总结——day09_hive调优

hive调优hive官方配置url:https://cwiki.apache.org/confluence/display/Hive/Configuration+Propertieshive命令和参数配置hive参数配置的意义:开发Hive应用/调优时，不可避免地需要设定Hive的参数。设定Hive的参数可以调优HQL代码的执行效率，或帮助定位问题。然而实践中经常遇到的一个问题是，为什么我设定的参
笨小孩124·2023-11-17 09:46

Python大数据之Python爬虫学习总结——day13 正则表达式

正则表达式1.web服务器2.体验爬虫3.正则表达式_匹配知识点：match匹配:search匹配:findall匹配:4.匹配模式练习需求：方式一：方式2：5.正则表达式_模式知识点：示例：6.正则表达式综合练习7.贪婪模式和非贪婪模式示例：8.正则表达式标志位知识点:1.web服务器web服务器给浏览器响应的是是一个Response对象，这个对象中content就是咱们给浏览器响应的资源#实战
笨小孩124·2023-11-17 09:15

Python大数据基学习总结day06——数据容器（列表）

数据容器1.数据容器入门1.各个容器的符号2.方法和函数的比较1.知识点总结2.实例演示：3.列表的定义1.基本语法格式：4.列表的下标索引1.知识点总结2.实例演示：5.列表的增删改查1.知识点总结增:添加元素删:删除元素改:修改元素查:查找元素2.实例演示：6.列表的遍历1.知识点总结2.对比3.实例演示：1.数据容器入门数据容器含义:能够存储多个元素的数据类型,叫数据容器常见的数据容器分为5
笨小孩124·2023-11-17 09:45

Python大数据之Python爬虫学习总结——day14_爬取图片和数据

爬取图片和数据1.爬虫入门知识点:示例:2.爬取图片爬取图片方式1:爬取图片方式2:3.爬取视频实战:4.爬取文本爬取文本方式1:爬取文本方式2:1.爬虫入门知识点:网络爬虫：（又称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。爬虫步骤:1.准备有效的URL
笨小孩124·2023-11-17 09:45

Python大数据之linux学习总结——day08_hive04

hive04hive查询语法结构:类sql基本查询知识点:数据准备:数仓分层思想:课堂练习:类sql多表查询知识点:数据准备:练习:hive其他join操作知识点:示例:hive其他排序操作[练习]知识点:示例:抽样查询知识点:示例:正则模糊查询union联合查询知识点:示例:CTE表达式内置虚拟列知识点:示例:hive函数[预习]函数分类标准[重点]知识点:示例:复杂类型函数知识点:示例:字符串
笨小孩124·2023-11-17 09:37
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他