运维-大数据

Azkaban：强大的开源工作流调度系统

一、概述在大数据生态系统中，随着数据量的爆炸式增长和任务复杂度的提升，管理和调度大规模的批处理任务成为了一项艰巨的挑战。
Hello.Reader·2024-09-05 15:15

系统架构师考试学习笔记第三篇——架构设计高级知识（13）未来信息综合技术

本课时考点：第13课时主要学习信息物理系统技术、人工智能技术、机器人技术、边缘计算、数字孪生体技术以及云计算和大数据技术等内容。
SheldonK·2024-09-05 15:15

1+X云计算运维与开发(中级)实战案例——Kafka集群部署

它的高性能、可扩展性以及丰富的功能使其成为了大数据领域中的重要工具之一。Kafka中发布订阅的对象是topic。用户可以为每类数据创建一个topic，把向
kuuuugua·2024-09-05 15:41

2023年哪些副业兼职受青睐？

据介绍，该报告数据来源通过兼职猫用户大数据分析及10万份用户调研问卷获得。据统计，疫情期间新注册用户年龄以22岁以下为主，占平台总用户的68%，其中18岁以下未成年人突增，占据平台用户的30.9%；从
氧惠佣金真的高·2024-09-05 14:58

jenkins+docker实现可持续自动化部署springboot项目

目录一、前言二、微服务带来的挑战2.1微服务有哪些问题2.2微服务给运维带来的挑战三、可持续集成与交付概述3.1可持续集成与交付概念3.1.1持续集成3.1.2持续交付3.1.3可持续集成与交付核心理念
小码农叔叔·2024-09-05 14:37

Oracle日常运维命令

一、日常巡检命令1、检查Oracle实例状态SQL>setpages600lines600SQL>selectinstance_name,host_name,startup_time,status,database_statusfromv$instance;说明：“STATUS”表示Oracle当前的实例状态，必须为“OPEN”；“DATABASE_STATUS”表示Oracle当前数据库的状态，
一心只为学·2024-09-05 13:29

Spark

它提供了对大数据集的容错机制，支持并行操作。DataFrame：DataFrame是基于RDD
傲雪凌霜，松柏长青·2024-09-05 11:20

Windows系统下的Spark环境配置

一：Spark的介绍ApacheSpark是一个开源的分布式大数据处理引擎，它提供了一整套开发API，包括流计算和机器学习。
eeee~~·2024-09-05 11:19

大数据给你带来的物业管理新变化！

from=jianshu在互联网与云计算的影响下，我们正在进入大数据全面渗透的信息时代。
数据观数据分析平台·2024-09-05 09:01

零基础转行学网络安全怎么样？能找到什么样的工作？

零基础转行学习网络安全是完全可行的，但需要明确的是，网络安全是一个既广泛又深入的领域，包含了网络协议、系统安全、应用安全、密码学、渗透测试、漏洞挖掘、安全编程、安全运维等多个方面。。
爱吃小石榴16·2024-09-05 08:58

大数据生态圈里的一致性算法

大数据生态圈中，保证一致性的方式举不胜举Hadoop用Zookeeper（Zab，Paxos+事务顺序）ElasticSearch用Hash路由算法（非一致性Hash）Cassandra用Gossip闲话算法
宇宙湾·2024-09-05 07:35

华为云服务-运维篇-负载均衡介绍与平台算法使用_华为负载均衡设备(1)

本地负载均衡不需要花费高额成本购置高性能服务器，只需利用现有设备资源,就可有效避免服务器单点故障造成数据流量的损失，通常用来解决数据流量过大、网络负荷过重的问题。同时它拥有形式多样的均衡策略把数据流量合理均衡的分配到各台服务器。如果需要在现在服务器上升级扩充，不需改变现有网络结构、停止现有服务，仅需要在服务群中简单地添加一台新服务器。2.4、全局负载均衡2.4.1、简介全局负载均衡针对不同地理位置
一个射手座的程序媛·2024-09-05 07:19

探索`binlog2sql_java`: 实时数据同步利器

探索binlog2sql_java:实时数据同步利器项目简介在大数据领域中，实时数据同步是一个至关重要的环节，它能让应用始终保持最新、最准确的数据状态。
廉欣盼Industrious·2024-09-05 05:37

【大数据】浅谈Pyecharts：数据可视化的强大工具

文章目录一、引言二、Pyecharts是什么三、Pyecharts的发展历程四、如何使用Pyecharts1.安装Pyecharts2.创建图表（1）导入Pyecharts模块：（2）创建图表实例：（3）添加数据：（4）设置图表样式：（5）渲染图表：3.运行和查看图表五、目前的市场情况六、总结一、引言在数据时代，数据可视化已成为数据分析的重要组成部分。Pyecharts，作为一款基于Python的
熬夜的王·2024-09-05 05:04

【30天玩转python】Python简介与安装

它以简单易懂的语法和强大的功能性迅速流行，广泛应用于Web开发、数据分析、人工智能、自动化运维等多个领域。
爱技术的小伙子·2024-09-05 04:29

使用 Vue.js 构建大屏可视化系统

引言随着大数据时代的到来，实时监控和数据分析变得越来越重要。大屏可视化系统可以帮助我们快速了解业务状况，做出及时决策。本文将详细介绍如何使用Vue.js构建一个功能完善的大屏可视化系统。
不知名靓仔·2024-09-05 04:58

人工智能在现代科技中的应用和未来发展趋势。

药物研发：通过模拟和大数据分析，AI加速了新药研发过程，缩短了药物上市时间。个性化治疗：AI能够根据患者的个人数据，推荐最适合
爱掉发的小龙·2024-09-05 03:57

学习大数据DAY43 Sqoop 安装，配置环境和使用

目录sqoop安装配置mysqlsqoop安装sqoop指令集sqoop使用sqoop创建hive表sqoop全量导入表sqoop增量导入表sqoop全量导出表sqoop分区表导入表sqoop分区表导出表上机练习sqoop安装配置mysqlcreatedatabasetestDEFAULTCHARACTERSETutf8DEFAULTCOLLATEutf8_general_ci;--创建数据库sh
工科小石头·2024-09-05 03:52

大数据Python基础学习——练习（二）

目录使用字典完成一个点餐系统要求判断两个函数的区别lambda，reduce的应用reduce，map，filter，sorted的应用按照字典的值进行排序Python中的类，实例，封装，继承和多态Python中的内置模块和第三方模块自定义一个包打印函数的执行时间isinstance的应用hasattr()，setattr()，getattr()的作用对类中绑定的属性做一个限制鸭子类型import
喜欢你，还有大家·2024-09-05 03:21

【Linux服务器故障排查实用指南】

原文地址：【Linux服务器故障排查实用指南】作者：蚁巡运维平台#运维#http://www.antvision.cn/由于造成网络问题的因素多种多样，因此网络故障排查技能就成了每位服务器或网络服务负责人必不可少的重要素质
weixin_34214500·2024-09-05 01:11

大数据系列之：查看进程控制组信息、查看systemctl服务信息、查看服务器所有控制组信息、查看服务在控制组内存限制、显示系统上所有正在运行的进程和服务的控制组（cgroup）层次结构

大数据系列之：查看进程控制组信息、查看systemctl服务信息、查看服务器所有控制组信息、查看服务在控制组内存限制、显示系统上所有正在运行的进程和服务的控制组（cgroup）层次结构、控制组和控制组下进程的关系查看进程控制组信息查看
快乐骑行^_^·2024-09-05 00:07

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（二十四）

本站以分享各种运维经验和运维所需要的技能为主《python零基础入门》：python零基础入门学习《python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中
向往风的男子·2024-09-05 00:07

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（十九）

本站以分享各种运维经验和运维所需要的技能为主《python零基础入门》：python零基础入门学习《python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中
向往风的男子·2024-09-05 00:07

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（二）

本站以分享各种运维经验和运维所需要的技能为主《python零基础入门》：python零基础入门学习《python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中
向往风的男子·2024-09-05 00:37

python读取hive数据库_利用pyhive将hive查询数据导入到mysql

在大数据工作中经常碰到需要将hive查询数据导入到mysql的需求，常见的方法主要有两种，一是sqoop，另一种则是pyhive。本文主要讲的就是python的pyhive库的安装与使用。
weixin_39939668·2024-09-05 00:35

EMR组件部署指南

EMR(ElasticMapReduce)是一个大数据处理和分析平台,包含了多个开源组件。
ivwdcwso·2024-09-05 00:05

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（二十三）

本站以分享各种运维经验和运维所需要的技能为主《python零基础入门》：python零基础入门学习《python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中
向往风的男子·2024-09-04 23:02

Python教程：使用 Python 和 PyHive 连接 Hive 数据库

查询返回列表5.基本的数据库操作5.1创建表5.2插入数据5.3更新数据5.4删除数据6.表的描述信息和数据库操作6.1获取表描述6.2列出所有数据库6.3切换数据库7.关闭连接8.使用示例9.完整代码在大数据时代
旦莫·2024-09-04 23:32

Mac 安装Hadoop教程（HomeBrew安装）

1.引言本教程旨在介绍在Mac电脑上安装Hadoop，便于编程开发人员对大数据技术的熟悉和掌握。2.前提条件2.1安装JDK想要在你的Mac电脑上安装Hadoop，你必须首先安装JDK。
追光天使·2024-09-04 22:21

混合所有制

大数据再厉害，也不可能分配J.K.罗琳这样一个业余作者去写小说，还计划把她的小说印刷几百万册。是价格提供了
可可_4b5e·2024-09-04 19:08

Sublime text3+python3配置及插件安装

blog.chargingbunk.cn/微信公众号：rayson_666(Rayson开发分享)个人专研技术方向：微服务方向：springboot,springCloud,Dubbo分布式/高并发：分布式锁，消息队列RabbitMQ大数据处理
raysonfang·2024-09-04 19:23

探索Ansible自动化运维：提高效率的关键工具

探索Ansible自动化运维：提高效率的关键工具在现代IT环境中，自动化已经成为提高效率、减少错误和优化资源利用的重要手段。
一个代码猎人·2024-09-04 19:05

人工智能训练师边缘计算实训室解决方案

一、引言随着物联网（IoT）、大数据、人工智能（AI）等技术的飞速发展，计算需求日益复杂和多样化。
武汉唯众智创·2024-09-04 19:34

计算机领域学术会议（ICCBD+AI 2024）

第五届计算机、大数据与人工智能国际会议（ICCBD+AI2024）将于2024年11月1日-3日在江西景德镇召开。
AC学术中心·2024-09-04 18:34

青春逢盛世，奋斗正当时

大数据工程学院张福芸2020402186青春是一条萤火绚丽的流动银河，是人生中最美的乐章，然其灿烂却极其短暂，只有好好把握青春，方能领略青春的美好，在美好的青春年华做你能做，该做，会做的事，将青春的力量发挥到极致
今圆是今元·2024-09-04 17:10

关于Apache Hive 和 Apache Iceberg

ApacheHive和ApacheIceberg都是大数据生态系统中的重要工具，但它们解决的问题和扮演的角色有所不同。
[听得时光枕水眠]·2024-09-04 17:55

大数据学习｜理解和对比 Apache Hive 和 Apache Iceberg

文章目录数据模型与存储事务支持性能优化使用场景总结数据模型与存储Hive:Hive使用的是传统的关系型数据模型，数据存储在Hadoop分布式文件系统(HDFS)中，通常是以文本格式（如CSV或TSV）或者二进制格式（如Parquet或ORC）。Hive的表定义和元数据存储在一个外部的关系数据库中，如MySQL，用于跟踪表结构、分区和其他元数据信息。Iceberg:Iceberg设计为一个现代的表格
进击的小白菜·2024-09-04 16:50

唯众2024年高职云计算实训室方案解读

云计算技术的发展，不仅推动了大数据、人工智能等新兴技术的发展，也为传统行业的数字化转型提供了强有力的支持。1.2高职教育在云计算领域的重要性高职院校作为培养应用型技术人
武汉唯众智创·2024-09-04 16:20

基线配置讲解

再就是由于不同供应商的支持原因，导致现存的操作系统和应用版本跨度很广，安全人员或运维人员资源不够的情况下很难支持做基线配置工作。
梦龙zmc·2024-09-04 15:47

商业分析能力是怎样炼成的？

感谢关注天善智能，走好数据之路↑↑↑欢迎关注天善智能，我们是专注于商业智能BI，人工智能AI，大数据分析与挖掘领域的垂直社区，学习，问答、求职一站式搞定！
R3eE9y2OeFcU40·2024-09-04 15:13

多图详解kafka生产者消息发送过程

:fire:《Kafka运维管控平台LogiKM》:fire::pencil2:更强大的管控能力:pencil2::tennis:更高效的问题定位能力:tennis::sunrise:更便捷的集群运维能力
JAVAQXQ·2024-09-04 15:13

华为OD机试真题-日志采集-2024年OD统一考试（E卷）

题目描述日志采集是运维系统的的核心组件。日志是按行生成，每行记做一条，由采集系统分批上报。如果上报太频繁，会对服务端造成压力;如果上报太晚，会降低用户的体验;·如果一次上报的条数太多，会导致超时失败。
ai因思坦·2024-09-04 15:42

高校为什么需要AIGC大数据实验室？

AIGC大数据实验室是一个专注于人工智能生成内容（AIGC）和大数据相关技术研究、开发与应用的创新实验平台。AIGC主要研究方向包括：AIGC技术创新、大数据处理与分析、AIGC与大数据融合应用。
泰迪智能科技01·2024-09-04 13:28

快速有效地提升公众号阅读量和转发量 | 微信数据追踪系统

根据一些权威的第三方平台提供的大数据统计，目前微信推文的打开率持续走低，平均阅读率（阅读数占粉丝总数的比率）不足5%。
Goovenjie·2024-09-04 13:09

2022-2023学年广州市中等职业学校学生技能竞赛网络建设与运维赛项样题

2022-2023学年广州市中等职业学校学生技能竞赛网络建设与运维赛项样题2023年09月一、竞赛内容分布“网络建设与运维”竞赛共分四个部分，其中：第一部分：网络运维及安全部署项目（450分）第二部分：
爱网猫·2024-09-04 09:29

2024年（第7届）“泰迪杯”数据分析技能赛通知

竞赛目的在于以赛促学、以赛促教、以赛促改、以赛促创，实现大数据技术技能人才培养的“岗课赛证”融通，深化教学标准与岗位标准、教学过程与生产过程的对接，培养更多升级版的高层次高素质技术技能人才。
泰迪智能科技01·2024-09-04 07:50

2024国内十大API接口服务平台

以下是国内十大API接口服务平台的简要介绍（排名不分先后）：挖数据：挖数据是一家专注于大数据服务的技术驱动型企业.。
挖数据·2024-09-04 03:48

大数据：实时大数据和离线大数据

一实时大数据的介绍及应用场景实时大数据主要是对实时数据流进行处理和分析，数据在生成后几乎立即被处理，以支持快速决策。核心特性低延迟：数据在毫秒或秒级别内处理，几乎实时返回结果。
爱写代码的July·2024-09-04 03:48

网络安全售前入门10安全服务——安全培训服务

应对信息安全风险能力、信息系统安全运维水平，降低信息系统安全风险的重要工作，是《网络安全法》的合规性要求。利用小视频或者其他新媒体手段提供协助XX科普网络安全相关知识。
努力工作的网安人·2024-09-04 00:34

大数据新视界--大数据大厂之MySQL 数据库课程设计：数据安全深度剖析与未来展望

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：Ja
青云交·2024-09-03 23:00
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他