大数据flink运维

Mapreduce是什么

简单来说，MapReduce是一个编程模型，用以进行大数据量的计算。
whisky丶·2024-09-03 01:07

Docker网络模型深度解析教程

适合对Docker感兴趣的技术人员、运维工程师以及开发人员。
man2017·2024-09-03 01:07

大数据技术之HBase 与 Hive 集成(7)

目录使用场景HBase与Hive集成使用1）案例一2）案例二使用场景如果大量的数据已经存放在HBase上面，并且需要对已经存在的数据进行数据分析处理，那么Phoenix并不适合做特别复杂的SQL处理。此时，可以使用Hive映射HBase的表格，之后通过编写HQL进行分析处理。HBase与Hive集成使用Hive安装https://blog.csdn.net/qq_45115959/article/
大数据深度洞察·2024-09-03 00:03

大数据技术之Flume 数据流监控——Ganglia 的安装与部署（11）

目录Flume数据流监控Ganglia的安装与部署Ganglia组件介绍1）安装Ganglia2）在hadoop12修改配置文件/etc/httpd/conf.d/ganglia.conf3）在hadoop12修改配置文件/etc/ganglia/gmetad.conf4）在hadoop12,hadoop13,hadoop14修改配置文件/etc/ganglia/gmond.conf5）在hado
大数据深度洞察·2024-09-03 00:33

Hadoop 中的大数据技术：调优篇（3）

HDFS—故障排除NameNode故障处理需求NameNode进程崩溃且存储的数据丢失，如何恢复NameNode？故障模拟终止NameNode进程[lzl@hadoop12current]$kill-919886删除NameNode存储的数据[[email protected]]$rm-rf/opt/module/hadoop-3.1.3/data/dfs/name/*问题解决从Se
大数据深度洞察·2024-09-03 00:33

大数据技术之Flume

第1章Flume概述1.1Flume定义Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。1.2Flume基础架构Flume组成架构如下图所示。1.2.1AgentAgent是一个JVM进程，它以事件的形式将数据从源头送至目的。Agent主要有3个部分组成，Source、Channel、Sink。1.2.2Sourc
okbin1991·2024-09-03 00:32

SkyWalking：⼀款用于分布式系统的应用程序性能监视工具

主要功能特性多种监控手段，可以通过语言探针和servicemesh获得监控的数据支持多种语言自动探针，包括Java，.NETCore和Node.JS;轻量高效，无需大数据平台和大量的服务器资源4、模块化
学博成·2024-09-02 23:23

Python自动化运维 - day9 - 进程与线程

概述我们都知道windows是支持多任务的操作系统。什么叫“多任务”呢？简单地说，就是操作系统可以同时运行多个任务。打个比方，你一边在用浏览器上网，一边在听MP3，一边在用Word赶作业，这就是多任务，至少同时有3个任务正在运行。还有很多任务悄悄地在后台同时运行着，只是桌面上没有显示而已。现在，多核CPU已经非常普及了，但是，即使过去的单核CPU，也可以执行多任务。由于CPU执行代码都是顺序执行的
anhuoqiu1787·2024-09-02 23:52

unity加载网页显示不了流视频解决了

unity做一个加载大数据的软件，大数据是用html5开发的，里面有很多带blob的流视频，但是unity换了几个插件都不能播放，最终用Electron做了一个网页框架放到unity上方，unity通过
hquu·2024-09-02 20:37

医疗数字化转型数据中台架构方案（一）

为推进医疗数字化转型，我们提出构建数据中台架构方案：通过集成医院内外多个数据源，利用大数据、人工智能等技术对数据进行清洗、整合、标准化处理，形成高质量的数据资产；再基于云原生技术构建湖仓一体化大数据平台
智汇优库·2024-09-02 19:32

Python递归爬取今日头条指定用户一个月内发表的所有文章，视频，微头条(2)

礼尚往来总是要有的：①2000多本Python电子书（主流和经典的书籍应该都有了）②Python标准库资料（最全中文版）③项目源码（四五十个有趣且经典的练手项目及源码）④Python基础入门、爬虫、web开发、大数据分析方面的视频
2401_84139095·2024-09-02 19:01

puppet配置之puppet.conf详解中英文对照

【导读】sky也是运维人员，在使用puppet的配置过程中，经常会有碰到些参数，不知道如何修改，每次都要去看查puppet手册，要不去puppet的官方网站去看文档，另外也有些同学不知道，puppet的配置到底有那些参数
自信哥·2024-09-02 16:47

大数据技术之HBase API(3)

目录HBaseAPI环境准备创建连接单线程创建连接多线程创建连接DDLDMLHBaseAPI环境准备新建项目后，在pom.xml中添加如下依赖：org.apache.hbasehbase-server2.4.11org.glassfishjavax.elorg.glassfishjavax.el3.0.1-b06注意：javax.el包虽然会报错不存在，但这仅是一个测试用的依赖，不会影响实际使用。
大数据深度洞察·2024-09-02 14:07

大数据技术之HBase整合 Phoenix(6)

目录HBase整合PhoenixPhoenix简介Phoenix定义为什么使用PhoenixPhoenix快速入门安装1）官网地址2）Phoenix部署PhoenixShell操作Table表的映射数字类型说明PhoenixJDBC操作Phoenix二级索引二级索引配置文件全局索引（globalindex）包含索引（coveredindex）本地索引（localindex）HBase整合Phoen
大数据深度洞察·2024-09-02 14:32

大数据技术之Zookeeper概述（1）

目录Zookeeper入门概述Zookeeper的主要特点包括：Zookeeper的应用场景：Zookeeper的基本概念：架构：Zookeeper工作机制Zookeeper数据结构Znode（ZookeeperNode）Znode的类型Znode路径Znode属性Watcher监听器使用示例总结Zookeeper入门概述Zookeeper是一个分布式的、开放源码的协调服务，用于大型应用中管理和协
大数据深度洞察·2024-09-02 14:02

大数据开发技术HBase优化与特点分析

高可用在HBase中Hmaster负责监控RegionServer的生命周期，均衡RegionServer的负载，如果Hmaster挂掉了，那么整个HBase集群将陷入不健康的状态，并且此时的工作状态并不会维持太久。所以HBase支持对Hmaster的高可用配置。关闭HBase集群（如果没有开启则跳过此步）[atguigu@hadoop102hbase]$bin/stop-hbase.sh在con
at小白在线中·2024-09-02 13:32

疫情3年 你还好吗

谁也不会想到，21世纪的今天，能有被禁足3年，不能随性旅游、随性就餐、随性交往的漫长的3年，一个初中、高中阶段，也就3年，大学才4年，3年的网课，剩一年实习、找工作……大数据分析结论：疫情后抑郁、焦虑的人
011551462e4f·2024-09-02 13:01

Java整体基础知识体系图

Java具有跨平台性、面向对象、健壮性、安全性、可移植性等特点，被广泛应用于企业级应用开发、移动应用开发、大数据处理、云计算等领域。
神州永泰·2024-09-02 13:26

今日头条极速版邀请码是多少顶配（附2024今日头条极速版邀请码邀请码及获取与填写方法）珍惜码

我们结合大数据算法，根据你的兴趣和习惯，智能推送文章。
桃朵十三·2024-09-02 11:34

每日安全资讯（2018.6.06）

《贵阳市大数据安全管理条例》将实施：明确数据安全第一责任人《条例》明确，大数据发展应用中，数据的所有者、管理者、使用者和服务提供者等安全责任单位的法定代表人或主要负责人，是本单位大数据安全的第一责任人。
溪边的墓志铭·2024-09-02 10:15

人工智能和大数据时代背景下的财务管理新思路

科技的发展迎来了人工智能与大数据时代,也是企业财务管理在新时期发展过程中所面临的机遇与挑战。
戚戚_7a86·2024-09-02 09:01

Python3 | 练气期，入门初识与起步!

[知识是人生的灯塔，只有不断学习，才能照亮前行的道路]0x00前言简述描述：作为一名网络安全转运维的工程师，每天一睁眼就要马不停蹄的学习各类计算机技术、编程和网络安全知识等，在工作中接触过很多编程语言，
全栈工程师修炼指南·2024-09-02 09:03

Spark MLlib模型训练—回归算法 GLR( Generalized Linear Regression)

SparkMLlib模型训练—回归算法GLR(GeneralizedLinearRegression)在大数据分析中，线性回归虽然常用，但在许多实际场景中，目标变量和特征之间的关系并非线性，这时广义线性回归
猫猫姐·2024-09-02 08:28

深入分析和优化MySQL主从复制延迟的技术指南

在高并发和大数据量的数据库环境中，主从复制延迟是一个常见的问题。特别是当多个数据库共享同一个实例时，资源竞争会更加激烈，从而导致复制延迟。
molashaonian·2024-09-02 08:25

物联网架构之HBase

推荐:Linux运维老纪的首页,持续学习,不断总结,共同进步,活到老学到老导航剑指大厂系列:全面总结运维核心技术:系统基础、数据库、网路技术、系统安全、自动化运维、容器技术、监控工具、脚本编程、云服务等
Linux运维老纪·2024-09-02 08:54

NoSQL是非关系型数据库

在处理非结构化/半结构化的大数据时；在水平方向上进行扩展时；随时应对动态增加的数据项时可以优先考虑使用NoSQL数据库。
潘志杰_34fd·2024-09-02 06:53

综合治税的发展前景

综合治税的发展前景较为广阔，主要体现在以下几个方面：-技术应用持续深化：-大数据与人工智能助力精准治税：随着大数据技术的不断发展，税务部门能够整合来自多部门、多渠道的海量数据，包括企业的财务数据、交易数据
alankuo·2024-09-02 06:16

2018-10-17

协会由从事计算机信息系统集成、运行维护、互联网、信息安全、云计算、物联网、人工智能、共享经济和大数据等业务的企业、投资机构及应用信息化的单位组成。协会成立至今共产生5届理事会，目前为第五届。
北京信息化协会·2024-09-02 06:11

【华为OD】2024D卷——精准核酸检测

现在根据传染病流调以及大数据分析，得到了每个人之间在时间、空间上是否存在轨迹的交叉。
简单.is.good·2024-09-02 06:13

从零开始掌握容器技术：Docker的奇妙世界

它在软件开发、部署、运维等环节中大放异彩，但对于刚接触这个概念的朋友来说，可能还是有些陌生。本文将通过简单通俗的语言，帮助你理解什么是容器技术，以及为什么它在IT行业中如此受欢迎。
云计算练习生·2024-09-02 06:42

【大数据】孤立森林算法

目录一、孤立森林算法概述二、孤立森林算法优缺点和改进2.1孤立森林算法优点2.2孤立森林算法缺点2.3孤立森林算法改进三、孤立森林算法代码实现3.1孤立森林算法python实现3.2孤立森林算法JAVA实现3.3孤立森林算法C++实现四、孤立森林算法应用一、孤立森林算法概述孤立森林算法是一种用于异常检测的机器学习算法。它基于这样的直觉：异常点是数据中的少数派，它们在特征空间中的分布与正常数据点不同
大雨淅淅·2024-09-02 03:56

京东云业务的无线宝初体验

自从2014年京东开始涉猎云服务开始，“云”这块蛋糕也一直被京东所重视，从2014年6月开始的第一款京东云服务APP，到现在的各种企业云、大数据、AI，可以预见到京东对于云业务将会越来越重视。
骄阳似我lzy·2024-09-02 02:02

Ansible自动化运维实战：打造高效、可靠的系统管理方案！

Ansible是一个在自动化运维领域广泛使用的工具，它基于Python开发，能够实现批量系统配置、程序部署和运行命令等功能。
疾风终究没有归途·2024-09-02 01:39

自主学习——助力终身发展的核心奠基

自主学习——助力终身发展的核心奠基“智慧作业”基于大数据收集、分析，借助各种先进设备，凭借先进技术，动态采集学生作业情况，帮助教师更好地掌握学生学习状况，提供靶向式教学方案，从而提高教学效率，减轻学生学习与教师工作负担
蒋铭国江西乐平·2024-09-02 00:19

游卡，三七互娱，得物，顺丰，快手，oppo，莉莉丝，康冠科技，途游游戏，埃科光电25秋招内推

游卡，三七互娱，得物，顺丰，快手，oppo，莉莉丝，康冠科技，途游游戏，埃科光电25秋招内推①顺丰【招聘岗位】研发、算法、大数据、产品、项管、设计、人资等【官方内推码】4FOLXH【一键内推】https
2401_86288678·2024-09-01 23:02

游卡，三七互娱，得物，顺丰，快手，oppo，莉莉丝，康冠科技，途游游戏，埃科光电25秋招内推

游卡，三七互娱，得物，顺丰，快手，oppo，莉莉丝，康冠科技，途游游戏，埃科光电25秋招内推①顺丰【招聘岗位】研发、算法、大数据、产品、项管、设计、人资等【官方内推码】4FOLXH【一键内推】https
2401_86288678·2024-09-01 23:31

Docker技术入门与实战-第3版.pdf OCR 高清 可复制

pdfOCR高清可复制简介预览下载地址Docker技术入门与实战-第3版.pdfOCR高清可复制简介本书从Docker基本原理开始，深入浅出地讲解Docker的构建与操作，内容系统全面，可帮助开发人员、运维人员快速部署
clicheeeeee·2024-09-01 22:24

uniapp使用 uview-plus 底部导航栏(vue3项目)_uniapp底部导航栏

因此收集整理了一份《2024年最新大数据全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
2401_84181383·2024-09-01 20:15

Ansible自动化运维项目

Ansible自动化运维项目是一个复杂而强大的解决方案，它利用Ansible这一开源自动化平台来简化IT基础设施的配置管理、应用部署和任务自动化过程。
hong161688·2024-09-01 20:43

详细解说：ansible自动化运维项目

Ansible是一种强大的自动化运维工具，主要用于配置管理、应用部署、任务执行等场景。
AI逍遥子·2024-09-01 20:43

oracle大数据量查询sql优化

纯手打，编辑工具用的不熟练，格式不会整，见谅，严禁抄袭！数据库版本19c，数据量>5亿1.查询强行指定索引在查询时，oracle会对sql进行优化，但有时，优化后，会不走索引造成查询速度过慢，比如使用模糊匹配，或者查询使用到了联合索引，却未使用联合索引的第一个字段作为查询条件。造成索引失效的方式很多，不再赘述。写法：select/*+index(表名索引名)*/字段1,字段2from表2.如果为分
雪夜明月·2024-09-01 19:37

大数据量sql优化

说明：表里有406243206多数据，每天需要捞出100万的数据进行处理。条件有day_id,sub,…等相关条件，表中已经建立了联合索引，但还是会出现慢sql，sql运行时常10多s的都有。优化方案：1、先根据条件查询出最大的ID，和最小的IDselectIDfromxxxwheredata_day_id=#{dayId}andsub_biz_type=#{subBizType}andflow_
菜鸟小学弟·2024-09-01 19:35

汇编之mov、movsx、movzx

表现示例mov将数据从一个位置复制到另一个位置直接数据传输传输数据，不改变数据内容传输数据，不改变数据内容moveax,ebxmovsx将源操作数符号扩展到目标操作数有符号扩展数据将较小数据类型符号扩展到较大数据类型将较小数据类型符号扩展到较大数据类型
TIF星空·2024-09-01 17:51

运维系列&AI系列&Lenovo-G双系统系列（前传-装之前搜索的）：Ubuntu开机黑屏，只有白色光标在左上角闪烁的解决办法

Ubuntu开机黑屏，只有白色光标在左上角闪烁的解决办法Ubantu开机黑屏，只有白色光标在左上角闪烁的解决办法底下评论问题一：所以重启电脑，进入grub时，选择进入恢复模式。重启电脑怎么进入grub啊？双系统的其他人回答问题二：选择Resumenormalboot选项后直接运行一段就黑屏，没有输入用户名和密码其他人回答问题三：你好，成功进入图形界面之后重启，还是进入tty命令行模式怎么办啊？还是
坦笑&&life·2024-09-01 14:04

游卡，三七互娱，得物，顺丰，快手，oppo，莉莉丝，康冠科技，途游游戏，埃科光电25秋招内推

游卡，三七互娱，得物，顺丰，快手，oppo，莉莉丝，康冠科技，途游游戏，埃科光电25秋招内推①顺丰【招聘岗位】研发、算法、大数据、产品、项管、设计、人资等【官方内推码】4FOLXH【一键内推】https
2401_86288678·2024-09-01 13:29

无人机的工业应用场景

一、监测与检查电力巡检：工业无人机在电力巡检中发挥着重要作用，能够替代人工进行高空、高风险作业，提高电网巡视效率，降低运维成本。
云卓SKYDROID·2024-09-01 12:24

Python大数据之Hadoop学习——day06_hive学习02

一.hive内外表操作1.建表语法create[external]table[ifnotexists]表名(字段名字段类型,字段名字段类型,...)[partitionedby(分区字段名分区字段类型)]#分区表固定格式[clusteredby(分桶字段名)into桶个数buckets]#分桶表固定格式[sortedby(排序字段名asc|desc)][rowformatdelimitedfiel
笨小孩124·2024-09-01 11:18

大数据毕业设计hadoop+spark+hive微博舆情情感分析 知识图谱微博推荐系统

（一）Selenium自动化Python爬虫工具采集新浪微博评论、热搜、文章等约10万条存入.csv文件作为数据集；（二）使用pandas+numpy或MapReduce对数据进行数据清洗，生成最终的.csv文件并上传到hdfs；（三）使用hive数仓技术建表建库，导入.csv数据集；（四）离线分析采用hive_sql完成，实时分析利用Spark之Scala完成;（五）统计指标使用sqoop导入m
qq_79856539·2024-09-01 11:16

基于hadoop+spark的旅游大数据分析平台

S2023132基于hadoop+spark的旅游大数据分析平台使用BeautifulSoup爬取数据，爬取成功以后使用spark分析数据，将分析的结果保存到mysql，flask读取mysql数据，结合
源码空间站11·2024-09-01 11:16

大数据毕业设计天hadoop+spark+hive游戏推荐系统 游戏数据分析可视化大屏 steam游戏爬虫 游戏大数据 机器学习 知识图谱 计算机毕业设计 机器学习 深度学习 人工智能 知识图谱

|—||一、选题的目的和意义用户往往因为不能及时查看游戏信息而造成许多烦恼。另一方面，游戏商城平台没能进行系统的管理与维护使游戏信息没能及时的更新。而传统的游戏信息管理，采用的还是手工备案、人工查询的方式。但是随之游戏信息的增多这种管理方式的工作量不断加大，这种做法就存在费时费力、缺乏时效性、不利于调动人员的积极性等缺点。一旦网站建立好之后，一方面，用户可以在第一时间在系统里查询所需的信息，另一方
2401_84159688·2024-09-01 11:45
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他