大数据云原生hadoop 第19页

云原生之容器编排实践-基于CentOS7搭建三个节点的Kubernetes集群

背景前面采用minikube作为Kubernetes环境来体验学习Kubernetes基本概念与操作，这样避免了初学者在裸金属主机上搭建Kubernetes集群的复杂度，但是随着产品功能的逐渐完善，我们需要过渡到生产环境中的K8S集群模式；而在实际上生产环境之前，我们先在本地虚拟机上进行了环境搭建与流程验证，作为新的起点，今天就先搭建一个3节点的Kubernetes集群。虚机资源共用到了三台虚机，

Heartsuit·2024-02-19 13:31

阿里云参编业内首个代码大模型标准丨云原生 2024 年 1 月产品技术动态

云原生月度动态云原生是企业数字创新的最短路径。《阿里云云原生每月动态》，从趋势热点、产品新功能、服务客户、开源与开发者动态等方面，为企业提供数字化的路径与指南。

·2024-02-19 12:34

阿里云 ACR 制品中心 AI/大数据镜像专场上新推荐榜

随着容器技术和服务在企业的应用程度不断加深，企业对于容器的使用也越来越多地从在线业务逐渐向AI、大数据类型的工作负载发展。

·2024-02-19 12:02

投票助力 | 第19届（2023）数智招标采购行业年度评选网络投票已开启！

评选组委会经过为期一个多月的奖项申报、初选等环节，本着客观、公正的评审原则，以必联网和隆道平台大数据为依据，从业务水平、项目业绩

隆道·2024-02-19 12:43

大数据提醒你：中国这些古建筑，可能是下一个巴黎圣母院！

2019独角兽企业重金招聘Python工程师标准>>>大家晚上好，我是今天的提笔人嗅嗅。巴黎圣母院失火事件让我的心情很沉重，一句无关痛痒的安慰“巴黎不哭”，已经不能表达我对这场文化之殇的惋惜之痛，人类伟大的建筑在一瞬间被毁灭。世界唯一的不变的就是变化，且我们永远赶不上变化的速度，因为做不到预知未来，或者说预测的不够精准。这句话在过去是完全适用的，受限于科技水平、数据缺失等各方面的因素，曾经的很长时

weixin_33696822·2024-02-19 12:06

JVM（4）原理篇

以基础篇的这段代码为例：Java中的8大数据类型在虚拟机中的实现：boolean、byte、char、short在栈上是不是存在空间浪费？

梵高Coding·2024-02-19 12:05

「企业应用架构」应用程序架构的当前趋势

应用架构概述随着各种力量（云、移动、社交和大数据）的相互联系不断涌现，不利用这些力量的组织在未来将面临严重的业务劣势。

架构师研究会·2024-02-19 12:15

【大数据】HADOOP-YARN-ContainerExecutor容器启动器详解

在NodeManager中，有三种运行Container的方式，它们分别是:DefaultContainerExecutorLinuxContainerExecutorDockerContainerExecutor从它们的名字中，我们就能看得出来，默认情况下，一定使用的是DefaultContainerExecutor。而一般情况下，DefaultContainerExecutor也确实能够满足我

笑起来贼好看·2024-02-19 11:38

学习篇-Hadoop-YARN-环境搭建

文章目录一、Hadoop-YARN-环境搭建一、Hadoop-YARN-环境搭建官网参考：https://hadoop.apache.org/docs/stable/hadoop-project-dist

东东爱编码·2024-02-19 11:08

【大数据】HADOOP-Yarn集群界面UI指标项详解（建议收藏哦）

目录首页（Cluster）节点信息SchedulerMetrics：集群调度信息节点信息详解（Nodes）应用列表信息（applications）队列详情页（Scheduler）指标详细说明（非常重要）首页（Cluster）集群监控信息指标详解AppsSubmitted：已提交的应用AppsCompleted：已完成的应用AppsRunning：正在运行的应用ContainersRunning：正

笑起来贼好看·2024-02-19 11:08

Hadoop-Yarn-NodeManager都做了什么

一、源码下载下面是hadoop官方源码下载地址，我下载的是hadoop-3.2.4，那就一起来看下吧Indexof/dist/hadoop/core二、上下文在我的博客中已经简要的分析了NodeManager

隔着天花板看星星·2024-02-19 11:00

【2019-04-28】Hadoop分布式文件系统

Hadoop自带HDFS(hadoopdistributefilesystem)。HDFS默认数据块128M。

BigBigFlower·2024-02-19 11:56

Hadoop搭建之 start-yarn.sh 报错

在搭建伪分布式的Hadoop集群环境时，在配置基础环境了并成功开启了HDFS组件后，jps查看已运行的名称节点和数据节点进程，[hadoop@masterhadoop]$jps8994NameNode10396Jps9087DataNode9279SecondaryNameNode

万里长江雪·2024-02-19 11:58

hadoop-2.7.4-nodemanager无法启动问题解决方案

近期新配了hadoop-274版本的集群，发现有一个小问题，DataNode无法顺利启动。

半肉哥·2024-02-19 11:27

云原生之容器管理工具Portainer

1.简介前面文章我们讲Docker、DockerCompose和DockerSwarm都是在Linux系统上手工命令行去操作，在第一次安装的时候可以命令行，以后运维和CICD流程操作中，如果还要命令行去各个节点操作，操作就麻烦了，工作效率就低了，我们需要有一个集中管理的系统，而且是web界面化的管理系统，而且是开源的，Portainer正是这样的系统。Portainer是一款开源的容器管理工具系统

鬓戈·2024-02-19 11:27

云原生之Docker镜像仓库

1.前言同为虚拟化技术，Docker相对于VMWare有什么特点，或者最吸引我的特点？我认为最主要的是DockerImage技术，它让我们非常方便地把应用程序包和其依赖环境打包成一个Docker镜像文件，而且这个文件相对来说还非常小，一般就是几M到几十M，然后不管是开发环境、测试环境、预发布环境还是各个线上环境，只要环境里安装了DockerEngine就可以行为一致地运行起来，不需要去考虑烦人的目

鬓戈·2024-02-19 11:27

hadoop-yarn资源分配介绍-以及推荐常用优化参数

如果有什么不正确的欢迎大家一起交流学习~Yarn前言作为Hadoop2.x的一部分，YARN采用MapReduce中的资源管理功能并对其进行打包，以便新引擎可以使用它们。

Winhole·2024-02-19 11:26

python毕设选题 - 大数据上海租房数据爬取与分析可视化 -python 数据分析可视化

为了大家能够顺利以及最少的精力通过毕设，学长分享优质毕业设计项目，今天要分享的是基于大数据上海租房数据爬取与分析可视化学长这里给一个题目综合评分(每项满分5分)难度系数：3分工作量：3分创新点：5分1课题背景基于

DanCheng-studio·2024-02-19 11:54

python毕设选题 - 大数据二手房数据爬取与分析可视化 -python 数据分析可视化

为了大家能够顺利以及最少的精力通过毕设，学长分享优质毕业设计项目，今天要分享的是基于大数据招聘岗位数据分析与可视化系统学长这里给一个题目综合评分(每项满分5分)难度系数：3分工作量：3分创新点：5分1课题背景首先通过爬虫采集

DanCheng-studio·2024-02-19 11:54

python毕设选题 - 大数据商城人流数据分析与可视化 - python 大数据分析

为了大家能够顺利以及最少的精力通过毕设，学长分享优质毕业设计项目，今天要分享的是基于大数据的基站数据分析与可视化学长这里

DanCheng-studio·2024-02-19 11:24

教育正悄悄发生一场革命|一场数据驱动的教育革命

又被托夫勒蒙对了读书心得:如果回顾近20年来教育的演变历史，以上表面上的转折所带来的变化，会不约而同指向几个具体技术的成熟:可视化、社交网络、分部式系统、大量数据，以上关键词加在一起，有另外一个词汇:大数据

托克托127白燕妮·2024-02-19 11:15

云原生之容器编排-Docker Swarm

可以定义和运行多容器应用程序，用一个YAML配置文件来声明式管理服务，在一台安装了Dockerengine的Linux系统上可以很好的工作，但是现实中不可能只有一台Linux系统，一台Linux系统不可能有足够的资源运行所有的云原生应用系统

鬓戈·2024-02-19 11:48

Hadoop-Yarn-NodeManager如何计算Linux系统上的资源信息

NodeResourceMonitorImpl）时只是提了下SysInfoLinux，下面我们展开讲下SysInfoLinux是用于计算Linux系统上的资源信息的插件二、SysInfoLinux源码packageorg.apache.hadoop.util

隔着天花板看星星·2024-02-19 11:48

python毕设选题 - 大数据全国疫情数据分析与3D可视化 - python 大数据

为了大家能够顺利以及最少的精力通过毕设，学长分享优质毕业设计项目，今天要分享的是大数据全国疫情数据分析与3D可视化学长这里给一个题目综合评分(每项满分5分)难度系数：

DanCheng-studio·2024-02-19 11:47

（四十）大数据实战——Zabbix监控平台的部署搭建

前言Zabbix是一款能够监控各种网络参数以及服务器健康性和完整性的软件。Zabbix使用灵活的通知机制，允许用户为几乎任何事件配置基于邮件的告警，这样可以快速反馈服务器的问题。基于已存储的数据，Zabbix提供了出色的报告和数据可视化功能。Zabbix支持轮询和被动捕获。基于Web的前端页面确保您的网络状态和服务器健康状况可以从任何地方进行评估。在经过适当的配置后，Zabbix可以在监控IT基础

厉害哥哥吖·2024-02-19 11:45

node命令yarn --version指向了java

问题描述本地安装了java、hadoop和nodejs，并配置了环境变量，但是hadoop的bin目录下存在yarn命令，所以使用nodejs的yarn命令启动项目会出现找不到类，此时键入yarn-version

码学弟·2024-02-19 11:43

手机号码归属地API：构建精准营销与风险管理的新工具

随着大数据和人工智能技术的发展，手机号码归属地API已经成为企业精准营销和风险管理的新工具。本文将探讨这一技术如何帮助企业在竞争激烈的市场中脱颖而出。

·2024-02-19 11:56

【知识整理】产研中心岗位评定标准之大数据岗位

为贯彻执行集团数字化转型的需要,该知识库将公示集团组织内各产研团队不同角色成员的职务“职级”岗位的评定标准;一、定级定档目的通过对公司现有岗位及相应岗位员工的工作能力、工作水平进行客观公正评定,确定各岗位的等级及同等级岗位员工对应的档级,从而为员工以后的晋升、奖励、收入等提供目标、依据和标准,实现人力资源的优化配置。二、定级定档说明定级定档是体现岗位及员工价值的有效途径。不同岗位角色所需专业知识、

卢卡上学·2024-02-19 11:39

福利「Flink Forward Asia 2023 」PPT 阅读合集！

来自阿里云智能、蚂蚁金服、字节跳动、芒果TV、快手、美团、华为、美的、Shopee、米哈游、腾讯、同程旅行、汽车之家、网易等全球30+各行业一线厂商的嘉宾，围绕核心技术、行业实践、生产实践、平台建设、流式湖仓、云原生等多个时下热门方向

·2024-02-19 11:20

阿里云计算平台大数据基础工程技术团队直聘！！！

大数据基础工程技术团队，隶属于阿里云智能集团计算平台事业部，是一支负责阿里集团、公共云和混合云场景计算平台大数据&AI产品的稳定性建设、架构&成本优化、运维产品ABM（ApsaraBigdataManager

·2024-02-19 11:20

企业级大数据安全架构（一）平台安全隐患

作者：楼高引言当谈到企业级大数据平台时，安全性是一个至关重要的方面。随着数据规模的不断增长和信息的敏感性，大数据平台面临着多种安全隐患，需要得到充分的关注和解决，以确保其在生产环境中可靠可用。

·2024-02-19 11:48

“数智乡村”数字人源码助力乡村振兴！

“数字乡村”强调数字技术在乡村振兴过程中的应用，“数智乡村”则指综合利用人工智能、大数据、区块链、云计算、物联网等数智技术，建设以乡村数智操作系统为代表的乡村新型基础设施，推动乡村产业数智化、乡村治理现代化

·2024-02-19 11:13

大数据01-导论

零、文章目录大数据01-导论1、数据与数据分析**数据：是事实或观察的结果，是对客观事物的逻辑归纳，是用于表示客观事物的未经加工的原始素材。

李宥小哥·2024-02-19 11:32

Python课堂08——六大数据类型之字符串（二）

文章目录一、字符串的基本操作1.字符串的判断2.字符串的查3.字符串的改二、格式化输出1.f格式化——比较常用2.%占位符三、for循环遍历字符串四、字符串的嵌套总结过完年了，继续回来跟着博主来学习python吧一、字符串的基本操作1.字符串的判断islower():判断字符串里的所有字符是不是都是小写，返回True或者Falses='uinujiv'print(s.islower())#True

莘薪·2024-02-19 11:28

Python课堂07——六大数据类型之字符串（一）

文章目录内容概要一、字符串的发展？二、字符串的基本用法及其特点1.定义2.字符串的‘加减乘’3.索引和切片4.成员运算符in5.原生字符串总结内容概要前面我们了解了数据类型中的数值类型，接下来让我们继续来了解python中的其他数据类型。本节字符串的内容比较多，故我们分两节来进行讲述。一、字符串的发展？由于计算机内部只识别二进制，但是用户在使用计算机的时候却可以看到各式各样的语言字符，因此就产生了

莘薪·2024-02-19 11:57

大数据，对于生活的改变

谷歌通过对于疾病的查询量可以预测一个个h1n1病毒的大爆发，大数据时代对于人的考验用户的搜索记录就是一种信息，这种信息会满足其基础相关的词条与其有关的词条（最为原始的搜索机制，国内的搜索引擎都是采用这种基础原理

待·2024-02-19 11:53

JVM工作原理与实战(三十八)：JIT即时编译器原理

专栏导航JVM工作原理与实战RabbitMQ入门指南从零开始了解大数据目录专栏导航前言一、JIT即时编译器二、HotSpot中的JIT编译器三、JIT优化技术1.方法内联2.逃逸分析四、JIT优化建议总结前言

橘子-青衫·2024-02-19 11:20

Python课堂12——六大数据结构之集合

.基本操作3.成员运算符(in;notin)4.计算集合的长度——len()5.复制集合——copy()6.集合的集合运算总结前言Python中的数据结构马上就要结束了，今天我们来学习Python中六大数据结构的最后一部分集合

莘薪·2024-02-19 11:20

智慧公厕的主要应用

智慧公厕运用物联网、互联网、大数据、云计算和自动化控制等技术，实现了对公厕内部各方面情况的全面监测和精细管理。

中期科技ZONTREE·2024-02-19 10:52

嵌入式系统在智慧城市建设中的关键角色与挑战

它利用各种信息传感器，通过物联网、云计算、大数据等技术手段，实现城市管理的智能化、精细化。在这一过程中，嵌入式系统扮演着至关重要的角色。本文将探讨嵌入式系统在智慧城市建设中的关键作用及其面临的挑战。

科联学妹·2024-02-19 10:10

Go 语言体系下的微服务框架选型：Dubbo-go

01Go微服务体系发展与选型随着微服务技术的快速发展，其在各个领域都形成了一系列事实标准，在Kubernetes和容器技术加持下，云原生微服务已经成为了主流解决方案。

阿里云云栖号·2024-02-19 10:38

MapReduce

MapReduce定义mapReduce是一个分布式运算程序的编程框架，是用户开发基于hadoop的数据分析应用的核心框架。

诺冰1314·2024-02-19 10:46

ebpf-go 初体验

但是很多的场景中（尤其是云原生场景），我们出于避免重复造轮子、更快的迭代速度、运行时安全等原因，会选择go语言来进行开发，ebpf-go2这个库就是当前最好的选择。

·2024-02-19 10:26

Pulsar Standalone服务搭建

PulsarStandalone服务搭建说明简介ApachePulsar是Apache软件基金会顶级项目，是下一代云原生分布式消息流平台，集消息、存储、轻量化函数式计算为一体。

aileen5150·2024-02-19 10:04

Apache Pulsar--简单介绍

一句话说：是一个云原生的批流一体的在诸多场景优于Kafka的新一代的消息队列中间件。ApachePulsar有哪些特性？

陈永佳·2024-02-19 10:32

大数据平台红蓝对抗 - 磨利刃，淬精兵！ | 京东云技术团队

随着平台业务越来越复杂，红蓝对抗的作用愈来愈明显，下面将详细介绍大数据平台在本次双十一大促备战工作中是如何开展红蓝对抗的。图1.大促备战常见工作示意首先我们先了解一下什么是红蓝对抗，它都有哪些好处？

·2024-02-19 10:27

当下最热的前端Web组态软件（可视化）

随着5G、物联网、大数据等技术的高速发展，各领域逐步向数字化、可视化的人工智能（AI）的方向不断迈进。

·2024-02-19 10:56

Hive入门，Hive是什么？

它是建立在Hadoop生态系统之上的，利用Hadoop的分布式存储和计算能力来处理和分析数据。

JayGboy·2024-02-19 10:31

在python中JSON数据格式的使用

这种数据格式由于简单好用被大量应用在Web开发与大数据数据库(NoSQL)，现在已成为一种著名数据格式，Python与许多程序语言同时采用与支持。也由此在

码银·2024-02-19 10:26

莱昂纳德猛龙历史地位探索：第一人？

快船在乔治、路威和哈雷尔集体哑火的情况下，靠莱昂纳德单核33分14篮板7助攻5抢断的大数据击败并淘汰38分9篮板9助攻以及整个首轮激活一系列里程碑的历史第一档二年级东契奇率领的独行侠。

氧气是个地铁·2024-02-15 10:23

推荐频道

大数据云原生hadoop