大数据云原生hadoop 第62页

浅析大数据技术架构

大数据采集数据采集的任务就是把数据从各种数据源中采集和存储到数据存储上，大数据培训期间有可能会做一些简单的清洗。

at小白在线中·2024-01-29 19:11

浅谈大数据

研究大数据有什么意义？现在的社会是一个高速发展的社会，科技发达，信息流通，人们之间的交流也越来越密切，生活也越来越便捷，大数据就是这个高科技时代的产物。

是一只萨摩耶·2024-01-29 19:40

浅析大数据汇总

传统，大数据主要关注数据的采集、存储和处理能力。随着互联网的快速发展，用户在互联网上产生了大量的数据，这些数据包括用户行为数据、社交媒体数据、传感器数据等。

shinelord明·2024-01-29 19:10

阿里云服务器2024年2核16G、4核32G、8核64G配置最新收费标准及活动价格

2核16G、8核64G、4核32G配置的云服务器处理器与内存比为1:8，这种配比的云服务器一般适用于数据分析与挖掘，Hadoop、Spark集群和数据库，缓存等内存密集型场景，因此，多为企业级用户选择，

qq_3304559116·2024-01-29 18:17

智慧农业气象站简介

一、智慧农业气象站简介TH-NQ8智慧农业气象站是一种集成了物联网、大数据、云计算等先进技术的智能监测设备，可对农田环境进行实时监测，包括温度、湿度、光照、风速、风向、雨量等多个气象指标。

YYtianhe17·2024-01-29 18:12

长大

大数据工程学院19计本四班杨再勇2019402175长大，你的童年是否也和我一样，向往大人，总是期望着快快长大。

野肆_2de1·2024-01-29 18:10

Nacos 官网重大升级，提供官方发行版下载包，3.0 里程碑版本新特性预告

邢学超（于怀）什么是Nacos以及nacos.ioNacos/nɑ:kəʊs/是DynamicNamingandConfigurationService的首字母简称，Nacos开源产品定位是更易于构建云原生应用的动态服务发现

阿里云云原生·2024-01-29 18:37

让游戏云原生化别再「左右为难」

作者：云原生游戏社区当下，游戏行业正在经历云原生架构转型期，不少游戏厂商纷纷投入游戏服容器化改造。

阿里云云原生·2024-01-29 18:06

湖仓新范式的造浪者 | StarRocks 2023 年度总结（文末福利）

你最希望社区跟哪个大数据生态组件结合？你最希望社区提供怎样的内容？你希望社区提供什么活动？

StarRocks_labs·2024-01-29 18:54

StarRocks在千亿级日增数据场景下替换Greenplum的实践

原Greenplum集群在进行10亿*1亿的关联查询时达到极限，无法支撑更大数据量级的关联查询。

StarRocks_labs·2024-01-29 18:53

有关机器学习的两种算法特点

随着大数据的迅速发展，机器学习变得越来越重要，它有力地处理大量数据，做出准确的预测。人工智能旨在使计算机更智能化，而机器学习已经证明了如何做到这一点。简而言之，机器学习是人工智能的应用。

轻雨科技·2024-01-29 17:49

K8s-k8s架构

本文章属个人学习整理的对应笔记，学习内容来尚硅谷的培训课，有兴趣的同学可以跳转下方链接【云原生Java架构师的第一课K8s+Docker+KubeSphere+DevOps】https://www.bilibili.com

是小天才哦·2024-01-29 17:08

美团外卖搜索基于Elasticsearch的优化实践

然而在高并发、高可用、大数据量的C端场景，目前可参考的资料并不多。因此，我们希望通过分享在外卖搜索场景下的优化实践，能为大家提供Elasticsearch优化思路上的一些借鉴。

架构未来·2024-01-29 17:07

Mysql大数据量分页优化

前言之前有看过到mysql大数据量分页情况下性能会很差，但是没有探究过它的原因，今天讲一讲mysql大数据量下偏移量很大，性能很差的问题，并附上解决方式。

我想问问天·2024-01-29 17:04

全面解析基于Hadoop模型的数据分析平台框架

本文主要讲解以下两个方面：♦HadoopMapReduce与Hive技术研究♦数据分析平台框架设计与环境配置HadoopMapReduce与Hive技术研究一、Hadoop框架工作机制Hadoop框架定义

丨程序之道丨·2024-01-29 17:04

JavaScript笔记整理

title:JavaScripttags:JavaScriptnotebook:JavaScript笔记整理1.JavaScript基础2022年3月18日大数据类型使用bigIntnull有数据位置但是没有数据

无所不能的蓝巨人·2024-01-29 16:55

大数据与区块链技术

目录1.区块链简介2.区块链特征及分类3.区块链详细介绍4.区块链技术改变生活5.区块链释放数据价值6.前景展望和总结

瓯雅爱分享·2024-01-29 15:47

大数据与人工智能赋能精益生产：掀起工业革命的浪潮！

随着科技的飞速发展，大数据和人工智能已经成为当今社会的热门话题。在这场科技革命中，大数据和人工智能如何赋能精益生产，引领工业革命的浪潮呢？

天行健李国武老师·2024-01-29 15:40

时间价值很高的人生是什么样子的

7.25—7.26Day2—Day3共读第一章《时间价值很高的人生是什么样子的》一、读书摘要1.大数据背景下的算法推荐会让我们的视野变得越来越窄，变现思维下的圈子、圈层会让我们的社交和人脉变得越来越窄。

永超851105·2024-01-29 15:12

流水线三维可视化运维，装配自动化提质增效

智慧仓储产线智慧仓储产线通过对仓储现场的数字化建模，利用先进的物联网、大数据、人工智能等技术，对仓储现场设备、环境、人员进行全流程数字化管理。

图扑数字孪生·2024-01-29 15:17

Fink CDC 1.0 至3.0的从古至今

本文主要分享FlinkCDC1.0至3.0的发展历程，了解其背后的关键特性和发展趋势，探讨其在大数据领域的影响和价值。

小枫@码·2024-01-29 14:07

大数据从入门到实战——MongoDB 实验——java 和 MongoDB

MongoDB实验——java和MongoDBJava操作MongoDB数据库（一）Java操作MongoDB数据库（二）Java操作MongoDB数据库（一）packagestep1;importjava.util.function.Consumer;importjava.util.logging.Level;importjava.util.logging.Logger;importjava.u

Littlerainlv·2024-01-29 14:54

亿某通电子文档安全管理系统 hiddenWatermark/uploadFile 文件上传漏洞

Ⅰ、漏洞描述亿某通新一代电子文档安全管理系统（简称：CDG）是一款融合文档加密、数据分类分级、访问控制、关联分析、大数据分析、智能识别等核心技术的综合性数据智能安全产品。产

Love Seed·2024-01-29 14:14

JVM工作原理与实战(三十)：堆内存状况的对比分析

专栏导航JVM工作原理与实战RabbitMQ入门指南从零开始了解大数据目录专栏导航前言一、堆内存状况的对比分析1.正常情况2.异常情况（内存泄漏）二、产生内存溢出的原因总结前言JVM作为Java程序的运行环境

橘子-青衫·2024-01-29 14:39

mingjuna2010·2024-01-29 13:23

容器 I/O 性能诊断：到底哪个应用是带宽杀手？

容器和Kubernetes的发展成熟为应用的云原生化提供最基础的支撑，从而使企业最大化利用云上的资源。存储作为应用运行的基石，也在服务云原生化的过程中不断演进。

Java海·2024-01-29 13:19

精通Python第12篇—深入Pandas从基础到高级的数据处理艺术

：计算平均值示例：筛选数据写入Excel文件实例：读取并写入新表格数据清洗与转换缺失值处理数据类型转换分组与聚合数据可视化进一步学习高级功能与进阶应用多表关联与合并时间序列分析自定义函数应用性能优化与大数据处理持续学习与实践结语引言在日常的数据处理工作中

申公豹本豹·2024-01-29 13:48

利用NBI大数据可视化工具做RFM模型分析，洞察数据价值，驱动业务增长

我们先来了解一下什么是RFM模型：RFM模型是衡量客户价值和客户创利能力的重要工具和手段。在众多的客户关系管理的分析模式中，RFM模型是被广泛提到的。该数据模型通过一个客户的近期购买行为、购买的总体频率以及花了多少钱3项指标来描述该客户的价值状况。最近一次消费频率（Recency）消费频率（Frequency）消费金额（Monetary）接下来根据上面三项指标做会员分类：我们把这3个指标按价值从低

NBI大数据可视化分析·2024-01-29 12:23

自媒体作者如何修真？仙俗佛魔，随便搞搞！

从大数据的标准来说，阅读量少的内容就是不成功不圆满的内容。做新媒体一定要和大数据挂钩才是成功的。作者关心的那么，为什么会阅读量少呢？内容阅读量少的原因分析：一、潜在用户量少

趙散闲·2024-01-29 12:14

语义解析：连接自然语言与机器智能的桥梁

特别是在大数据时代，语义解析能够帮助企业更快速地从大量的数据中获取有用的信息，从而提高决策效率。01语义解析的应用场景场景

想你依然心痛·2024-01-29 12:19

【若泽大数据第一天】--在vmware workstation上安装CentOS6.5系统

一、下载并安装vmwareworkstationpro12二、下载CentOS6.5镜像文件三、创建虚拟机并命名为hadoop0011、在VM12中选择创建新虚拟机2、自定义高级3、默认下一步4、选择稍后安装操作系统

naroutofan·2024-01-29 11:25

架构评审与API设计：实践与规范

1.背景介绍在当今的大数据时代，架构评审和API设计成为了软件系统的核心组成部分。架构评审是一种系统性的方法，用于评估软件系统的设计和实现，以确保其满足业务需求和质量要求。

OpenChat·2024-01-29 11:00

Elasticsearch集群部署及Head插件安装

由于ES比较吃内存，所以每台服务器的配置要求为：CPU：2核内存：2G我的三个节点分别是HadoopNode01、HadoopNode02、HadoopNode03，以下操作全部基于HadoopNode01

景鹏虎晓·2024-01-29 11:54

spark快速入门java_Spark 快速入门

既然本教程中我们不使用HDFS,你可以随便下载一个适配任何Hadoop的版本的Spark。

陈兰香·2024-01-29 11:54

如何安装 elasticsearch-head 插件？

前言本文隶属于专栏《1000个问题搞定大数据技术体系》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮忙指出，谢谢！

Shockang·2024-01-29 11:53

基于大数据平台的kylin安装部署手册

目录一.单例Kylin部署1.环境准备1.1软件要求1.2硬件要求1.3Hadoop环境1.4安装前环境检查1.4.1开启时钟同步1.4.2安装net-tools1.4.3检查hbase是否可用1.4.4

猿来孺词·2024-01-29 10:26

MR和Spark的比较

二、hadoop和spark的shuffle相同和差异？三、Spark与Hadoop差异一、Spark为什么比MR快？

猿来孺词·2024-01-29 10:55

Elk运维-Elastic7.6.1集群安装部署

集群安装结果说明实例配置安装软件安装账号hadoop12C4G磁盘：50G云服务器elasticsearchkibanardhadoop22C4G磁盘：50G云服务器elasticsearchrdhadoop32C4G

消逝的bug·2024-01-29 10:11

大数据系列之ELK集群环境部署

solihawk·2024-01-29 10:41

5大主流方案对比：MySQL千亿级数据线上平滑扩容实战

1.五个方案1.1停机方案1.2停写方案1.3日志方案1.4双写方案（中小型数据）1.5平滑2N方案（大数据量）2.平滑2N扩容方案实践2.1实现应用服务级别的动态扩容2.2实现数据库的秒级平滑2N扩容

seaskyccl·2024-01-29 10:10

程序员裁员潮：技术变革下的职业危机

大数据技术的应用使得企业和政府能够更好地分析和利用海量数据，为决策提供更加准确的依据。云计算技术的普及使得企业能够更加灵活地部署和管理IT资源，降低了成本，并提高了效率。

m0_70572045·2024-01-29 10:36

Hadoop学习之路（七） MapReduce框架Partitioner分区

Partitioner分区的作用是什么？在进行MapReduce计算时，有时候需要把最终输出数据分到不同的文件中，比如按照省份划分的话，需要把同一省份的数据放到一个文件中；按照性别划分的话，需要把同一性别的数据放到一个文件中。我们知道最终的输出数据是来自于Reducer任务。那么如果要得到多个文件，意味着有相同数量的Reducer任务在运行。Reducer任务的数据来自于Mapper任务，也就是M

shine_rainbow·2024-01-29 10:26

FlinkCdc--Debezium实现Kafka实时监控mysql binlog日志

不管是什么大数据组件大部分都分单机和集群模式，这次我配置的是kafka集群监控mysqlbinlog日志一.Zookeeper和Kafka集群部署我的服务器是三台节点aliyun-bigdata-01aliyun-bigdata

chenzhihao·2024-01-29 09:08

产业需求大数据平台

产业需求大数据平台，依托大数据、NLP等技术，全面采集区域产业人才需求数据，从宏观、中观、微观三个层面对产业需求进行分析，并匹配学校自身的办学定位、专业布局、人才培养目标、培养规格和课程设置，进行专业设置匹配度

单眼皮的老虎·2024-01-29 09:24

Vue2+echarts 实现图表的简单绘制

Echarts具有高度可定制性和交互性，支持动态数据更新和大数据量展示。Echarts提供了丰富的API和文档，可以方便地与其他前端框架整合。E

ZLY_2004·2024-01-29 09:54

教学质量常态监控与评价平台

教学质量常态监控与评价平台，以提高教学质量为目标导向，利用Al、大数据等新型技术手段作为技术支撑，服务于教学质量科、督导、教师、学生等角色，基于教学过程数据，关注教师的教学内涵，覆盖了对教师、课堂、专业

单眼皮的老虎·2024-01-29 09:54

专业建设数字平台

专业建设数字平台，遵循以学生发展为中心、以产出为导向的OBE理念，大数据赋能人才培养全过程管理，支撑专业数字化建设与专业认证等专项工作，平台围绕学院与专业建设中人才培养方案制定的顶层设计工作及全流程、全场景业务