云原生大数据数据仓库

青春逢盛世，奋斗正当时

大数据工程学院张福芸2020402186青春是一条萤火绚丽的流动银河，是人生中最美的乐章，然其灿烂却极其短暂，只有好好把握青春，方能领略青春的美好，在美好的青春年华做你能做，该做，会做的事，将青春的力量发挥到极致
今圆是今元·2024-09-04 17:10

关于Apache Hive 和 Apache Iceberg

ApacheHive和ApacheIceberg都是大数据生态系统中的重要工具，但它们解决的问题和扮演的角色有所不同。
[听得时光枕水眠]·2024-09-04 17:55

大数据学习｜理解和对比 Apache Hive 和 Apache Iceberg

文章目录数据模型与存储事务支持性能优化使用场景总结数据模型与存储Hive:Hive使用的是传统的关系型数据模型，数据存储在Hadoop分布式文件系统(HDFS)中，通常是以文本格式（如CSV或TSV）或者二进制格式（如Parquet或ORC）。Hive的表定义和元数据存储在一个外部的关系数据库中，如MySQL，用于跟踪表结构、分区和其他元数据信息。Iceberg:Iceberg设计为一个现代的表格
进击的小白菜·2024-09-04 16:50

唯众2024年高职云计算实训室方案解读

云计算技术的发展，不仅推动了大数据、人工智能等新兴技术的发展，也为传统行业的数字化转型提供了强有力的支持。1.2高职教育在云计算领域的重要性高职院校作为培养应用型技术人
武汉唯众智创·2024-09-04 16:20

商业分析能力是怎样炼成的？

感谢关注天善智能，走好数据之路↑↑↑欢迎关注天善智能，我们是专注于商业智能BI，人工智能AI，大数据分析与挖掘领域的垂直社区，学习，问答、求职一站式搞定！
R3eE9y2OeFcU40·2024-09-04 15:13

高校为什么需要AIGC大数据实验室？

AIGC大数据实验室是一个专注于人工智能生成内容（AIGC）和大数据相关技术研究、开发与应用的创新实验平台。AIGC主要研究方向包括：AIGC技术创新、大数据处理与分析、AIGC与大数据融合应用。
泰迪智能科技01·2024-09-04 13:28

快速有效地提升公众号阅读量和转发量 | 微信数据追踪系统

根据一些权威的第三方平台提供的大数据统计，目前微信推文的打开率持续走低，平均阅读率（阅读数占粉丝总数的比率）不足5%。
Goovenjie·2024-09-04 13:09

2024年（第7届）“泰迪杯”数据分析技能赛通知

竞赛目的在于以赛促学、以赛促教、以赛促改、以赛促创，实现大数据技术技能人才培养的“岗课赛证”融通，深化教学标准与岗位标准、教学过程与生产过程的对接，培养更多升级版的高层次高素质技术技能人才。
泰迪智能科技01·2024-09-04 07:50

2024国内十大API接口服务平台

以下是国内十大API接口服务平台的简要介绍（排名不分先后）：挖数据：挖数据是一家专注于大数据服务的技术驱动型企业.。
挖数据·2024-09-04 03:48

大数据：实时大数据和离线大数据

一实时大数据的介绍及应用场景实时大数据主要是对实时数据流进行处理和分析，数据在生成后几乎立即被处理，以支持快速决策。核心特性低延迟：数据在毫秒或秒级别内处理，几乎实时返回结果。
爱写代码的July·2024-09-04 03:48

大数据新视界--大数据大厂之MySQL 数据库课程设计：数据安全深度剖析与未来展望

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。本博客的精华专栏：Ja
青云交·2024-09-03 23:00

【GaussDB(DWS)】数仓部署架构与物理结构分析

数仓架构与物理结构分析一、部署架构二、物理结构三、测试验证一、部署架构华为数据仓库服务DWS，集群版本8.1.3.x集群拓扑结构：上述拓扑结构为DWS单AZ高可靠部署架构，为减少硬件故障对系统可用性的影响
若兰幽竹·2024-09-03 20:06

【云原生 Kubernetes 系列】K8s 实战 如何给应用注入数据 II 将pod数据传递给容器_pod容器传参

这两种呈现Pod和Container字段的方式统称为DownwardAPI。一、通过环境变量将Pod信息传递给容器在文章开始之前，我们先在目录pods/inject/dapi-envars-pod.yaml中创建一个包含一个容器的Pod。这是该Pod的配置文件：apiVersion:v1kind:Podmetadata:name:dapi-envars-fieldrefspec:container
2301_82243558·2024-09-03 19:31

zabbix和prometheus介绍；云原生

监控Prometheus和Zabbix作为两种流行的监控系统，它们在多个方面存在显著的差异。以下是对两者区别的详细分析：一、数据模型与采集方式Prometheus：数据模型：基于度量指标的模型，支持多维度数据模型，每个时间序列数据都包含多个标签（label），用于描述数据的不同属性。这种模型使得用户可以灵活地对数据进行筛选、聚合和组合。采集方式：采用Pull模式，通过HTTP协议从被监控端主动拉取
张小胡·2024-09-03 19:01

【云原生】Kubernetes中如何通过Pod名称查询Docker容器ID，通过Docker容器ID查询Pod名称？

《博客》：Python全栈，前后端开发，小程序开发，人工智能，js逆向，App逆向，网络系统安全，数据分析，Django，fastapi，flask等框架，云原生k8s，linux，she
景天科技苑·2024-09-03 19:59

Higress + Nacos 微服务网关最佳实践

在去年11月的云栖大会上，我们开源了云原生网关Higress，时隔2月，Higress的Github项目已经收获了700+star，以及大量社区小伙伴的关注。
阿里云技术·2024-09-03 17:52

APISIX Ingress 对 Gateway API 的支持和应用

作者@lingsamuel，API7.ai云原生技术专家，ApacheAPISIXCommitter。
API7.ai 技术团队·2024-09-03 17:51

【k8s系列】Kubernetes Service 深度解析：从基础到实战

一、前言在当今的云原生世界中，Kubernetes已经成为容器编排和管理的事实标准。它提供了一种强大的方式来部署、扩展和管理容器化应用。
深情不及里子·2024-09-03 17:20

Java 快速入门 知识精简（1）

内存的申请与释放提供了相对安全的内存管理和访问机制特点三：跨平台性由JVM负责Java程序在系统中的运行JVMforUNIXJVMforWindowsJVMforMac应用领域：JavaWeb开发后台开发大数据开发
Tangy范·2024-09-03 16:18

从零到K8s大师：掌握Kubernetes，玩转容器化部署

Kubernetes，作为领先的开源容器编排平台，正成为云原生生态系统的核心。本博客将带领你踏上一段惊险刺激的旅程，从零开始，逐步掌握Kubernetes的精髓，让你能够轻松玩转容器化部署的艺术。
乔明飞·2024-09-03 16:17

微服务--Nacos

一、Nacos简介Nacos（NamingandConfigurationService）是阿里巴巴开源的一个更易于构建云原生应用的动态服务发现、配置管理和服务管理平台。
顾以沫·2024-09-03 15:09

国贸163 48号

【NBA大数据】进攻24s之压哨王与抢投王24s进攻规则是篮球基本规则之一，倘若没有24s规则的限制，比赛会是什么样？
Nemesis_e7ca·2024-09-03 13:53

hive学习记录

一、Hive的基本概念定义：Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。
2302_80695227·2024-09-03 12:46

重塑互联网生态：探索Web 3.0、大数据与隐私保护的新篇章

目录引言：互联网的新纪元Web3.0：去中心化的乌托邦愿景1.去中心化架构的崛起2.智能合约与自治组织的兴起3.用户体验与创新的飞跃大数据：驱动未来的智慧引擎1.数据海洋的挖掘与利用2.数据安全与隐私保护
Thanks_ks·2024-09-03 11:13

Pyecharts可视化数据大屏分析文章

Pyecharts可视化数据大屏分析文章引言随着大数据时代的到来，数据可视化成为企业决策、业务分析不可或缺的一部分。
大分享文库·2024-09-03 11:42

【云原生】Docker入门 -- 阿里云服务器Linux环境下安装Docker

输入y确认即可！️配置阿里云加速镜像打开阿里云控制台，弹性计算-->容器与镜像服务打开之后选择镜像工具-->镜像加速器，复制内容即可进入Linux服务器根据步骤配置镜像加速器#创建docker文件夹sudomkdir-p/etc/docker#打开文件并配置内容sudotee/etc/docker/daemon.json<<-'EOF'{"registry-mirrors":["https://p
m0_61067876·2024-09-03 11:39

你笑起来真好看！（幽默小段子）

4.大数据表明：
乱写一通·2024-09-03 09:26

极简生活抄书第116天：了解适合自己的衣服款式

日常生活中，我们买衣服的选择往往是别人穿的好看，我们会到网上买同款；之后根据你买的次数，大数据会推相类似的款式给到你。这会让你以为，自己就是适合这种的？事实真的是这样吗？
兮若耶·2024-09-03 09:53

当科技企业存在多类型的服务器资源时，如何确保访问安全？

某企业是一家运用大数据、物联网、云计算、人工智能等新技术推动安全领域信息化、智能化的科技企业，500人以下规模，其中算法团队占了十分之一。
宁盾Nington·2024-09-03 07:48

计算机毕业设计hadoop+spark知识图谱房源推荐系统 房价预测系统 房源数据分析 房源可视化 房源大数据大屏 大数据毕业设计 机器学习

创新点：1.支付宝沙箱支付2.支付邮箱通知(JavaMail)3.短信验证码修改密码4.知识图谱5.四种推荐算法(协同过滤基于用户、物品、SVD混合神经网络、MLP深度学习模型)6.线性回归算法预测房价7.Python爬虫采集链家数据8.AI短信识别9.百度地图API10.lstm情感分析11.spark大屏可视化开发技术：springbootvue.jspythonechartssparkmys
计算机毕业设计大全·2024-09-03 07:05

阿里云大数据专业认证考试

阿里云大数据专业认证（AlibabaCloudCertifiedProfessional,ACP）是面向使用阿里云大数据产品的架构、开发、运维类人员的专业技术认证“大数据”是指以多元形式，自许多来源搜集而来的庞大数据组
xmvip01·2024-09-03 07:16

第 35 题：如何实现字符串反序？

/gfedcba文章的内容/灵感都从下方内容中借鉴【持续维护/更新500+前端面试题/笔记】https://github.com/noxussj/Interview-Questions/issues【大数据可视化图表插件
Noxus丶SJ·2024-09-03 04:07

大数据技术之Flume 企业开发案例——自定义 Interceptor（8）

目录自定义Interceptor1）案例需求2）需求分析3）实现步骤创建一个Maven项目，并引入以下依赖。定义CustomInterceptor类并实现Interceptor接口。编辑flume配置文件分别在hadoop12，hadoop13，hadoop14上启动flume进程，注意先后顺序。在hadoop12使用netcat向localhost:44444发送字母和数字。观察hadoop13
大数据深度洞察·2024-09-03 03:50

大数据基础之Flume——Flume基础及Flume agent配置以及自定义拦截器

Flume简介Flume用于将多种来源的日志以流的方式传输至Hadoop或者其他目的地 -一种可靠、可用的高效分布式数据收集服务Flume拥有基于数据流上的简单灵活架构，支持容错、故障转移与恢复由Cloudera2009年捐赠给Apache，现为Apache顶级项目Flume架构Client：客户端，数据产生的地方，如Web服务器Event：事件，指通过Agent传输的单个数据包，如日志数据通常对
Clozzz·2024-09-03 03:17

嵌入式学习（数据库）

Sqlite小型数据库.Sqlite特点:可以实现大数据量的管理读写速度慢最常见的数据库类型是关系型数据库管理系统（RDBMS）：RDRMS中的数据存储在被称为表（tables）的数据库对象中。
小林王斯·2024-09-03 03:17

Mapreduce是什么

简单来说，MapReduce是一个编程模型，用以进行大数据量的计算。
whisky丶·2024-09-03 01:07

大数据技术之HBase 与 Hive 集成(7)

目录使用场景HBase与Hive集成使用1）案例一2）案例二使用场景如果大量的数据已经存放在HBase上面，并且需要对已经存在的数据进行数据分析处理，那么Phoenix并不适合做特别复杂的SQL处理。此时，可以使用Hive映射HBase的表格，之后通过编写HQL进行分析处理。HBase与Hive集成使用Hive安装https://blog.csdn.net/qq_45115959/article/
大数据深度洞察·2024-09-03 00:03

大数据技术之Flume 数据流监控——Ganglia 的安装与部署（11）

目录Flume数据流监控Ganglia的安装与部署Ganglia组件介绍1）安装Ganglia2）在hadoop12修改配置文件/etc/httpd/conf.d/ganglia.conf3）在hadoop12修改配置文件/etc/ganglia/gmetad.conf4）在hadoop12,hadoop13,hadoop14修改配置文件/etc/ganglia/gmond.conf5）在hado
大数据深度洞察·2024-09-03 00:33

Hadoop 中的大数据技术：调优篇（3）

HDFS—故障排除NameNode故障处理需求NameNode进程崩溃且存储的数据丢失，如何恢复NameNode？故障模拟终止NameNode进程[lzl@hadoop12current]$kill-919886删除NameNode存储的数据[[email protected]]$rm-rf/opt/module/hadoop-3.1.3/data/dfs/name/*问题解决从Se
大数据深度洞察·2024-09-03 00:33

大数据技术之Flume

第1章Flume概述1.1Flume定义Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。1.2Flume基础架构Flume组成架构如下图所示。1.2.1AgentAgent是一个JVM进程，它以事件的形式将数据从源头送至目的。Agent主要有3个部分组成，Source、Channel、Sink。1.2.2Sourc
okbin1991·2024-09-03 00:32

SkyWalking：⼀款用于分布式系统的应用程序性能监视工具

⼀款用于分布式系统的应用程序性能监视工具，尤其是面向微服务、云原生和基于容器(Kubernetes)架构设计。
学博成·2024-09-02 23:23

unity加载网页显示不了流视频解决了

unity做一个加载大数据的软件，大数据是用html5开发的，里面有很多带blob的流视频，但是unity换了几个插件都不能播放，最终用Electron做了一个网页框架放到unity上方，unity通过
hquu·2024-09-02 20:37

医疗数字化转型数据中台架构方案（一）

为推进医疗数字化转型，我们提出构建数据中台架构方案：通过集成医院内外多个数据源，利用大数据、人工智能等技术对数据进行清洗、整合、标准化处理，形成高质量的数据资产；再基于云原生技术构建湖仓一体化大数据平台
智汇优库·2024-09-02 19:32

Python递归爬取今日头条指定用户一个月内发表的所有文章，视频，微头条(2)

礼尚往来总是要有的：①2000多本Python电子书（主流和经典的书籍应该都有了）②Python标准库资料（最全中文版）③项目源码（四五十个有趣且经典的练手项目及源码）④Python基础入门、爬虫、web开发、大数据分析方面的视频
2401_84139095·2024-09-02 19:01

06 | 学数据分析要掌握哪些基本概念？

商业智能BI、数据仓库DW、数据挖掘DM开头中的百货商店利用数据预测用户购物行为属于商业智能，他们积累的顾客的消费行为习惯会存储在数据仓库中，通过对个体进行消费行为分析总结出来的规律属于数据挖掘。
张九日zx·2024-09-02 15:48

大数据技术之HBase API(3)

目录HBaseAPI环境准备创建连接单线程创建连接多线程创建连接DDLDMLHBaseAPI环境准备新建项目后，在pom.xml中添加如下依赖：org.apache.hbasehbase-server2.4.11org.glassfishjavax.elorg.glassfishjavax.el3.0.1-b06注意：javax.el包虽然会报错不存在，但这仅是一个测试用的依赖，不会影响实际使用。
大数据深度洞察·2024-09-02 14:07

大数据技术之HBase整合 Phoenix(6)

目录HBase整合PhoenixPhoenix简介Phoenix定义为什么使用PhoenixPhoenix快速入门安装1）官网地址2）Phoenix部署PhoenixShell操作Table表的映射数字类型说明PhoenixJDBC操作Phoenix二级索引二级索引配置文件全局索引（globalindex）包含索引（coveredindex）本地索引（localindex）HBase整合Phoen
大数据深度洞察·2024-09-02 14:32

大数据技术之Zookeeper概述（1）

目录Zookeeper入门概述Zookeeper的主要特点包括：Zookeeper的应用场景：Zookeeper的基本概念：架构：Zookeeper工作机制Zookeeper数据结构Znode（ZookeeperNode）Znode的类型Znode路径Znode属性Watcher监听器使用示例总结Zookeeper入门概述Zookeeper是一个分布式的、开放源码的协调服务，用于大型应用中管理和协
大数据深度洞察·2024-09-02 14:02

大数据开发技术HBase优化与特点分析

高可用在HBase中Hmaster负责监控RegionServer的生命周期，均衡RegionServer的负载，如果Hmaster挂掉了，那么整个HBase集群将陷入不健康的状态，并且此时的工作状态并不会维持太久。所以HBase支持对Hmaster的高可用配置。关闭HBase集群（如果没有开启则跳过此步）[atguigu@hadoop102hbase]$bin/stop-hbase.sh在con
at小白在线中·2024-09-02 13:32

疫情3年 你还好吗

谁也不会想到，21世纪的今天，能有被禁足3年，不能随性旅游、随性就餐、随性交往的漫长的3年，一个初中、高中阶段，也就3年，大学才4年，3年的网课，剩一年实习、找工作……大数据分析结论：疫情后抑郁、焦虑的人
011551462e4f·2024-09-02 13:01
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他