大数据第2页

中国软件供应链安全厂商推荐︱悬镜安全聚焦全球数字经济大会·中国信通院最新成果发布

北京市经济和信息化局副局长顾瑾栩、中国通信标准化协会副理事长兼秘书长代晓慧、中国信通院党委副书记王晓丽、中国信通院云计算与大数据研究所副所长栗蔚出席会议。

DevSecOps选型指南·2025-07-04 15:39

数据编织趋势探秘

1、在传统IT时代，无论是早年的“数据仓库”还是近几年的“数据湖”和“大数据”时代，其实数据利用都是集中式

·2025-07-04 14:07

大数据基础知识-Hadoop、HBase、Hive一篇搞定

它通过利用集群的力量，提供高速运算和存储能力，特别适合处理超大数据集的应用程序。Hadoop生态圈Hadoop生态圈是一个由多个基于Hadoop开发的相

原来是猪猪呀·2025-07-04 13:28

Hadoop、HDFS、Hive、Hbase区别及联系

Hadoop、HDFS、Hive和HBase是大数据生态系统中的关键组件，它们都是由Apache软件基金会管理的开源项目。下面将深入解析它们之间的区别和联系。

静心观复·2025-07-04 13:27

大数据(1)-hdfs&hbase

hbase&hdfs一、体系结构HDFS是一个标准的主从(Master/Slave)体系结构的分布式系统；HDFS集群包含一个或多个NameNode(NameNodeHA会有多个NameNode)和多个DataNode(根据节点情况规划),用户可以通过HDFS客户端同NameNode和DataNode进行交互以访问文件系统。HDFS公开文件系统名称空间，并允许将用户数据存储在文件中。在内部，一个文

viperrrrrrr·2025-07-04 13:26

阿里云SelectDB：开启实时数仓新时代

一、引言在当今大数据时代，数据如同企业的“石油”，蕴含着巨大的价值。随着数据量呈指数级增长，企业对于实时数据分析的需求愈发迫切。

云资源服务商·2025-07-04 10:09

探秘阿里云Tablestore：大数据存储与查询的神器

一、引言在大数据时代，数据量呈爆炸式增长，数据类型也日益丰富多样，这对数据库技术提出了前所未有的挑战。

云资源服务商·2025-07-04 10:09

数据库领域的分区表应用

数据库领域的分区表应用关键词：数据库分区、水平分区、垂直分区、分区策略、查询优化、大数据管理、分布式数据库摘要：本文深入探讨数据库分区表技术的原理与应用。

数据库管理艺术·2025-07-04 10:33

转行大模型之从大数据到AI：我为何选择投身大模型领域

作为一名经验丰富的大数据开发工程师，我最近决定扩展自己的职业方向，转向大模型应用开发。这个决定源于对技术趋势的观察、对个人发展的思考，以及对我们行业未来的预判。

程序员辣条·2025-07-04 08:24

Excel 的导入导出常用的技术栈

·2025-07-04 07:15

linux下的分布式Minio部署实践

1.简介在当前的云计算和大数据时代，IT系统通常的设计理念都是无中心和分布式。Minio分布式模式可以帮助搭建一个高可靠、高可用、弹性扩展的对象存储服务。

·2025-07-04 06:09

“Redis缓存：掌握Redis常用五大数据类型“

目录1、Redis中String字符串1.1常用命令解释1.2原子性1.3具有原子性的常用命令1.4String数据结构2、Redis常用数据类型-List列表2.1概念2.2常用命令2.3数据结构3、Redis常用数据类型-Set集合3.1概念3.2常用命令3.3数据结构4、Redis常用数据类型-Hash哈希4.1概念4.2常用命令4.3数据结构5、Redis常用数据类型-Zset有序集合5.

南石.·2025-07-04 06:08

元宇宙养老社区:数字化照护的创新实践

《元宇宙养老社区：数字化照护的创新实践》关键词元宇宙养老社区数字化照护虚拟现实人工智能大数据物联网摘要本文深入探讨了元宇宙养老社区的概念、技术架构及其在数字化照护中的应用。

AI天才研究院·2025-07-04 05:03

家用充电桩远程监控安全管理系统解决方案

本方案旨在通过先进的物联网技术、云计算、大数据分析以及人工智能等科技手段，构建一个集实时监测、异常预警、故障诊断、数据统计、远程控制于一体的智能化平台，确保充电桩的安全运行及用户充电

蓝蜂物联网·2025-07-04 02:14

为什么YashanDB数据库是大数据处理的理想选择？

在当今大数据时代，如何高效管理和处理海量数据成为了许多企业的首要挑战。针对这一问题，选择合适的数据库系统至关重要。

·2025-07-03 23:45

企业如何构建基于YashanDB的数据分析系统

随着大数据时代的到来，企业面临的一个核心技术问题是如何有效、快速地进行数据分析以指导决策。一个重要的性能瓶颈在于数据库的查询速度和存储结构的设计。

·2025-07-03 23:41

AI+大数据：社交网络分析在金融风控中的完整流程

AI+大数据：社交网络分析在金融风控中的完整流程关键词：AI、大数据、社交网络分析、金融风控、完整流程摘要：本文详细讲述了在金融风控领域运用AI和大数据进行社交网络分析的完整流程。

AI智能应用·2025-07-03 23:27

Spring AI ETL Pipeline使用指南

在当今大数据和人工智能快速发展的背景下，ETL（Extract,Transform,Load）系统已经不再只是简单的数据搬运工。ETL是数据仓库和数据分析流程中的核心环节，它负责将分散的数据从

超级小忍·2025-07-03 20:06

MapReduce分布式计算框架：从原理到实战

今天我们来聊聊大数据处理领域的一个重要框架——MapReduce。作为Google提出的经典分布式计算模型，MapReduce极大地简化了海量数据的处理流程。

AI妈妈手把手·2025-07-03 19:02

大数据面试题之Hive(1)

说下为什么要使用Hive?Hive的优缺点?Hive的作用是什么?说下Hive是什么?跟数据仓库区别?Hive架构Hive内部表和外部表的区别?为什么内部表的删除，就会将数据全部删除，而外部表只删除表结构?为什么用外部表更好?Hive建表语句?创建表时使用什么分隔符?Hive删除语句外部表删除的是什么?Hive数据倾斜以及解决方案Hive如果不用参数调优，在map和reduce端应该做什么Hive

小的~~·2025-07-03 19:31

Redis总结

2.1快（内单异高算）内存存储，单线程模型，异步操作，高效的网络通信，优化的算法和数据结构2.2作用2.2.1五大数据类型Redis存储，key-value形式，value的五种数据类型String，List

傲祥Ax·2025-07-03 17:11

2025年智能计算与人机交互国际会议（ICHCI 2025）

旨在为全球从事大数据、人

·2025-07-03 16:38

Spark on Docker：容器化大数据开发环境搭建指南

SparkonDocker：容器化大数据开发环境搭建指南关键词：Spark、Docker、容器化、大数据开发、分布式计算、开发环境搭建、容器编排摘要：本文系统讲解如何通过Docker实现Spark开发环境的容器化部署

AI天才研究院·2025-07-03 14:53

机器学习在智能金融风险评估中的应用：信用评分与欺诈检测

随着大数据和机器学习技术的快速发展，金融机构开始探索如何利用机器学习算法来提高风险评估的准确性和效率。

Blossom.118·2025-07-03 14:23

机器学习在智能制造业中的应用：质量检测与设备故障预测

智能制造业通过整合物联网（IoT）、大数据和机器学习等先进技术，实现从生产计划到质量控制的全流程优化。机器学习技术在智能制造业中的应用尤为突出，尤其是在质量检测和设备故障预测方面。

Blossom.118·2025-07-03 14:21

基于 SASL/SCRAM 让 Kafka 实现动态授权认证

一、说明在大数据处理和分析中ApacheKafka已经成为了一个核心组件。然而在生产环境中部署Kafka时，安全性是一个必须要考虑的重要因素。

zlt2000·2025-07-03 12:05

以智能楼宇自动化控制系统为基石，构筑绿色建筑节能增效新标杆

智能楼宇自动化控制系统（BACS）凭借物联网、大数据、人工智能等技术，通过对建筑设备的精准监控、智能调度与协同管理，成为破解绿

ctrlworks·2025-07-03 10:51

MapReduce01：基本原理和wordCount代码实现

本篇文章中，笔者记录了自己对于MapReduce的肤浅理解，参考资料主要包括《大数据Hadoop3.X分布式处理实战》和网络视频课程。

冬至喵喵·2025-07-03 08:35

知识积累----空转转录因子TF活性的计算框架

外显子分析基础知识与框架（包括基础文件的格式等）第二节：fastq数据处理到callSNV+基础认知（简单判断谱系突变和体系突变、以及GT:AD:AF:DP等基础信息）第三节（可能需要拆分成2节课）：各大数据库如何注释突变信息

追风少年ii·2025-07-03 05:47

大数据项目-Django基于大数据技术实现的农产品销售系统

《[含文档+PPT+源码等]Django基于大数据技术实现的农产品销售系统》该项目含有源码、文档、PPT、配套开发软件、软件安装教程、包运行成功以及课程答疑与微信售后交流群、送查重系统不限次数免费查重等福利

IT实战课堂-玲琳娜·2025-07-03 04:43

JVM调优实战 Day 14 ：大数据处理中的JVM调优

【JVM调优实战Day14】大数据处理中的JVM调优文章标签jvm调优,大数据处理,Java性能优化,JVM参数配置,JVMGC调优,Java开发,大数据架构,Jvm实战文章简述在大数据处理场景中，Java

在未来等你·2025-07-03 02:24

鸿蒙开发必备技能：六种数据存储方式全解析+实战代码

本文将结合实战案例，深入讲解鸿蒙系统中的六大数据存储方式，并配有可运行的代码，帮助开发者快速掌握数据管理方法。引言随着鸿蒙系统的不断发展，越来越多的开发者开始构建面向多设备、多用户、多场景的智能

·2025-07-03 02:23

IT 行业深度洞察：从技术革命到产业重构的全景图谱

摘要本文系统梳理IT行业的发展脉络，深入剖析云计算、人工智能、大数据、物联网等核心技术的演进逻辑与协同效应，揭示IT产业在数字化转型浪潮中的生态重构与价值创造。

XQR.小白·2025-07-03 02:15

Python 爬虫实战：12306 订单记录爬取（登录态保持 + 订单数据可视化）

引言在大数据驱动的今天，12306作为国内最重要的铁路出行平台，积累了海量的出行数据。对于广大用户而言，能够方便地查看和分析自己的出行订单记录，不仅有助于行程管理，还能为未来的出行规划提供有力参考。

西攻城狮北·2025-07-03 00:06

大数据集群架构hadoop集群、Hbase集群、zookeeper、kafka、spark、flink、doris、dataeas(二)

zookeeper单节点部署wget-chttps://dlcdn.apache.org/zookeeper/zookeeper-3.8.4/apache-zookeeper-3.8.4-bin.tar.gz下载地址tarxfapache-zookeeper-3.8.4-bin.tar.gz-C/data/&&mv/data/apache-zookeeper-3.8.4-bin//data/zoo

争取不加班！·2025-07-03 00:05

Redis 集群与分布式实现：从原理到实战

前言在大数据与高并发场景下，单节点Redis的容量与可用性已无法满足需求。Redis通过集群与分布式技术，实现了数据的分片存储与高可用部署，成为分布式系统的核心组件。

一切皆有迹可循·2025-07-02 22:48

大数据未来发展的趋势与挑战

随着信息技术的飞速发展，大数据已经成为推动社会进步和产业变革的重要力量。从商业决策到医疗健康，从智慧城市到人工智能，大数据技术的应用无处不在。

倒霉男孩·2025-07-02 20:07

从0到1构建智能招聘数据引擎：基于 Python 的 BOSS直聘信息采集实战与反爬破解指南

前言在大数据浪潮席卷的时代，招聘平台蕴藏着海量的岗位信息，揭示着行业走向、人才趋势、薪资结构等核心价值。

程序员威哥·2025-07-02 20:05

大数据量下高并发同步的解决方案

大数据量下高并发同步的讲解（不看，保证你后悔）对于我们开发的网站，如果网站的访问量非常大的话，那么我们就需要考虑相关的并发访问问题了。

大师兄啊·2025-07-02 16:34

DolphinScheduler 6 个高频 SQL 操作技巧

摘要：ApacheDolphinScheduler系列4-后台SQL经验分享关键词：大数据、数据质量、数据调度整体说明在调研了DolphinScheduler之后，在项目上实际使用了一段时间，有了一些后台

·2025-07-02 15:12

微信小程序｜流浪动物救助小程序的设计与实现

领域优质创作者、CSDN博客专家、CSDN内容合伙人、掘金特邀作者、阿里云博客专家、51CTO特邀作者、多年架构师设计经验、腾讯课堂常驻讲师主要内容：Java项目、Python项目、前端项目、人工智能与大数据

qq_469603589·2025-07-02 13:15

Hadoop、Spark、Flink 三大大数据处理框架的能力与应用场景

一、技术能力与应用场景对比产品能力特点应用场景Hadoop-基于MapReduce的批处理框架-HDFS分布式存储-容错性强、适合离线分析-作业调度使用YARN-日志离线分析-数据仓库存储-T+1报表分析-海量数据处理Spark-基于内存计算，速度快-支持批处理、流处理（StructuredStreaming）-支持SQL、ML、图计算等-支持多语言（Scala、Java、Python）-近实时处

·2025-07-02 13:45

基于uniapp微信小程+SpringBoot+Vue的流浪动物救助领养系统设计和实现(源码+论文+部署讲解等)

Java技术领域和学生毕业项目实战,高校老师/讲师/同行前辈交流✌技术范围：SpringBoot、Vue、SSM、HLMT、Jsp、PHP、Nodejs、Python、爬虫、数据可视化、小程序、安卓app、大数据

·2025-07-02 13:15

Vue3 中 Excel 导出的性能优化与实战指南

一、前端导出方案深度剖析1.1xlsx(SheetJS)-轻量级冠军1.2exceljs-功能强大的重量级选手二、后端导出方案：大数据处理的救星2.1为什么大数据需要后端处理？

·2025-07-02 08:01

低代码数字孪生智慧钢厂组态监控界面

钢铁行业作为典型的流程制造业，通过融合先进的信息技术和大数据分析，既

图扑可视化·2025-07-02 01:17

UI前端与大数据的深度融合：打造智慧应用的新生态

hello宝子们...我们是艾斯视觉擅长ui设计、前端开发、数字孪生、大数据、三维建模、三维动画10年+经验!希望我的分享能帮助到您!如需帮助可以评论关注私信我们一起探讨!致敬感谢感恩!

前端开发与ui设计的老司机·2025-07-02 01:16

数字孪生：未来城市管理的革命性技术

它借助物联网、大数据、云计算、人工智能等前沿技术，实现对物理实体的精准映射与动态仿真。

大有数据可视化·2025-07-02 01:15

Python大数据分析&人工智能教程 - Django-Celery异步处理（深入解析与实战案例）

文章目录1.概念介绍1.1Django框架概述1.2Celery异步任务队列1.3AMQP协议与消息路由2.环境搭建2.1安装Django和Celery2.2配置Redis作为消息代理3.Celery架构与工作原理3.1Celery组件介绍3.2任务生命周期3.3任务调度与执行3.3.1定时任务3.3.2异步任务调用3.3.3任务结果查询4.Django与Celery集成4.1创建Celery实例

AI_DL_CODE·2025-07-02 01:43

Python大数据分析&人工智能教程 - Django-RestFramework框架（深入解析+实操案例）

文章目录1.Django-RestFramework基础1.1Django-RestFramework概述1.2安装与配置1.3构建第一个API1.3.1定义模型1.3.2创建序列化器1.3.3定义视图1.3.4配置URL路由1.4进阶功能1.4.1权限控制1.4.2限流1.5实战案例1.5.1创建图书1.5.2查询图书1.5.3更新图书1.5.4删除图书2.序列化器(Serializers)2.

AI_DL_CODE·2025-07-02 00:41

算法备案 | 算法备案必要性、算法类型、备案流程

极创信息·2025-07-01 21:49

推荐频道

大数据