大数据_数据存储

基于Asp.net的汽车租赁管理系统

专栏推荐：前后端分离项目源码、SpringBoot项目源码、Vue项目源码、SSM项目源码、微信小程序源码精品专栏：Java精选实战项目源码、Python精选实战项目源码、大数据精选实战项目源码系统展示
计算机学姐·2025-03-16 03:12

hive 中优化性能的一些方法

以下是一些常见的Hive性能优化方法：1.数据存储优化1.1使用列式存储格式推荐格式:ORC和Parquet。优点:列式存储格式具有更高的压缩率和查询性能。
闯闯桑·2025-03-16 02:30

Python 爬虫实战：科学知识收集网站构建

本文将详细介绍如何使用Python爬虫技术构建这样一个网站，涵盖从目标网站分析到数据存储与展示的完整流程。二、目标网站分析选择一个合适的科学知识网站作为数据源是构建收集网站的第一步。
西攻城狮北·2025-03-15 21:58

TDengine 使用教程：从入门到实践

TDengine是一款专为物联网（IoT）和大数据实时分析设计的时序数据库。它能够高效地处理海量的时序数据，并提供低延迟、高吞吐量的性能表现。
遇见伯灵说·2025-03-15 21:55

5分钟看懂数据中台的典型架构

数据中台典型架构包括数据采集层、数据存储层、数据处理层、数据服务层和数据应用层。以下是数据中台的分层概述：一、数据采集层数据采集层作为数据中台的基础，主要负责获取各种数据源。
isNotNullX·2025-03-15 21:53

Java：AI 浪潮中的隐形支柱 —— 探秘 Java 在人工智能领域的独特地位

本文将揭示Java如何在大数据、机器学习、企业级AI系统等领域持续创造价值。一、Java的AI基因解码跨平台优势的现代意义"一次编
琢磨先生David·2025-03-15 19:15

掌握大数据时代的心跳：实时数据处理的崛起

掌握大数据时代的心跳：实时数据处理的崛起在大数据时代，我们每天都在生成海量的数据——从社交媒体上的点赞到物联网设备上传的传感器数据，数据无处不在。
Echo_Wish·2025-03-15 19:40

K8s 集群监控：从指标采集到可视化展示的完整方案

目录一、引言二、指标采集（一）K8s内置指标（二）Prometheus指标采集三、数据存储（一）Prometheus本地存储（二）远程存储四、可视化展示（一）Grafana基础（二）K8s相关仪表盘模板五
花笺墨韵·2025-03-15 17:27

llm数据存储基础设施

链接:https://i68.ltd/notes/posts/20250310-llm-db/infinity专为LLM应用程序构建的AI原生数据库，可提供对密集向量、稀疏向量、张量（多向量）和全文的快速混合搜索项目仓库:https://github.com/infiniflow/infinity关键特性令人难以置信的快在百万级矢量数据集上实现0.1毫秒查询延迟和15K+QPS在33M文档的全文搜
galileo2016·2025-03-15 17:24

老板既要又要还要......我用Doris+Hudi把不可能变成了日常

老板既要又要还要......我用Doris+Hudi把不可能变成了日常探索Doris与Hudi的完美融合智能查询优化华丽转身-不止于快的进化Doris+Hudi湖仓一体的"艺术之美"大数据江湖中流传着这样一个传说
一臻数据·2025-03-15 15:42

六月份阶段性大总结之Doris/Clickhouse/Hudi一网打尽

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜全网最全大数据面试提升手册！这是个阶段性小总结，后面会持续更新。
王知无(import_bigdata)·2025-03-15 15:11

使用 Doris 和 Iceberg

作为一种全新的开放式的数据管理架构，湖仓一体（DataLakehouse）融合了数据仓库的高性能、实时性以及数据湖的低成本、灵活性等优势，帮助用户更加便捷地满足各种数据处理分析的需求，在企业的大数据体系中已经得到越来越多的应用
向阳1218·2025-03-15 15:10

使用 Doris 和 LakeSoul

作为一种全新的开放式的数据管理架构，湖仓一体（DataLakehouse）融合了数据仓库的高性能、实时性以及数据湖的低成本、灵活性等优势，帮助用户更加便捷地满足各种数据处理分析的需求，在企业的大数据体系中已经得到越来越多的应用
向阳1218·2025-03-15 15:10

AI大模型时代，2025大龄程序员如何轻松转型赢未来？

随着新兴技术的不断涌现，如云计算、大数据、人工智能等，传统的编程技能逐渐显得“过时”。同时，年轻一代的程序员以更加低廉的薪酬和旺盛的精力涌入市场，加剧了职场的竞争。
AI大模型学习不迷路·2025-03-15 15:35

数字孪生对于新基建的价值浅析，算是抛砖引玉。

模拟预测与优化利用AI和大数据分析
大牛工控设计师·2025-03-15 14:04

JVM汇总篇

前期准备：准备篇（一）内存管理内存如何划分、内存溢出的原因----点击这里内存分配和垃圾回收-----点击这里（二）虚拟机如何执行数据存储和访问（类文件结
xk_一步一步来·2025-03-15 13:56

Linux基本指令3

基本指令3目录Linux基本指令3一、Linux文件系统管理二、Linux进程与服务管理三、Linux网络配置与诊断一、Linux文件系统管理1.文件系统概述-定义:Linux文件系统是操作系统用于控制数据存储和检索的方法
N201871643·2025-03-15 12:47

大数据学习（67）- Flume、Sqoop、Kafka、DataX对比

大数据学习系列专栏：哲学语录:用力所能及，改变世界。
viperrrrrrr·2025-03-15 09:51

大数据技术【7】

1.目前所获取的总数据量的80%以上都是（）数据。。A.结构化B.非结构化C.文本D.半结构化2.Kmeans算法包括如下步骤：①在第j次迭代中，对于每个样本点，选取最近的中心点，归为该类；②更新中心点为每类的均值；③随机选取k个中心点；④j选择一项：a.③①②④b.①②③④c.①④③②d.④③②①A.③①②④B.①②③④C.①④③②D.④③②①3.利用先验原理可以帮助减少频繁项集产生时需要探查的
星绘搜题·2025-03-15 09:50

数据分析大数据面试题大杂烩01

互联网:通过埋点实时计算用户浏览频次用优惠券等措施吸引用户,通过历史信息用非智能学习的title方式构造用户画像(抖音,京东)电信,银行统计营收和针对用户的个人画像:处理大量非实时数据政府:健康码,扫码之后确诊,找出与确诊对象有关联的人订单订单表(除商品以外所有信息),商品详情表,通过搜集用户title进行定制化推荐点击流数据通过埋点进行用户点击行为分析FLINK一般用来做实时SPARK一般用来做
爱学习的菜鸟罢了·2025-03-15 09:19

海量数据查询加速：Presto、Trino、Apache Arrow

1.引言在大数据分析场景下，查询速度往往是影响业务决策效率的关键因素。随着数据量的增长，传统的行存储数据库难以满足低延迟的查询需求，因此，基于列式存储、向量化计算等技术的查询引擎应运而生。
晴天彩虹雨·2025-03-15 08:12

什么是 Redis

主要特点高性能：数据存储在内存中，读写速度极快。持久化：支持RDB和AOF两种方式，确保数据在重启后不丢失。数据结构丰富：支持字符串、哈希、列表、集合、有序集合等多种类型。原子操作：所有操作
yqcoder·2025-03-15 06:57

向量库集成指南

与单独的向量索引不同，像Pinecone这样的向量数据库提供了额外的功能，例如，索引管理、数据管理、元数据存储和过滤，以及水平扩展。
三月七꧁ ꧂·2025-03-15 05:16

C++中map和set的详解

它们基于平衡二叉搜索树（通常是红黑树）的数据结构来实现，提供了高效的数据存储和检索功能。本文将详细介绍map和set的特点、用法以及一些常见的操作示例。
yang789022·2025-03-15 05:10

C++中map和set的详解

它们基于平衡二叉搜索树（通常是红黑树）的数据结构来实现，提供了高效的数据存储和检索功能。本文将详细介绍map和set的特点、用法以及一些常见的操作示例。
漏洞猎人001·2025-03-15 04:37

Spring Boot实战：MySQL与Redis数据一致性深度解析与代码实战

SpringBoot实战：MySQL与Redis数据一致性深度解析与代码实战一、数据一致性问题概述二、常见解决方案三、选择合适的解决方案四、总结在SpringBoot开发中，MySQL作为关系型数据库，提供了强大的数据存储和查询能力
黑猫Teng·2025-03-15 03:25

Python使用pycryptodome库来进行AES加密解密

在现代通信和数据存储中，加密技术是保障数据安全的核心手段。AES（AdvancedEncryptionStandard）是一种对称加密算法，广泛应用于各种信息安全领域。
飞起来fly呀·2025-03-15 02:47

T-SQL语言的物联网

随着物联网技术的不断发展，数据的规模和复杂性急剧提升，这对数据存储、处理和分析提出了更高的要求。
尤宸翎·2025-03-15 02:46

Python 实现的采集诸葛灵签

通过爬虫技术获取诸葛神签的签文和解签内容，并提供数据存储和查询功能。
老大白菜·2025-03-15 01:35

25年大数据开发省赛样题第一套，离线数据处理答案

省赛样题一，数据抽取模块这一模块的作用是从mysql抽取数据到ods层进行指标计算，在题目中要求进行全量抽取，并新增etl-date字段进行分区，日期为比赛前一天importorg.apache.spark.sql.SparkSessionimportjava.util.PropertiesobjectTask1{defmain(args:Array[String]):Unit={valspark
Tometor·2025-03-15 00:01

python 开放的通讯系统 高保密性

3.临时数据存储：
张小秦·2025-03-15 00:31

2025年2月中国数据库排行榜：OceanBase迎来开门红，金仓、GBASE排名节节高

在春节之际，DeepSeek凭借突破性的技术成功出圈，而在此前，各大数据库厂商便已开始探索AI与数据库的深度融合，并陆续推出了相关产品和功能。
·2025-03-14 22:07

对象存储.阿里云OSS、腾讯云COS 、亚马逊S3、华为云OBS对比分析？

对象存储是一种将数据存储为独立对象，并使用RESTfulAPI或其他接口进行访问的存储方式。
学博成·2025-03-14 18:08

出海行动派 | 全球服务新征程！Bonree ONE海外版正式发布

在云计算、大数据与物联网深度融合的驱动下，全球IT运维行业正经历从被动响应到主动智能的深刻变革。
·2025-03-14 17:00

.net 插件式开发——实现web框架中大数据算法嵌入(BP算法逼近)

关于算法的引入：插件式架构设计，可移植性强，利于算法的升级。【插件式开发相关资料】https://www.cnblogs.com/lenic/p/4129096.html以BP算法为例：1、首先定义一个接口规范////////插件的统一入口///publicinterfaceIPluginPerfrom{//////统一算法插件入口//////输出参数的个数///输出参数///输入参数///str
weixin_34219944·2025-03-14 16:21

MongoDB在Spring商城用户行为记录中的应用

水平扩展通过分片（Sharding）应对海量数据存储。二、用户行为数据建模1.基础行为记录集合（如user_actions）{"us
小小初霁·2025-03-14 14:03

Visual Studio 2022和C++实现带多组标签的Snowflake SQL查询批量数据导出程序

需要考虑SQL结果集是大数据量分批数据导出的情况，通过多线程和异步操作来提高程序性能，程序需要异常处理和输出，输出出错
weixin_30777913·2025-03-14 13:27

C#带多组标签的Snowflake SQL查询批量数据导出程序

需要考虑SQL结果集是大数据量分批数据导出的情况，通过多线程和异步操作来提高程序性能，程序需要异常处理和输出，输出出错时的错误信息，每次每个查询导出数据的
weixin_30777913·2025-03-14 13:26

Python Pandas带多组参数和标签的Snowflake数据库批量数据导出程序

需要考虑SQL结果集是大数据量分批数据导出的情况，通过多线程和异步操作来提高程序性能
weixin_30777913·2025-03-14 13:26

搞定leetcode面试经典150题之链表

19.删除链表的倒数第N个结点138.随机链表的复制82.删除排序链表中的重复元素II61.旋转链表86.分隔链表理论知识链表是数据结构中一种非常常见且基础的结构，在Java中，链表被广泛应用于解决动态数据存储问题
醒了就刷牙·2025-03-14 12:52

Android数据存储:SQLite、Room

在Android平台上，集成了一个嵌入式关系型数据库—SQLite，SQLite3支持NULL、INTEGER、REAL（浮点数字）、TEXT(字符串文本)和BLOB(二进制对象)数据类型，虽然它支持的类型只有五种，但实际上sqlite3也接受varchar(n)、char(n)、decimal(p,s)等数据类型，只不过在运算或保存时会转成对应的五种数据类型。SQLite最大的特点是你可以把各种
-风になる-·2025-03-14 12:48

Python 爬虫实战：开放数据集抓取与大数据分析应用

本文将详细介绍如何使用Python爬虫技术抓取开放数据集，并进行大数据分析应用。一、项目背景与目标1.项目背景随着信息技术的飞速发展，越来越多的机构和组织开始开放其数据集，以促进创新和研究。
西攻城狮北·2025-03-14 10:04

MongoDB介绍与部署使用

MongoDB的功能特性MongoDB是一个高性能、开源、无模式的文档型数据库，设计用于提供高性能、水平可扩性、高可用性和高级可查询性，为Web应用提供可扩展的高性能数据存储解决方案。
zhangleijiutian·2025-03-14 08:48

上万个Map运行时链接ApplicationMaster超时FAILED

#MapReduce业务常见故障#大数据#生产环境真实案例#MapReduce#批计算#离线业务#整理#经验总结说明：此篇总结MapReduce业务常见故障案例处理方案结合自身经历总结不易+关注+收藏欢迎留言更多专题
500佰·2025-03-14 08:16

Java线程协作式中断机制

作者简介：笔名seaboat，擅长工程算法、人工智能算法、自然语言处理、计算机视觉、架构、分布式、高并发、大数据和搜索引擎等方面的技术，大多数编程语言都会使用，但更擅长Java、Python和C++。
超人汪小建(seaboat)·2025-03-14 06:33

pandas常用数据格式IO性能对比

前言本文对pandas支持的一些数据格式进行IO（读写）的性能测试，大数据时代以数据为基础，经常会遇到操作大量数据的情景，数据的IO性能尤为重要，本文对常见的数据格式csv、feather、hdf5、jay
lining808·2025-03-14 05:52

如何设计高效的数据湖架构？

1.引言在大数据时代，数据湖（DataLake）逐渐成为企业存储和处理海量数据的重要基础设施。相比于传统数据仓库，数据湖能够支持结构化、半结构化和非结构化数据，同时提供更灵活的存储与计算能力。
晴天彩虹雨·2025-03-14 02:41

2024年上半年系统架构设计师论文真题

一、论大数据lambda架构大数据处理架构是专门用于处理和分析巨量复杂数据集的软件架构。它通常包括数据收集、存储、处理、分析和可视化等多个层面，旨在从海量、多样化的数据中提取有价值的信息。
任铄·2025-03-14 02:07

2024年5月份架构师考试论文真题完整版

三、论文1.关于大数据的，Lambda架构文老师押中了原题，几乎描述一致撰写关于Lambda架构的软考论文时，一个清晰且结构化的大纲是成功的关键。
Zoi Gil(学习)·2025-03-14 01:04

2024架构设计师论文题目

论文1大数据lamda架构1、简要说明你参开发的软件项目,吸你所承担的主要作2、lamada体系架构将数据流分为批处理层(对应的英文、加速层文、服务层。
数字化信息化智能化解决方案·2025-03-14 01:01
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他