大数据基础设施

探秘IO分布式模块设计：让大数据处理更高效

一、引言随着互联网的飞速发展，大数据、云计算、人工智能等技术逐渐成为时代的主流。在这个数据爆炸的时代，如何高效地处理海量数据成为企业面临的重大挑战。
清水湾落车·2025-01-21 19:21

大带宽业务都包含哪些内容？

大带宽业务包括大规模数据传输、云计算和远程存储等内容，大规模数据传输是涉及到大文件的传输或者是大数据集的传输。同时在云计算中会涉及到云服务器和虚拟化环境的应用，需要有着
wanhengidc·2025-01-21 19:20

明达云：赋能化工园区，智绘安全高效新蓝图

明达云平台通过集成物联网、大数据、人工智能等先进技术，为
明达技术·2025-01-21 17:09

玩转至轻云大数据平台-docker部署篇

产品介绍至轻云是一款超轻量级、企业级大数据计算平台，基于Spark生态打造。一键部署，开箱即用。
fanciNate454·2025-01-21 16:34

服务器性能监控与优化系统：实战指南与代码案例

服务器性能监控与优化系统：实战指南与代码案例在现代IT基础设施中，服务器性能监控与优化是确保业务连续性和高效运行的关键环节。
我的运维人生·2025-01-21 14:07

1、Java 环境搭建与基本概念：开启 Java 编程之旅的第一步

无论你是编程新手，还是想要学习一门新语言的老手，Java都是一个非常值得学习的语言，它在众多领域都有着广泛的应用，从企业级软件开发、安卓应用开发到大数据处理，都能看到Java的身影。
翻晒时光·2025-01-21 14:06

大数据：数字时代的变革引擎

在当今这个数字化飞速发展的时代，大数据无疑是最为耀眼的存在，如同变革的引擎，驱动着各个领域的创新与发展。大数据的起源可追溯到信息技术发展的早期阶段。
·2025-01-21 12:50

【Redis】使用redis-cli的“--bigkeys”选项查找大Key

通常我们会将含有较大数据或含有大量成员、列表数的Key称之为大Key，下面我们将用几个实际的例子对大Key的特
奇墨 ITQM·2025-01-21 12:55

飞轮科技荣获中国电信星海大数据最佳合作伙伴奖！

与会期间，为了感谢2024年生态合作伙伴对中国电信数据业务发展工作的支持，会议举行了“星海大数据·最佳合作伙伴奖”颁奖仪式。飞轮科技凭借其在数据分析领域的卓越表现与深厚实力，获得这一殊荣。
·2025-01-21 12:20

用大数据“喂养”出来的AI模型ChatGPT 爆火是大数据、大算力、强算法的支撑，中国缺乏的什么？

先来了解一下ChatGPT的基本情况ChatGPT本质属于生成式人工智能，属于无监督或半监督的机器学习。与之相关的还有Discriminativemodeling区分式模型，区分式模型大多属于监督式学习。生成性人工智能目前有两种主要的框架：GAN（GenerativeAdversarialNetwork）和GPT（GenerativePre-trainedTransformer）。GAN目前广泛应
Ai17316391579·2025-01-21 12:54

打游戏时总是“红网”怎么回事，如何解决

以下是对打游戏时总是出现“红网”的原因及相应解决方法的详细分析：原因分析家庭宽带质量：部分地区可能存在宽带基础设施落后的情况，造成上网速度慢或不稳定。路由器性能：老旧或低端配置的路由器无法满足
程序人生77·2025-01-21 10:03

大数据学习(37)- Flink运行时架构

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦1）作业管理器（JobManager）JobManager是一个
viperrrrrrr·2025-01-21 09:57

DolphinScheduler × Jiron：打造高效智能的数据调度新生态

gitee.com/642933588/jiron-cloudDolphinScheduler×Jiron：打造高效智能的数据调度新生态DolphinScheduler是一个开源的分布式任务调度平台，专为大数据场景下的工作流调度和数据治理而设计
jiron开源·2025-01-21 06:26

AWS VPC及其网络

目录：AWS概述EMRServerlessAWSVPC及其网络关于AWS网络架构的思考网络作为云服务的交付手段，同时也是云内部体系的支撑骨架，是一项不可或缺的基础设施，所以这个系列先从AWS上的网络环境开始讲起
还是转转·2025-01-21 05:52

一种时序数据模式演化的跟踪与查询方法

摘要在物联网与大数据应用蓬勃发展的背景下，各类感知设备产生海量的时序数据，设备管理软件版本的快速迭代导致时序数据的模式演化问题日益凸显.模式演化要求对数据模式进行版本管理，使数据进行模式变更时不产生信息损失
米朵儿技术屋·2025-01-21 05:21

FPGA在高速数据采集系统中的应用！！！

以下是FPGA在高速数据采集系统中的详细应用，以及一些具体例子：1.应用背景高速数据采集系统通常用于需要高采样率和大数据量处理的场合，如雷达信号处理、医疗成像、高速通信等。
FPGA资料库·2025-01-21 05:50

《数据库学习之旅：探索数据的奥秘》

在当今数字化的时代，数据库已成为信息管理和处理的核心基础设施。通过对数据库的学习和实践，我获得了许多宝贵的经验和深刻的认识。
2301_82161368·2025-01-21 03:04

Mysql数据库和Sql语句

Mysql数据库和Sql语句一、Mysql数据库1、数据库：组织、存储、管理数据的仓库2、数据库的管理系统（DBMS）：实现对数据有效组织、管理和存取的系统软件3、数据库软件：mysql、oracle（大数据系统一般使用
Jessica小戴·2025-01-21 02:12

安装盒子or搭建机房

易于部署：无需复杂的基础设施建设，可以迅速上线使用，适合快速测试或小规模启动项目。灵活性高：可以根据业务发展灵活调整设备数量，容易
黑石云·2025-01-20 23:23

2024年AI浪潮：基础设施重构、模型演进与挑战并存

2024年，人工智能领域呈现出蓬勃发展的景象，投资持续增长、基础设施发生变革，技术应用加速落地。各大科技公司和初创企业纷纷涌入，试图在这一充满机遇的领域分一杯羹。
·2025-01-20 23:54

弹性云在业务环境中的实际应用和优势有什么

为了保持竞争力并实现持续增长，企业不仅需要创新的产品和服务，还需要一个灵活、高效且成本可控的IT基础设施来支撑其业务运营。
·2025-01-20 22:17

洞见数据未来，StarRocks Summit Asia 2024 即将启幕！

数据量和数据类型的需求飞速上涨，我们不仅需要将历史上各种基础设施中的数据进行分析使用，还要关注性能、灵活性、性价比，以及确保单一可信数据源。这一切构成了当前大数据领域的核心难题。
·2025-01-20 22:45

国产海光CPU平台兼容性指南-基础软件分册-20231013（附各系统下载链接）

2.2.1VMwarevSphere上的虚拟机操作系统2.2.2KVM上的虚拟机操作系统2.2.3WindowsHyper-V上的虚拟机操作系统2.2.4VirtualBox上的虚拟机操作系统三、分布式存储四、数据库五、中间件六、大数据七
技术瘾君子1573·2025-01-20 20:59

基于 SpringBoot 实现多租户架构：支持应用多租户部署和管理！

可以降低运维成本，减少硬件、网络等基础设施的投入。节约开发成本，通过复用代码，快速上线新的租户实例。增强了系统的可扩展
π大星的日常·2025-01-20 19:09

2024年AI浪潮：基础设施重构、模型演进与挑战并存

2024年，人工智能领域呈现出蓬勃发展的景象，投资持续增长、基础设施发生变革，技术应用加速落地。各大科技公司和初创企业纷纷涌入，试图在这一充满机遇的领域分一杯羹。
·2025-01-20 18:03

数据驱动销售预测的未来：ScriptEcho赋能高效决策

然而，随着大数据的兴起和人工智能技术的飞速发展，数据驱动决策正成为现代企业提升竞争力的关键。
·2025-01-20 18:27

Anthropic运维工程师的IT基础设施总结清单（上）

Karpenter开源地址：https://github.com/kubernetes-sigs/karpenter本文由Anthropic工程师JackLindamood撰写，分享了他之前在一家初创公司中负责IT基础设施的经验
CloudPilotAI·2025-01-20 16:12

人生建议往死里学网络安全！零基础也能跨行学习！！漏洞挖掘还能做副业

无论是黑客攻击、勒索病毒、数据泄露，还是国家间的信息战，网络安全已经成为现代社会的基础设施之一。所以，首先要明白学习网络安全的重要性：你不仅是在学习技术，更多的是在为自己和他人的安全“筑城
黑客老哥·2025-01-20 13:50

minio免费文件管理器（windows版本），若依RuoYi-Vue-Plus框架使用，有需要的可以下载，因为官网下载特别慢

MinIO设计为高性能、安全且易于使用，适合存储大量的非结构化数据，如图片、文档、视频以及大数据分析中的日志文件等。
程序员WANG·2025-01-20 10:43

分布式系统理论基础二-CAP

GitHub：https://github.com/wangzhiwubigdata/God-Of-BigData关注公众号,内推,面试,资源下载,关注更多大数据技术~大数据成神之路~预计更新500+篇文章
王知无(import_bigdata)·2025-01-20 10:41

大数据湖仓一体架构未来思考

湖仓一体架构是最近1-2年时间开始频繁出现在数据开发领域的新名词。也是各大公司竞相投入的对象。网络上关于湖仓一体架构的实践文章很多，看得也很眼花缭乱。我们今天站在一个「接地气」的角度，来说一说湖仓一体架构中未来需要关注的核心框架有哪些。文章内容也没有经过仔细的斟酌，完全是一点不成熟的想法，而且站的角度不是高屋建瓴的而是从下往上的。一个基本判断是湖仓一体架构在形式上不止一种大家可以从网上看到很多关于
王知无(import_bigdata)·2025-01-20 09:27

大数据是什么？用浅显的语言揭开神秘面纱

大数据是什么？用浅显的语言揭开神秘面纱在我们生活的时代，“大数据”已经从一个技术术语，成为了街头巷尾时常听到的词汇。然而，究竟什么是大数据？它离我们有多远？我们该如何理解这个复杂又常用的概念？
Echo_Wish·2025-01-20 08:23

LoadRunner如何监控Linux系统资源

使用LoadRunner监控Linux系统资源的步骤详解LoadRunner是一个广泛使用的性能测试工具，支持对Web应用程序、服务器和整个基础设施进行负载测试。
·2025-01-20 08:49

在 Python 中使用 Ollama API

无论你是想进行简单的聊天对话、使用流式响应处理大数据、还是希望在本地进行模型的创建、复制、删除等操作，本文都可以为你提供指导。
一路追寻·2025-01-20 06:05

AI与API的融合：构建智能互联技术世界的基石

一、AI与API融合的背景随着大数据、云计算、物联网等技术的快速发展，人工
IT数据V+I7809804594·2025-01-20 05:55

Hadoop 和 Spark 的内存管理机制分析

大数据技术：涵盖Hadoop（HDFS）、Hive、Spark、Fli
王子良.·2025-01-20 03:27

2025最新大数据毕业设计选题汇总：创新课题推荐

学长给大家整理了大数据专业最新精选选题，如遇选题困难或选题有任何疑问，都可以问学长哦(见文末)!对毕设有任何疑问都可以问学长哦!更多选题指导:最新最全计算机专业毕设选题精选推荐汇总
HaiLang_IT·2025-01-20 02:51

PL/SQL语言的文件操作

PL/SQL语言的文件操作引言PL/SQL（ProceduralLanguage/SQL）是Oracle数据库提供的一种过程化编程语言，它结合了SQL的强大数据处理能力和过程性编程的灵活性。
云端 架构师·2025-01-20 01:41

揭秘AIP智能体平台：构建未来AI基础设施的新引擎

在人工智能的浪潮中，科技正在改变我们生活的方方面面。从智能推荐到自动驾驶，从个性化广告到实时风险控制，AI的触角无处不在。但这些令人瞩目的成果背后，究竟是什么在支撑着AI的飞速发展？答案是——人工智能平台。人工智能平台是连接计算资源、开发工具和行业应用的重要桥梁，支撑着从模型开发到行业场景落地的每一个环节。它不仅为开发者提供高效便捷的工具，还为企业创造了无限的创新可能。本文将带你深入了解人工智能平
大东（AIP内容运营专员）·2025-01-19 23:54

【架构设计】现代软件交付中的灵活性与可靠性———云原生与不可变基础设施（微服务/容器化/持续交付，计算/存储/网络）

【架构设计】现代软件交付中的灵活性与可靠性———云原生与不可变基础设施（微服务/容器化/持续交付，计算/存储/网络）文章目录1、云原生与基础设施的关系2、云原生的概念（灵活性）3、云原生=微服务+容器化
小哈里·2025-01-19 22:47

大数据学习（五）：如何使用 Livy提交spark批量任务--转载

Livy是一个开源的REST接口，用于与Spark进行交互，它同时支持提交执行代码段和完整的程序。Livy封装了spark-submit并支持远端执行。启动服务器执行以下命令，启动livy服务器。./bin/livy-server这里假设spark使用yarn模式，所以所有文件路径都默认位于HDFS中。如果是本地开发模式的话，直接使用本地文件即可（注意必须配置livy.conf文件，设置livy.
zuoseve01·2025-01-19 22:15

浅谈云计算01 | 云计算服务的特点

一、按需自助服务云计算提供了多种服务模式，如基础设施即服务（IaaS）、平台即服务（PaaS）和软件即服务（SaaS）等。用户可以根据自己的具体需求选择其中一种模式。不同服务模式的特点IaaS
时光札记z·2025-01-19 22:12

Spark Livy 指南及livy部署访问实践

背景：ApacheSpark是一个比较流行的大数据框架、广泛运用于数据处理、数据分析、机器学习中，它提供了两种方式进行数据处理，一是交互式处理：比如用户使用spark-shell，编写交互式代码编译成spark
house.zhang·2025-01-19 22:40

大数据学习（四）：Livy的安装配置及pyspark的会话执行

一个基于Spark的开源REST服务，它能够通过REST的方式将代码片段或是序列化的二进制代码提交到Spark集群中去执行。它提供了以下这些基本功能：提交Scala、Python或是R代码片段到远端的Spark集群上执行；提交Java、Scala、Python所编写的Spark作业到远端的Spark集群上执行；提交批处理应用在集群中运行。从Livy所提供的基本功能可以看到Livy涵盖了原生Spar
猪笨是念来过倒·2025-01-19 21:08

网络爬虫——分布式爬虫架构

分布式爬虫在现代大数据采集中是不可或缺的一部分。随着互联网信息量的爆炸性增长，单机爬虫在性能、效率和稳定性上都面临巨大的挑战。
好看资源分享·2025-01-19 18:40

Python-玩转数据-数据分析之分析思维

二、大数据思维自从几年前大数据开始兴起，大数据思维已经逐渐被更动的人接受，随着其进一步发展，产生了巨大的生产效果。
人猿宇宙·2025-01-19 17:33

火星数据电竞数据，世界杯数据接口api，足球数据资料库

电竞数据包含的内容有很多，比如说基础数据（实时比分，关键事件，赛后数据等等），统计数据（阵容分析，选手分析，地图分析等），还有资料库数据（赛事战队，赛程赛果，赛况榜单等等），众多的数据组合而成形成如今的电竞大数据
Tina0898·2025-01-19 14:04

构建高效GPU算力平台：挑战、策略与未来展望

引言随着深度学习、高性能计算和大数据分析等领域的快速发展，GPU（图形处理器）因其强大的并行计算能力和浮点运算速度而成为首选的计算平台。
Mr' 郑·2025-01-19 11:43

Databricks:打造数据国度的“金砖四国”

Databricks，一个并不算熟悉的名字，是大数据国度的后起之星。成立不够一年，但却阵容强大，创始人都是开源圈子里面的重要级人物，值得关注。
weixin_33832340·2025-01-19 11:40

一文详解大厂数据中台架构

在大数据发展的黄金期，几乎所有的高科技企业都在思考一个问题：海量数据作为大多数企业发展不可避免的一个趋势之后，企业该怎么去应用这部分数据资产，会对其商业产生什么影响，如何使数据对企业产生正面的推动而不是成为企业的负担
isNotNullX·2025-01-19 10:06
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他