大规模

ZeRO分布式训练策略

ZeRO通过三级分片策略消除内存冗余，实现超大规模模型训练。其核心演进路线分为三个阶段：1.1ZeRO-1：优化器状态分片分片对象：优化器参数（如Ad
AIGC_ZY·2025-02-28 02:13

Redis分布式缓存面试题

2.扩展性水平扩展：通过增加节点，分布式缓存可以轻松扩展，处理更大规模的数据和请求。负载均衡：数据分布在不同节点上，避免单点瓶颈，提升系统整体吞吐量。
hxj..·2025-02-28 01:38

数据湖构建

数据湖与传统的数据仓库不同，它能够存储结构化、半结构化和非结构化数据，支持大规模数据的整合、存储、查询和分析。
HaoHao_010·2025-02-28 00:25

最全中文对话数据集（不定期更新）

因此，构建大规模、高质量的中文对话数据集成为了一个迫切的需求。一、研究意义1、推动中文NLP发展：大规模高质量的中文对话数据集能够为中文自然语言处理领域的研究提供基础
数据猎手小k·2025-02-27 22:06

远程办公2.0：如何通过技术实现全球化团队协作？

远程办公2.0时代：从“被迫适应”到“主动进化”的未来工作革命——前沿技术与趋势预测全解析引言：一场不可逆的全球工作革命2020年的一场疫情，让全球职场人第一次大规模体验了远程办公的“生存模式”，而五年后的今天
·2025-02-27 21:30

AI之DeepSeek

DeepSeek是一个开源的基于深度学习的搜索引擎，用于在大规模数据中进行高效的内容检索和相似度搜索。
james二次元·2025-02-27 18:01

Spark之PySpark

PySpark是ApacheSpark的PythonAPI，它允许开发者使用Python编程语言进行大规模数据处理和分析。
james二次元·2025-02-27 18:01

NocoBase 本周更新汇总：优化及缺陷修复

上周我们发布了NocoBase1.5.0版本，带来内核优化、大规模数据导入导出、邮件管理、模板打印等多项新特性。NocoBase目前更新包括的版本更新包括三个分支：main，next和develop。
·2025-02-27 17:40

DeepEP：开源通信库的高效专家并行计算解决方案

DeepEP旨在优化专家并行计算中的通信效率，确保在大规模分布式系统中实现高性能的数据处理。
耶耶Norsea·2025-02-27 16:41

周边生态 | WAL-G 与 DBeaver 新版增加 Cloudberry 支持

ApacheCloudberry™(Incubating)是Apache软件基金会孵化项目，由Greenplum和PostgreSQL衍生而来，作为领先的开源MPP数据库，可用于建设企业级数据仓库，并适用于大规模分析和
·2025-02-27 13:58

KNN 算法性能跃升秘籍：优化实战，打造高效分类利器！

然而，正如任何算法一样，基础的KNN算法也存在着性能瓶颈，尤其是在处理大规模数据集和高维度特征时，其计算效率和预测精度都可能受到挑战。你是
清水白石008·2025-02-27 07:16

使用Google Cloud Vertex AI构建RAG匹配引擎

在GoogleCloudPlatform的VertexAI中，我们可以利用MatchingEngine来快速高效地从大规模的数据集中检索相关文档或上下文。
vaidfl·2025-02-27 06:29

RAG技术落地：核心痛点与应对策略全面解析

、技术实现层的四大挑战二、数据质量管理的生死线三、产业落地的软性痛点四、未来技术演进方向RAG技术落地：核心痛点与应对策略全面解析检索增强生成（RAG）技术凭借其提升内容精准性与上下文关联的优势，成为大规模语言模型应用的热点方向
山风wind·2025-02-27 05:58

Dataflow 开源项目教程

该项目基于ApacheBeam，支持批处理和流处理，适用于大规模数据处理任务。Dataflo
戴洵珠Gerald·2025-02-27 05:26

Hive SQL 使用及进阶详解

一、Hive简介Hive是建立在Hadoop之上的数据仓库基础架构，它提供了类似于SQL的查询语言HiveSQL（也称为HQL），用于对存储在Hadoop分布式文件系统（HDFS）中的大规模数据进行数据查询和分析
小四的快乐生活·2025-02-27 03:37

大数据SQL调优专题——调优切入

而调优的本质并非对任务进行大规模重构，而是通过各种监控工具，排查梳理出瓶颈点在
黄雪超·2025-02-27 01:54

深入解析 DeepSeek R1：强化学习如何驱动大模型推理能力的进化

这一思路不仅为大规模语言模型（LLMs）带来了新的训练范式，还在跨任务推理迁移上表现出潜力。本文将深入解析DeepSeekR1的架构、训练方法和对比实验，并从多维度审视其局限性与未来发展方向。
海棠AI实验室·2025-02-26 23:07

腾讯云 TDMQ 产品家族新成员：消息队列 MQTT 版全新发布！

TDMQMQTT版推出的背景当前腾讯云消息队列产品家族已拥有多个子产品：CKafka作为业界高吞吐的标杆，广泛地用于离线消息的场景，如大规模日志收集等类似的业务。RocketMQ以其低延时和高并发的
·2025-02-26 19:27

《深入理解JVM》实战笔记（五）：线程安全与锁优化

序言多线程编程是现代计算机系统中不可或缺的一部分，尤其在高并发、大规模分布式系统中，线程安全问题直接影响程序的稳定性和性能。
西瓜拍两瓣·2025-02-26 16:48

新能源+“数字双胞胎“：特斯拉中国工厂背后的技术暗战

NO.1阿里云：城市级数字孪生的“基建先锋”阿里云的“城市大脑・数字孪生平台”以超大规模建模能力见长
Zlssszls·2025-02-26 16:11

探秘分布式图处理利器——PHOEBUS

PHOEBUSphoebusPhoebusisadistributedframeworkforlargescalegraphprocessingwritteninErlang.项目地址:https://gitcode.com/gh_mirrors/ph/phoebus项目简介PHOEBUS是一个基于Erlang的开源项目，专为处理大规模图形数据而设计
杭臣磊Sibley·2025-02-26 14:32

门控机制中的稀疏式、密集式和Soft式三种类型分别适用于哪些具体场景？

稀疏式门控机制适用于以下场景：计算资源有限的任务：例如，在大规模模型中，为了降低计算复杂度和提高效率，可以仅激活部
百态老人·2025-02-26 13:25

R语言：探索数据的利器

作为一门开源语言，R语言拥有丰富的数据处理和可视化功能，同时支持大规模数据分析和机器学习。本文将介绍R语言的基本特性、常用的数据操作和可视化技巧，并提供相应的源代码示例。
ByteWhiz·2025-02-26 12:48

HDFS是如何存储和管理大数据

HDFS（HadoopDistributedFileSystem，Hadoop分布式文件系统）是专为大数据处理而设计的分布式文件系统，具有高吞吐量、高容错性等特点，适用于大规模数据存储和管理。
python资深爱好者·2025-02-26 11:38

Hologres 介绍

Hologres是阿里云提供的一款实时数据分析平台，它结合了数据仓库（DataWarehouse）和流式计算（StreamProcessing）的优势，专为大规模数据分析和实时数据处理而设计。
黄毛火烧雪下·2025-02-26 10:04

JMeter 如何并发执行 Python 脚本

你是否遇到过这样的场景：需要用Python实现复杂的逻辑处理，同时又想利用JMeter的强大并发能力来模拟大规模用户行为？
朱公子的Note·2025-02-26 10:30

解读 DeepSeek 关键 RL 算法 GRPO

DeepSeekGRPO：面向超大规模RLHF的梯度正则化策略优化算法引言在当下人工智能蓬勃发展的浪潮里，DeepSeek无疑是一颗耀眼的明星，频繁出现在各类科技前沿讨论中，热度持续攀升。
进一步有进一步的欢喜·2025-02-26 08:16

pinpoint安装及介绍

Pinpoint翻译自Pinpoint的github首页内容Pinpoint是一个开源的APM(ApplicationPerformanceManagement/应用性能管理)工具，用于基于Java的大规模分布式系统
jack-life·2025-02-26 06:02

洛谷 CF2022A：Bus to Pénjamo ← 模拟题

www.luogu.com.cn/problem/CF2022Ahttps://codeforces.com/contest/2022/problem/A【题目描述】有n个家庭前往佩恩哈莫，见证墨西哥有史以来最大规模的
hnjzsyjyj·2025-02-26 05:57

如何使用GraphX在Spark中进行图计算

GraphX是ApacheSpark的一个图计算框架，它允许开发者在分布式环境中进行大规模的图数据处理和分析。
python资深爱好者·2025-02-26 04:19

常见的消息队列（MQ）及其区别

支持多种消息路由模式适用于对消息可靠性和事务支持要求较高的应用高可靠性，但在高并发下性能一般消息和队列都可以设置为持久化，保证重启后不丢失支持顺序消息，顺序性较好Kafka自定义协议高吞吐量、低延迟、良好的可扩展性适合处理海量的日志数据、大规模数据场景极高吞吐量
·2025-02-25 20:45

需求不明确、没有列基准计划的项目，如何管理项目过程及进度

首先，通过持续沟通和需求梳理，可以在项目进行过程中逐步明确需求，避免大规模的需求变更；其次，即便没有正式的基准计划，仍可以通过设定临时里程碑、进行小范围的迭代和灵活的进度追踪来管理项目进度。
·2025-02-25 20:44

使用marked.min.js编写Markdown文档页面，可做知识库、技术文档、使用文档、教程文档等！

作为一个轻量级的库，marked在处理大规模的Markdown内容时表现出色，并且具备广泛的兼容性和可定制性。
·2025-02-25 16:39

如何用HBase轻松管理海量数据？

HBase是一个分布式的、面向列的开源数据库，专门用来处理大规模数据。它基于Google的
狮歌~资深攻城狮·2025-02-25 15:46

警惕供应链攻击：bshare插件遭恶意篡改引发大规模网站入侵事件分析

一、事件概述近日，国内广泛使用的第三方社交分享插件bshare被曝存在供应链攻击事件。攻击者通过劫持插件官方更新渠道，植入恶意代码，导致大量使用该插件的网站遭到入侵。据安全团队统计，受影响网站超数千家，部分平台用户数据遭窃取、页面被恶意跳转，甚至成为黑产流量分发的跳板。奇安信网站云监测和奇安信威胁情报中心在日常威胁狩猎活动中，发现很多站点在晚上9点至凌晨5点使用安卓UA的设备访问时，会跳转至同一色
小许不内卷·2025-02-25 13:04

2025年2月科技热点深度解析：AI竞赛、量子突破与开源革命

一、AI大模型竞争：开源与闭源的博弈与创新OpenAI的算力基建布局OpenAI的“星际之门”项目持续推进，得克萨斯州阿比林数据中心已动工，旨在通过超大规模算力
lzq603·2025-02-25 09:35

15.4 FAISS 向量数据库实战：构建毫秒级响应的智能销售问答系统

FAISS向量数据库实战：构建毫秒级响应的智能销售问答系统关键词：FAISS向量数据库、销售知识库构建、相似度检索优化、大规模问答匹配、量化索引技术1.销售问答场景的向量化挑战与解决方案1.1传统检索方案痛点分析
少林码僧·2025-02-25 08:00

Redis

传统项目网站访问量一般不大，单机版数据库就很不错，随着互联网web2.0网站的兴起，传统的关系数据库在处理web2.0网站，特别是超大规模和高并发的SNS类型的web2.0纯动态网站已经显得力不从心，出现了很多难以克服的问题
VVVVVxVVVVV·2025-02-25 06:43

如何用解决大模型时效性和准确性问题？RAG技术核心原理

RAG结合了检索和生成的方法，使得从大规模数据中提取信息变得更加高效和准确。本文将介绍RAG的定义、工作原理以及它所解决的问题。RAG是什么？RAG是一种基于预
·2025-02-25 03:23

Python的PyTorch+CNN深度学习技术在人脸识别项目中的应用

大数据：大规模数据集（如LFW、MegaFace）提升模型泛化能力。硬件加速：GPU、TPU等加速计算，提升实
mosquito_lover1·2025-02-25 01:07

轻量级网络设计原理与代码实战案例讲解

然而，大规模模型在计算资源、存储空间以及推理速度方面提出了更高的要求，这在移动设备、嵌入式系统等资源受限的环境中尤为明显。为了解决这一问题，轻量级网络设计应运而生。1.2研
AI天才研究院·2025-02-25 00:00

ATB概念之：算子tiling

1什么是算子tiling在计算机科学和深度学习领域，算子tiling（有时也被称作操作符tiling或者循环tiling）是一种优化技术，主要用于提高计算效率，尤其是在处理大规模张量运算时。
·2025-02-24 23:48

如何使用Python快速开发一个带管理系统界面的网站-解析方案

Streamlit（快速、简洁）适合：数据分析、仪表盘、内部管理系统特点：写法简单，类似JupyterNotebook自带现代化UI，无需前端开发内置交互组件，如表单、图表、按钮缺点：不适合复杂的权限管理和大规模系统示例代码
萧鼎·2025-02-24 20:33

解锁SoC “调试”挑战，开启高效原型验证之路

随着大规模集成电路设计复杂性的增加，芯片
思尔芯S2C·2025-02-24 19:59

高密原型验证系统解决方案（上篇）

本文主要分析了用户在进行大规模SoC设计原型验证过程中在全局时钟及复位同步，大规模设计分割以及高速接口和先进Me
思尔芯S2C·2025-02-24 19:58

深度剖析 DeepSeek V3 技术报告：架构创新与卓越性能表现

随着人工智能（AI）技术的不断发展，各种大规模语言模型（LLM）层出不穷，DeepSeekV3作为其中的一员，凭借其出色的性能表现和创新的架构设计，吸引了广泛关注。
m0_74823947·2025-02-24 15:33

三甲医院等级评审八维数据分析应用（六）--数据安全与隐私保护篇

然而，数据的大规模集中存储与频繁交互流通，使得数据安全与隐私保护面临前所未有的严峻挑战。一旦发生数据泄露事件，不仅会损害患者的个人隐私权益，引发公众对医院信任危机，还可能
Allen_LVyingbo·2025-02-24 09:42

DeepSeek模型微调的原理和方法

预训练模型在大规模通用数据上进行了无监督或有监督的训练，学习到了丰富的语言知识、语义表示和通用模式。这些知识和模式具有一定的通用性，可以迁移到其他相关的任务中。
alankuo·2025-02-24 07:01

网络通信（待补充）

网络通信互联网中主机和主机连接必须遵守特定的要求，这个要求成为协议osi开放式系统互联，定义了计算机互联时网络通信的7层目前大规模使用的是tcp/ip协议：应用层：合并osi中567层（绘画，表示，应用
四无青年203·2025-02-24 05:48

DeepSeek 与网络安全：AI 在网络安全领域的应用与挑战

与此同时，人工智能（AI）技术的快速发展正在为网络安全提供全新的解决方案，而DeepSeek作为AI领域的新兴力量，也正在探索如何利用深度学习和大规模语言模型（LLM）加强网络安
一ge科研小菜菜·2025-02-24 01:49
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他