mindmanager切分

轻松加载PDF、切分文档、向量化存储，再到智能问答

Java如何玩转大模型编排、RAG、Agent？？？在自然语言处理（NLP）的浪潮中，LangChain作为一种强大的模型编排框架，已经在Python社区中广受欢迎。然而，对于Java开发者来说，能否有一个同样高效、灵活的工具来实现类似功能？答案是肯定的！今天，我们将聚焦J-LangChain——一个专为Java打造的LangChain实现，带你探索如何用Java语言轻松构建从PDF处理到智能问答
花千树-010·2025-03-01 22:42

数据库必知必会系列：数据库分片与分布式事务

1.背景介绍分库分表分片集群分布式事务数据迁移2.核心概念与联系主从复制活动复制CAP原则BASE理论3.核心算法原理和具体操作步骤以及数学模型公式详细讲解分库分表水平分表垂直分库分片集群垂直拆分水平切分垂直切分水平拆分根据主键范围根据业务字段划分分布式事务两阶段提交协议三阶段提交协议可靠消息最终一致性
AI天才研究院·2025-03-01 03:51

Objective-C实现NLP中文分词（附完整源码）

Objective-C实现NLP中文分词实现中文分词（NLP中的重要任务之一）在Objective-C中需要处理文本的切分和识别词语边界。
源代码大师·2025-02-27 23:15

mycat 分布式mysql_MySQL 部署分布式架构 MyCAT (五)

如果你的业务中有些数据类似于数据字典，比如配置文件的配置，常用业务的配置或者数据量不大很少变动的表，这些表往往不是特别大，而且大部分的业务场景都会用到，那么这种表适合于Mycat全局表，无须对数据进行切分
weixin_39782573·2025-02-27 12:19

初识hadoop

客户端程序就开始找相应的nn，将相应的block块存进去（切分是由客户端切分的）。关于副本客户端在存入数据的时候只是将数据块block0存入相应的机器，然后由被存入的机器（nn）
西门吹水之城·2025-02-26 12:45

分表分库

分表分库（Sharding）是一种常用于处理大量数据的技术手段，它的目的是通过将数据水平切分成多个小的部分来提高数据库的性能、可扩展性和可维护性。
·2025-02-25 20:46

ATB概念之：算子tiling

在深度学习框架中，算子tiling可以应用于不同的场景：内存优化：通过将大的张量切分成更小的部分，
·2025-02-24 23:48

当你给大模型一段输入之后，它是怎么得到答案的

切分知识点：模型会把这句话拆解成词汇单元（比如：“太阳”“为什么”“东”“升”“西”“落”），就像你背单词时先拆解句子。
牛不才·2025-02-23 19:37

autok3s搭建k3s ha集群并支持gpu调度

本文描述了如何利用autok3s搭建k3s集群，同时支持对gpu的调用和切分。
StevenforAI·2025-02-21 12:34

代理IP服务如何优化AI大模型训练的分布式计算效率

场景一：数据采集与分发的“高速公路”分布式训练的第一步是将海量数据切分到不同计算节点。假设某团队要训练法律文书解析模型，需从20个省级法院网站抓取判例。如果所有
·2025-02-20 21:33

Jieba分词算法应用

Jieba提供了以下几种主要的分词模式：精确模式：尽可能准确地切分句子，适合用于文本分析。全模式：将句子中所有可能的词语都切分出来，适合用于搜索引擎。
C嘎嘎嵌入式开发·2025-02-18 17:03

AI大模型应用开发实践：3.使用 tiktoken 计算 token 数量

和一种编码方式（例如，"cl100k_base"），分词器可以将文本字符串切分成一系列的token（例如，["t","ik","token","is","great","!"]）。
Hugo_Hoo·2025-02-18 03:41

【科普】大模型应用中一个 Token 占多少汉字？答案超乎想象！

先说答案：不同模型可能采用各自的切分方法，因此，一个Token所对应的汉字数量也会有所不同。
大模型.·2025-02-16 19:53

软件架构设计分层架构与 PO、VO、DTO、BO、POJO、BO/DO、DAO

架构始于建筑，是因为人类发展（原始人自给自足住在树上，也就不需要架构），分工协作的需要，将目标系统按某个原则进行切分，切分的原则，是要便于不同的角色进行并行工作。
s_nshine·2025-02-16 00:08

python判断数据和excel中是否相等_对比Excel学习python数据分析-学习笔记4

一对一替换多对一替换多对多替换参考一列数值进行排序参照有缺失值的列排序参考多数值列排序数值排名删除列删除行删除特定列行数值计数唯一值获取数值查找区间切分插入新的行或列行列互换索引重塑长宽表转换apply
re1key·2025-02-15 13:36

力扣LeetCode139.单词拆分及Python源码实现

本来是完成一个项目中一个问题：给定一个字符串和词典将它进行切分，且切分的每个词语都要是词典中的单词，问一共有多少种不同的切分方法。
一只特立丶独行的猪·2025-02-11 09:00

jieba库的使用

中文文本需要分词获得单个的词语分词依靠中文词库，确定汉字之间的关联概率除了分词，用户还可以添加自定义的词组；精确模式：把文本精确分开，不存在冗余模式全模式：把文本中所有可能的词语都扫描出来，有冗余搜索引擎模式：在精确模式的基础上，对长词再进行切分
褐色的勺吷2025-02-11 04:52

k折交叉验证（k-fold Cross-validation）

交叉验证，顾名思义，就是重复的使用数据，把得到的样本数据进行切分，组合为不同的训练集和测试集，用训练集来训练模型，用测试集来评估模型预测的好坏。
向大厂出发·2025-02-11 03:43

python --jieba 分词

jieba库的使用jieba库分词有3种1.精确模式：一段文本精确地切分成若干个中文单词，若干个中文单词经过组合，精确还原原先地文本，不存在冗余单词。2.全模式：一段文本种所有可能出现地词语都扫描
好好学习的顾顾·2025-02-10 14:38

分库分表详解

分库分表确实有垂直切分和水平切分两种，针对给出的描述，以下是对这两种切分方式的详细分析和验证：垂直切分描述：将表按照功能模块、关系密切程度划分出来，部署到不同的库上。
HUNAG-DA-PAO·2025-02-09 07:02

doris：MySQL Load

一般来说，可以使用MySQLLoad导入10GB以下的文件，如果文件过大，建议将文件进行切分后使用MySQLLoad进行导入。MySQLLoad可以保证一批导入任务的原子性，要么全部导入成功，
向阳1218·2025-02-09 02:51

在线免费 HTML 预览导出为图片，并且支持水平切割

https://houbb.github.io/tools/html-preview.html创作背景有时候希望给一段html导出为长度，或者水平切分，感觉人工比较麻烦，就想着实现一个。
·2025-02-08 06:32

在线免费 HTML 预览导出为图片，并且支持水平切割

https://houbb.github.io/tools/html-preview.html创作背景有时候希望给一段html导出为长度，或者水平切分，感觉人工比较麻烦，就想着实现一个。
·2025-02-08 02:29

第十章：大内存的申请和释放

目录第一节：函数修改1-1.ConcurrentAlloc.h1-2.Common.h1-3.PageCache.cpp第二节：测试第三节：结语大内存的思路是将其以一页为对齐数，申请一个为切分的span
转调·2025-02-03 11:34

python多线程怎么写日志_Python日志记录在多进程下的使用

1、问题描述项目中，使用RotatingFileHandler根据日志文件大小来切分日志。设置文件的MaxBytes为1GB，backupCount大小为5。
可以不是真名·2025-02-02 18:48

hdfs的读写流程

1.hdfs写数据面试回答方式1、客户端向NameNode发起上传请求2、NameNode进行权限检查，如果没有问题，返回可以上传通知3、客户端将文件切分多个block，并上传第一个block，NameNode
披星戴月的蝈蝈·2025-01-30 13:35

华为OD机试 - 中文分词模拟器（Python/JS/C/C++ 2024 D卷 100分）

例如“ilovechina”，不同切分后可得到“i”,“love”,“china”。标点符号不分词，仅用于断句。词库：根据常识及词库统计出来的常用词汇。
哪 吒·2025-01-29 12:41

Kafka 日志存储 — 日志索引

1.1日志分段切分的条件日志分段文件
黄名富·2025-01-26 06:20

KT学算法（二）——循环有序数组查找指定元素

问题分析对于循环有序数组，一种简单的定义是：循环有序数组是将一个有序数组切成两段，并交换位置得到引用块内容比如现将1,4,6,9,12,16,18,20,41,100在9和12处切分，得到两段:1,4,6,9
bestswifter·2025-01-25 06:12

openresty+lua实现实时写kafka

一.背景在使用openresty+lua+nginx+flume，通过定时切分日志发送kafka的方式无法满足实时性的情况下，小编开始研究openresty+lua+nginx+kafka实时写kafka
sky@梦幻未来·2025-01-25 04:28

MySQL 分库分表方案

前言公司最近在搞服务分离，数据切分方面的东西，因为单张包裹表的数据量实在是太大，并且还在以每天60W的量增长。
·2025-01-23 22:31

利用LangChain实现网页内容爬取并总结

Map-reduce思想：先对长文本进行切分map阶段-对每段进行summaryreduce-对每个map再进行总结实现长文本内容总结案例实现：背景：想查找某个产品的生产厂商，需要先去网
WorkAgent·2025-01-23 15:49

HCIA笔记7

VLAN（一）VLAN相关介绍（1）LAN——局域网WAN——广域网WLAN——无线局域网VLAN——虚拟局域网（2）VLAN：交换机和路由器协同工作后，将原先的一个广播域，逻辑上切分为多个虚拟的广播域
小白咋了·2025-01-21 07:39

音视频文件提供流式传输之HTTP Live Streaming (HLS)

HTTPLiveStreaming(HLS)是由Apple推出的基于HTTP的流媒体协议，它通过将音视频文件切分成一系列较小的分段文件，并通过M3U8播放列表进行索引，使得音视频可以实现流式传输，支持动态适应不同带宽的自适应流媒体传输
weixin_49784554·2025-01-19 04:38

遥感影像的切片处理

在遥感影像分析中，经常需要将大尺寸的影像切分成小片段，以便于进行详细的分析和处理。这种方法特别适用于机器学习和图像处理任务，如对象检测、图像分类等。
sand&wich·2024-09-16 06:23

数据分析-24-时间序列预测之基于keras的VMD-LSTM和VMD-CNN-LSTM预测风速

文章目录1普通的LSTM模型1.1数据重采样1.2数据标准化1.3切分窗口1.4划分数据集1.5建立模型1.6预测效果2VMD-LSTM模型2.1VMD分解时间序列2.2对每一个IMF建立LSTM模型2.2.1IMF1
皮皮冰燃·2024-09-15 11:54

NLP_jieba中文分词的常用模块

1.jieba分词模式（1）精确模式:把句子最精确的切分开,比较适合文本分析.默认精确模式.（2）全模式:把句子中所有可能成词的词都扫描出来,cut_all=True,缺点:速度快,不能解决歧义（3）paddle
Hiweir ··2024-09-13 12:48

学习node.js十三，文件的上传于下载

文件上传文件上传的方案：大文件上传：将大文件切分成较小的片段（通常称为分片或块），然后逐个上传这些分片。
涛涛酱10086·2024-09-12 20:31

go.path/filepath — 兼容操作系统的文件路径操作

目录path相对路径和绝对路径funcIsAbsfuncAbs路径的切分和拼接funcSplitfuncJoinfuncSplitList解析路径
Generalzy·2024-09-10 18:47

NLP面试题（9月4日笔记）

1）精确模式：将句子最精确的进行切分，适合文本分析，在日常工作中最为常用；2）全模式：将句子中所有可以成词的词语都扫描出来，速度非常快，但不能消除歧义。3）搜索引擎模式：在精确模式的基础上，对长词
好好学习Py·2024-09-08 13:41

【AI大模型应用开发】【LangChain系列】2. 一文全览LangChain数据连接模块：从文档加载到向量检索RAG，理论+实战+细节

该模块提供文档加载、切分，向量存储、检索等操作的封装。最后，结合RAG基本流程、LangChainPrompt模板和输入输出模块，我们将利用LangChain实现RAG的基本流程。
同学小张·2024-09-08 01:13

pyflink的窗口

PyFlink中的窗口操作教程在流处理应用中，窗口（Window）是一个非常重要的概念，它用于对无界的数据流进行切分，使得我们可以对流中的数据执行聚合、计数、排序等操作。
吉小雨·2024-09-07 14:53

hadoop-hdfs系统构成

editsHDFS缺点1)不能低延迟访问2)小文件存取占用大量NameNode内存空间寻道时间超过读取时间3)并发写入,文件随机修改一个文件只能有一个写着仅支持appendHDFS存储数据单元1)文件被切分
weixin_33701564·2024-09-06 00:46

自然语言处理系列八》中文分词》规则分词》正向最大匹配法

人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录自然语言处理系列八规则分词正向最大匹配法总结自然语言处理系列八规则分词规则分词是基于字典、词库匹配的分词方法（机械分词法），其实现的主要思想是：切分语句时
陈敬雷-充电了么-CEO兼CTO·2024-09-04 19:08

windows下切割视频的bat脚本

由于项目中需要将视频均匀切分成几部分，所以弄了个bat脚本：使用时只需要设置变量sourceFile（源文件）和clipNumver（切分数量）.
易道合之逍遥峰·2024-09-03 16:43

数据切分的艺术：使用PyTorch的torch.utils.data.random_split精粹指南

数据切分的艺术：使用PyTorch的torch.utils.data.random_split精粹指南在机器学习项目中，合理地分割数据集至关重，它不仅关系到模型训练的有效性，还直接影响到模型的泛化能力。
2402_85758349·2024-08-31 21:19

《用七年改变人生》进度第112周/365周，2023年第8周，坚持的力量，时间的魅力

用这周做一个切分，以前的112周，是自己一个探索的阶段，自己认为已经正式的结束，后面将要开启一个新的篇章，一切就算再难，自己也不再放弃，加油。以下是第8周的时间反思记录。
七星录·2024-08-29 23:41

牛客周赛 Round 19 解题报告 | 珂学家

A.小红的字符串大小写变换Q:API题，把前k个字符大写，后n-k个字符小写可以切分为2段，然后分别大写，小写化，然后拼接即可importjava.io.BufferedInputStream;importjava.util
珂朵莉酱·2024-08-27 08:44

如果你每天没有25小时，就让24小时更有价值

对我来说时间管理包含三个方面：一、切分时间管理法：每天的时间切割成若干
牛头人507·2024-08-26 19:42

腊月初五，最重要的日子

自然一顿丰盛的晚餐之后的蛋糕切分便是最重要的生日仪式。最亲近的人，最好的朋
明明如月1·2024-08-25 05:30
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他