FAISS 第3页

ModaHub魔搭社区：Milvus Cloud向量数据库不可小觑

云和恩墨创始人，中国数据库联盟（ACDU）主席盖国强表示，向量技术和相似度搜索可以回溯到Facebook在2017年开源的Faiss（基于向量的聚类和相似性搜索库），Milvus数据库就是基于

LCHub低代码社区·2023-08-14 04:00

Faiss在windows下安装和使用

pipinstallfaiss-cpu直接安装可能出现问题：error:command'swig.exe'failed:Nosuchfileordirectory安装swig即可解决，安装方式

qq_23438131·2023-08-13 16:05

使用Spark ALS模型 + Faiss向量检索实现用户扩量实例

1、通过ALS模型实现用户/商品Embedding的效果，获得其向量表示准备训练数据，M=(U,I,R)即用户集U、商品集I、及评分数据R。（1）商品集I的选择：可以根据业务目标确定商品候选集，比如TopK热度召回、或者流行度不高但在业务用户中区分度比较高的商品集等。个人建议量级控制在5W内，1W-2W左右比较合适，太大的话，用户产生行为的商品比较少，评分数据会非常的稀疏。（2）用户集U的选择：最

Just Jump·2023-08-11 17:48

【LangChain学习】基于PDF文档构建问答知识库（三）实战整合 LangChain、OpenAI、FAISS等

接下来，我们开始在web框架上整合LangChain、OpenAI、FAISS等。

reui·2023-08-10 05:08

什么是Milvus

Milvus基于FAISS、Annoy、HNSW等向量搜索库构建，核心是解决稠密向量相似度检索的问题。在向量检索库的基础上，Milvus支持数据分区分片、数据持久化、增量数据摄取、标量向量混合查

学习3人组·2023-08-09 11:40

【LangChain】Prompts之自定义提示模板

LangChain学习文档【LangChain】向量存储(Vectorstores)【LangChain】向量存储之FAISS【LangChain】Prompts之Prompttemplates【LangChain

山鬼谣me·2023-08-09 11:40

【LangChain】Prompts之示例选择器

LangChain学习文档【LangChain】向量存储(Vectorstores)【LangChain】向量存储之FAISS【LangChain】Prompts之Prompttemplates【LangChain

山鬼谣me·2023-08-09 11:09

AIGC：【LLM（五）】——Faiss：高效的大规模相似度检索库

文章目录一.简介1.1什么是Faiss1.2Faiss的安装二.Faiss检索流程2.1构建向量库2.2构建索引2.3top-k检索三.Faiss构建索引的多种方式3.1Flat：暴力检索3.2IVFxFlat

J_Xiong0117·2023-08-08 08:35

【LangChain】Prompts之Prompt templates

LangChain学习文档【LangChain】向量存储(Vectorstores)【LangChain】向量存储之FAISS【LangChain】Prompts之PrompttemplatesPrompts

山鬼谣me·2023-08-07 13:28

《向量数据库指南》——Faiss的最佳实践与技巧

最佳实践与技巧熟悉数据：在使用Faiss前，需要先花一点时间理解数据。可以问自己一些问题，例如：这个数据集的数据量多大？数据信息是否完整？

LCHub低代码社区·2023-08-06 16:31

《向量数据库指南》——使用SQuAD 数据集演示Faiss 功能

使用SQuAD数据集进行演示现在，我们可以通过示例演示了解Faiss功能。本次示例中，将使用斯坦福的问答数据集（SQuAD）。

LCHub低代码社区·2023-08-05 11:33

《向量数据库》——怎么安装向量检索库Faiss？

装Faiss以下教程将展示如何在Linux系统上安装Faiss：1.安装Conda。在安装Faiss之前，先在系统上安装Conda。

LCHub低代码社区·2023-08-05 00:42

向量数据库入坑指南：聊聊来自元宇宙大厂 Meta 的相似度检索技术 Faiss

本篇文章，我们就来聊聊faiss，分享这个“黑科技”是如何发挥神奇的“魔法”的。写在前面faiss是相似

soulteary·2023-08-04 23:13

FaceBook开源向量检索库Faiss的基本用法

目录前言安装向量无压缩检索暴力检索聚类检索向量压缩检索前言faiss是FaceBook开源的大规模向量检索库，相似度为L2距离(欧式距离)或内积，底层为C++，内置的大部分算法支持GPU加速检索，包含了

达致·2023-08-04 23:13

大规模向量检索库Faiss学习总结记录

因为最近要使用到faiss来做检索和查询，所以这里只好抽出点时间来学习下，本文主要是自己最近学习的记录，来源于网络资料查询总结，仅用作个人学习总结记录。

Together_CZ·2023-08-04 23:42

基于text2vec和faiss开发实现文档查询系统初体验

最近接触到了一些文本向量化的预训练模型，感觉相比较自己去基于gensim去训练词向量来说，使用预训练模型可能是更高效的方式了，正好有一个想法一直在想能够以什么样的形式间接的实现问答，说白了这里的问答跟我们理解的chatGPT类型的问答是不一样的，这里的考虑是想有一堆知识语料或者是文本文档数据，对于专业人士来说查询使用起来肯定是很简单的，但是对于一些刚从业或者是缺乏专业培训的人员来说是比较困难的，如

Together_CZ·2023-08-04 23:12

基于facenet+faiss开发构建人脸识别系统

facenet是一款非常经典的神经网络模型，它可以直接学习从人脸图像到欧几里德空间的映射(直接将人脸映射到欧几里得空间)。在欧几里德空间中，距离直接对应于人脸相似性的度量。一旦这个空间产生，使用标准技术，将FaceNet嵌入作为特征向量，就可以很容易地实现人脸识别、验证和聚类等任务。作者使用经过训练的深度卷积网络来直接优化嵌入本身，而不是像以前的深度学习方法那样使用中间瓶颈层。为了训练，作者使用了

Together_CZ·2023-08-04 13:23

基于arcFace+faiss开发构建人脸识别系统

在上一篇博文《基于facenet+faiss开发构建人脸识别系统》中，我们实践了基于facenet和faiss的人脸识别系统开发，基于facenet后续提出来很多新的改进的网络模型，arcFace就是其中一款优秀的网络模型

Together_CZ·2023-08-04 13:23

人脸识别场景下Faiss大规模向量检测性能测试评估分析

在前面的两篇博文中，主要是考虑基于之前以往的人脸识别项目经历结合最近使用到的faiss来构建更加高效的检索系统，感兴趣的话可以自行移步阅读即可：《基于facenet+faiss开发构建人脸识别系统》Facenet

Together_CZ·2023-08-04 13:52

【LangChain】向量存储之FAISS

LangChain学习文档【LangChain】向量存储(Vectorstores)【LangChain】向量存储之FAISS概要FacebookAI相似性搜索（Faiss）是一个用于高效相似性搜索和密集向量聚类的库

山鬼谣me·2023-08-03 01:13

【LangChain】向量存储(Vector stores)

LangChain学习文档【LangChain】向量存储(Vectorstores)【LangChain】向量存储之FAISS概要存储和搜索非结构化数据的最常见方法之一是嵌入它并存储生成的嵌入向量，然后在查询时嵌入非结构化查询并检索与嵌入查询

山鬼谣me·2023-08-02 00:08

《向量数据库指南》——FAISS和Chroma：两种流行的向量数据库的比较

在本文中，我将介绍两种常用的向量数据库：FAISS和Chroma，并比较它们的特点和优缺点。FAISSFAISS是Facebook开发的开源库

LCHub低代码社区·2023-07-28 20:27

开源向量数据库--milvus

Milvus集成了Faiss、NMSLIB、Annoy等广泛应用的向量索引库，提供了一整套简单直观的API，让你可以针对不同场景选择不同的索引类型。

宁缺100·2023-07-28 11:10

Langchain 集成 FAISS

Langchain集成FAISS1.FAISS2.SimilaritySearchwithscore3.Savingandloading4.Merging5.SimilaritySearchwithfiltering1

engchina·2023-07-28 04:31

强大的向量数据库：Milvus

一般常用的如Annoy、faiss都可以满足大部分的需求，今天再来介绍另外一个：MilvusMilvusMilvus不同于Annoy、faiss这类型的向量检索工具，它更是一款开源向量数据库，赋能AI应用和向量相似度搜索

我就算饿死也不做程序员·2023-07-27 13:07

【深度学习】以图搜索- facebook的faiss 从环境搭建到运行案例从0到1

文章目录前言安装小试牛刀项目延伸总结前言Faiss的全称是FacebookAISimilaritySearch。这是一个开源库，针对高维空间中的海量数据，提供了高效且可靠的检索方法。

weixin_40293999·2023-07-27 07:49

Faiss简单使用

Faiss是FacebookAIResearch开发的快速相似性搜索（similaritysearch）计算库，为稠密向量提供高效相似度搜索和聚类，支持十亿级别向量的搜索。

hj_caas·2023-07-19 15:45

向量数据库Faiss的搭建与使用

向量数据库Faiss是FacebookAI研究院开发的一种高效的相似性搜索和聚类的库。它能够快速处理大规模数据，并且支持在高维空间中进行相似性搜索。

DePeng8899·2023-07-17 10:06

LLM之高性能向量检索库

LLM向量数据库高性能向量检索库milvus简介安装调用faiss简介安装调用高性能向量检索库milvus简介Milvus是一个开源的向量数据库引擎，旨在提供高效的向量存储、检索和分析能力。

江小皮不皮·2023-06-23 22:31

向量检索

当前用的比较广泛的向量检索lib是facebook的faiss，纯C++实现，所以如果要做一些深层次的工作C++开发绕不开，甚至上层的RPC/Rest服务框架为保证性能也要考虑用C++。调

UniMan·2023-06-22 02:43

完全解析：使用Faiss进行海量特征的相似度匹配

点击上方“计算机视觉工坊”，选择“星标”干货第一时间送达作者丨Gemfield@知乎来源丨https://zhuanlan.zhihu.com/p/210736523编辑丨极市平台导读Faiss为稠密向量提供高效相似度搜索和聚类

Tom Hardy·2023-06-19 23:54

《向量数据库》——向量数据库 Milvus 是什么

Milvus集成了Faiss、NMSLIB、Annoy等广泛应用的向量索引库，提供了一整套简单直观的API，让你可以针对不同场景选择不同的索引类型。

LCHub低代码社区·2023-06-19 21:13

Faiss PQ 乘积量化

ApproximateNearestNeighbor搜索简称ANN。从宏观上看ANNbrute-force搜索的方式是在全空间进行搜索，为了加快查找的速度，几乎所有的ANN方法都是通过对全空间分割，将其分割成很多小的子空间，在搜索的时候，通过某种方式，快速锁定在某一（几）子空间，然后在该（几个）子空间里做遍历。可以看到，正是因为缩减了遍历的空间大小范围，从而使得ANN能够处理大规模数据的索引。可以

winner8881·2023-06-12 00:08

【Python库安装填坑】faiss在Windows上的安装问题---from . import _swigfaiss ImportError: DLL load failed: 找不到指定的模块。

11月21号更新：经过GitHub大神指导，我终于发现faiss-gpu版为什么在VScode不好使，但是jupyternotebook却可以直接执行。

黄水生·2023-06-11 20:01

【安装填坑】---- ERROR: Could not install packages due to an OSError: [Errno 2] No such file or directory:

CouldnotinstallpackagesduetoanOSError:[Errno2]Nosuchfileordirectory:‘d:\users\xxxx\appdata\local\continuum\anaconda3\envs\faiss

黄水生·2023-06-11 20:01

GPT 开发技术选取

技术栈集成工具LangChain部署StreamlitGradio(onHuggingFace)向量数据库Pinecone（云数据库，付费70$/月，免费试用需要资格）Qdrant（开源，自己部署）FAISS

python算法工程师·2023-06-08 21:29

基于SimCSE和Faiss的文本向量检索实践

目录文本的向量表示1、SimCSE2、支持无监督训3、训练注意事项向量检索1、精准查找flat2、HNSWx3、IVFx4、PQx5、LSH对博客标题进行向量检索数据向量化构建索引文本检索测试检索传统的文本检索一般是建立倒排索引，对搜索词的召回结果进行打分排序返回最终结果，但是在海量的数据面前，召回结果页面临着一些挑战。于是就有了基于语义的搜索，即将文本向量化，默认向量包含了文本的语义信息，匹配最

行走的人偶·2023-04-21 09:09

Faiss

1.Faiss是什么 Faiss是FacebookAiResearch开发的一款稠密向量检索工具。

独影月下酌酒·2023-04-19 14:08

Faiss核心技术（二）

在Faiss核心技术一文中我以IndexFlatL2为例解释了Faiss的工作原理。

A君来了·2023-04-10 04:20

极智开发 | ubuntu源码编译faiss

欢迎关注我的公众号[极智视界]，获取我的更多经验分享大家好，我是极智视界，本文介绍一下ubuntu源码编译faiss。

极智视界·2023-04-08 18:10

faiss升级numpy版本惹的祸

最近在进行Facebook的基于faiss语义召回用于电商搜索的召回开发工作时候，基于tensorflow在训练dssm模型的过程中，模型的代码在图的run过程中，出现了莫名其妙的bug,信息如下：TypeErrorTraceback

城中山谷·2023-03-30 01:02

faiss 稠密向量检索框架

faiss是为稠密向量提供高效相似度搜索和聚类的框架，一下是官网提供的demo#1.首先构建训练数据和测试数据importnumpyasnpd=64#dimensionnb=100000#databasesizenq

识醉沉香·2023-03-28 20:19

冰云数据·2023-03-25 23:49

稀疏矩阵计算心得

faiss通过预训练聚类和向量压缩大大减少搜索时的计算量。上亿级别

MakeSense·2023-03-24 16:22

Faiss核心技术

OverviewFaiss是FacebookAIResearch开发的快速相似性搜索（similaritysearch）计算库。所谓的相似性搜索，就是进行向量间比对，如图示，图像经过特征提取转换成一个高维向量，通过将该向量和数据库中其他图像特征向量作一一比对，就能找出最相近的K个目标图像。不仅是图像，只要是可以用高维向量表征的，都可以做相似性搜索，如文字、音频等。similaritysearch向

A君来了·2023-03-15 04:47

零基础入门推荐系统-新闻推荐-【多路召回】

一棵二叉树·2023-02-04 11:19

Windows下装faiss

最近学习YouTubeDNN想用faiss，github上的官方文档是说可以在Windows上装CPU版本的但安装后import总是报错“ImportError:DLLloadfailed:找不到指定的模块

米奇巨型老鼠·2023-02-03 20:56

【python】faiss

0.介绍facebook开发的图像检索框架1.安装condainstall-cpytorchfaiss-cpucondainstall-cpytorchfaiss-gpucudatoolkit=10.2#forCUDA10.2condainstall-cpytorchfaiss-gpucudatoolkit=11.3#forCUDA11.32.应用importnumpyasnpd=64#dimen

.云哲.·2023-02-03 20:55

windows安装Faiss，swigfaiss: 找不到指定的模块

sudoapt-getinstalllibopenblas-devsudoapt-getinstalllibomp-dev以下为windows10下的情况【此部分可以略过，直接看下面的解决方法】问题：在安装Faiss

AlanLiu6·2023-02-03 20:24

CUDA编程（二）

概要源于facebook的faiss库，其用过GPU对于进行加速，另外xfr中也用到GPU，而需求源于之前xid对于大数据量的性能问题。

zhanglehes·2023-01-29 16:11

推荐频道

FAISS