多模态数据融合

自动驾驶之心规划控制理论&实战课程

单目3D与单目BEV全栈教程(视频答疑)多传感器标定全栈系统学习教程多传感器融合:毫米波雷达和视觉融合感知全栈教程(深度学习传统方式)多传感器融合跟踪全栈教程(视频答疑)多模态融合3D目标检测教程(视频答疑
vsdvsvfhf·2024-09-04 10:05

[论文笔记] LLaVA

Contribution:这篇工作已经在BLIP-2之后了，所以Image的理解能力不是LLaVA希望提升的重点，LLaVA是想提升多模态模型的Instruction-Followingab
心心喵·2024-09-03 08:53

遥感多模态基础大模型汇总-实时更新

本文内容来自下面链接，考虑到很多同学登录不了，故在此平台进行分享。遥感基础大模型TableofContentsModelsRemoteSensingVisionFoundationModels遥感视觉基础模型RemoteSensingVision-LanguageFoundationModels遥感视觉语言基础模型RemoteSensingGenerativeFoundationModels遥感生
遥感-GIS·2024-09-02 19:33

AI在科研中的应用：chatgptgpt4的数据分析与机器学习

2023年4月，更强版本的ChatGPT4.0上线，文本、语音、图像等多模态交互方式使其在各行各业的应用呈现了更多的可能性。
zmjia111·2024-09-01 12:52

ChatGPT办公与科研应用、论文撰写、数据分析、机器学习、深度学习及AI绘图

2023年4月，更强版本的ChatGPT4.0上线，文本、语音、图像等多模态交互方式使其在各行各业的应用呈现了更多的可能性。
PhyliciaFelicia·2024-09-01 12:19

基于STM32开发的智能农业监测与控制系统

目录引言环境准备工作硬件准备软件安装与配置系统设计系统架构硬件连接代码实现系统初始化传感器数据采集与处理自动灌溉与环境控制数据融合与决策算法OLED显示与状态提示Wi-Fi通信与远程监控应用场景温室环境的智能监控与自动化控制农田土壤与作物生长的实时监测常见问题及解决方案常见问题解决方案结论
stm32发烧友·2024-09-01 07:18

xGen-MM (BLIP-3): A Family of Open Large Multimodal Models

xGen-MM（BLIP-3）：一组开放的大型多模态模型摘要1引言2相关工作3模型架构4训练5数据6实验7消融研究8结论摘要本报告介绍了xGen-MM（也称为BLIP-3），这是一个用于开发大型多模态模型
UnknownBody·2024-08-30 13:47

【CVPR‘24】BP-Net：用于深度补全的双边传播网络，新 SOTA！

摘要介绍方法1.总体架构2.双边传播模块（BilateralPropagationModule）深度参数化参数生成先验编码3.多模态融合（Multi-modalFusion）4.深度细化（DepthRefinement
BIT可达鸭·2024-08-30 04:50

基于深度学习的人类行为模仿

1.背景与意义1.1人类行为的复杂性多模态数据：人类行为包含视觉、听觉、触觉、语言等多种感知信息，如何综合分析这些多模态数据以理解和模仿人类行为是一个挑战。情境依赖性：人类行为通常依赖于特定
SEU-WYL·2024-08-30 01:26

A Survey on Benchmarks of Multimodal Large Language Models

多模态大型语言模型基准研究综述摘要1引言2前言3感知与理解4认知与推理5特定领域6关键能力7其他模态8结论摘要多模态大型语言模型（MLLM）在学术界和工业界越来越受欢迎，因为它们在视觉问答、视觉感知、理解和推理等各种应用中表现出色
UnknownBody·2024-08-29 11:20

ms | modelscope源码方式安装

[email protected]:modelscope/modelscope.gitcdmodelscopegitfetchoriginmastergitcheckoutmaster安装依赖如仅需体验多模态领域模型
Mopes__·2024-08-27 10:28

使用MongoDB构建AI：Jina AI将突破性开源嵌入模型变为现实

JinaAI创立于2020年，总部位于德国柏林，主要从事提示工程和嵌入模型业务，已迅速成长为多模态AI领导者。
MongoDB 数据平台·2024-08-27 02:10

大模型微调技术（Adapter-Tuning、Prefix-Tuning、Prompt-Tuning(P-Tuning)、P-Tuning v2、LoRA）_adapter微调 p tuning

今年3月15日，GPT-4发布后，也出现了一些多模态的大模型，比如百度的文心一言、讯飞星火认知大模型等等。要想训练一个针对特定领域的大模型，如果采用全量参数微调（FullParameterFutu
Cc不爱吃洋葱·2024-08-26 19:12

国货之光|暴雨机推出面向大模型训练的AI服务器

当前，“百模大战”带来了算力需求的爆发，尤其是以ChatGPT为代表的多模态AI大模型，‌其参数规模和训练数据量均达到了前所未有的规模。‌
BAOYUCompany·2024-08-26 10:44

使用书生万象InternVL大模型进行自定义视频数据集微调时没有petrel_client导致NoneType异常

它是目前已知性能最强的开源多模态大模型(见数值对比表），也是国内首个在MMMU（多学科问答）上突破60的模型。数学基准MathVista的测试中
菜b杨·2024-08-26 06:54

通义千问( 五 ) 图片分析

5.多模态5.1.图片分析5.1.1.介绍通义千问VL(Qwen-VL)是阿里云研发的大规模视觉语言模型（LargeVisionLanguageModel,LVLM），可以以图像、文本、检测框作为输入，
春哥的魔法书·2024-08-25 14:15

[CLIP-VIT-L + Qwen] 多模态大模型源码阅读 - trainer篇

[CLIP-VIT-L+Qwen]多模态大模型源码阅读-trainer篇前情提要源码阅读导包逐行解读compute_loss方法（重构）整体含义逐行解读save_model函数（重构）整体含义逐行解读create_optimizer
FlowerLoveJava·2024-08-24 22:40

CLIP-VIT-L + Qwen 多模态源码阅读 - 语言模型篇（3）

多模态学习笔记-语言模型篇（3）参考repo:WatchTower-Liu/VLM-learning;url:VLLM-BASE吐槽今天接着昨天的源码继续看，黑神话：悟空正好今天发售，希望广大coder
FlowerLoveJava·2024-08-24 22:10

《通义千问AI落地—上》：后端接口

为多模态大模型(MultimodalModels)。通义意为“通情，达义”，具备全副AI能力，致力于成为人们的工作、学习、生活助手。功能包括多轮对话、文案创作、逻辑推理、
写完bug就找女朋友·2024-08-24 22:37

【AIGC半月报】AIGC大模型启元：2024.08（下）

【AIGC半月报】AIGC大模型启元：2024.08（下））(1)Nemotron-4-Minitron（NvidiaLLM）(2)VITA（腾讯优图多模态大模型）(3)mPLUG-Owl3（阿里巴巴多模态大模型
LeeZhao@·2024-08-23 10:19

AIGC：clip-interrogator

文字生成图片是近年来多模态和大模型研究的热门方向，openai提出的CLIP提供了一个方法建立起了图片和文字的联系，但是只能做到给定一张图片选择给定文本语义最相近的那一个，实际项目开发中我们总是需要从一张图片获取描述
微风❤水墨·2024-08-23 10:17

破晓未来视界：neuralsim——3D重构与模拟的神经渲染革命

今天，我们为您揭开一个名为“neuralsim”的开源项目面纱，它基于3D神经渲染技术，旨在通过高效且详尽的方式，重新定义表面重建和多模态传感器仿真。
秋玥多·2024-08-23 09:46

[CLIP-VIT-L + Qwen] 多模态大模型源码阅读 - 语言模型篇（2）

多模态学习笔记-语言模型篇（2）参考repo:WatchTower-Liu/VLM-learning;url:vlm-learning吐槽今天的源码看的欲仙欲死，NTK(neuraltangentkernel
FlowerLoveJava·2024-08-23 09:14

[CLIP-VIT-L + Qwen] 多模态大模型源码阅读 - 语言模型篇（1）

多模态大模型源码阅读-语言模型篇（1）吐槽今日心得MQwen.py吐槽想要做一个以Qwen-7B-Insturct为languagedecoder,以CLIP-VIT-14为visionencoder的
FlowerLoveJava·2024-08-23 09:14

第六届多模态脑网络数据处理班（直播：2023.6.24~6.28）

茗创科技专注于脑科学数据处理，涵盖（EEG/ERP,fMRI,结构像,DTI,ASL,FNIRS）等，欢迎留言讨论及转发推荐，也欢迎了解茗创科技的脑电课程，数据处理服务及脑科学工作站销售业务，可添加我们的工程师（微信号MCKJ-zhouyi或17373158786）咨询。★课程简介★脑网络（cerebralnetwork）定义为：大脑空间位置不同的皮质区域通过结构或功能联系整合起来形成的网络模式。
茗创科技·2024-08-23 06:33

多模态大模型Internvl-1.5-26B微调后部署及测试实录（附代码）

大模型相关目录大模型，包括部署微调prompt/Agent应用开发、知识库增强、数据库增强、知识图谱增强、自然语言处理、多模态等大模型应用开发内容从0起步，扬帆起航。
写代码的中青年·2024-08-22 15:59

AI实现自闭症早筛：卡罗林斯卡学院研究团队开发的多模态数据分析AI模型，能在儿童12个月左右时发现自闭症的早期迹象，准确率超过80%？

卡罗林斯卡学院的研究团队确实开发了一种多模态数据分析AI模型，该模型能够在儿童大约12个月大时发现自闭症的早期迹象，并且准确率超过80%.具体来说，这种AI模型利用了多种数据源和分析方法，包括基础医疗筛查和背景历史信息
百态老人·2024-08-22 13:48

多模态大模型：技术原理与实战 OpenAI一鸣惊人带来的启示

多模态大模型：技术原理与实战OpenAI一鸣惊人带来的启示1.背景介绍1.1人工智能的发展历程人工智能(ArtificialIntelligence,AI)是当代科技发展的核心领域之一。
AI大模型应用之禅·2024-08-22 12:40

多模态大模型：技术原理与实战 智能客服

多模态大模型：技术原理与实战智能客服1.背景介绍在人工智能领域，多模态大模型（MultimodalLargeModels,MLMs）正逐渐成为研究和应用的热点。
AI大模型应用之禅·2024-08-22 12:39

探索AI智能体Agent的核心架构：记忆、工具与行动

这篇文章将详细解析智能体Agent的记忆与决策框架，探讨其多模态感知、记忆、规划决策等各个环节的实现与应用。
程序员笑武·2024-08-22 08:46

让数据用起来：数据中台建设的评估与选择（第4章）

加强业务与数据融合，利用大数据、机器学习、深度学习等技术进行精准营销、信用风险控制等。第四个阶段：运营优化。开始建设数据中台，快速生产定制化数据服务。企业数据应用能力成熟度可以从
小阳阳兄·2024-03-03 02:20

多模态相关论文笔记

(cilp)LearningTransferableVisualModelsFromNaturalLanguageSupervision从自然语言监督中学习可迁移的视觉模型openAI2021年2月48页PDFCODECLIP(ContrastiveLanguage-ImagePre-Training)对比语言图像预训练模型引言它比ImageNet模型效果更好，计算效率更高。尤其是zero-sho
靖待·2024-02-24 10:27

openai chat GPT-4 Technical Report 技术报告论文

摘要我们报告了GPT-4的开发，这是一个大规模、多模态的模型，可以接受图像和文本输入，并生成文本输出。
·2024-02-20 19:06

“幕僚智算”重磅上线，打造AI算力新平台

一、AIGC时代算力的强烈需求随着人工智能技术的飞速发展，特别是ChatGPT和多模态的出现，我们正步入一个全新的AIGC时代。
·2024-02-20 19:05

openai chat GPT-4 Technical Report 技术报告论文

摘要我们报告了GPT-4的开发，这是一个大规模、多模态的模型，可以接受图像和文本输入，并生成文本输出。
·2024-02-20 18:30

多模态，1000K上下文！附Waitlist链接！

大家好，我是木易，一个持续关注AI领域的互联网技术产品经理，国内Top2本科，美国Top10CS研究生，MBA。我坚信AI是普通人变强的“外挂”，所以创建了“AI信息Gap”这个公众号，专注于分享AI全维度知识，包括但不限于AI科普，AI工具测评，AI效率提升，AI行业洞察。关注我，AI之路不迷路，2024谷歌一起变强。一些结论谷歌今天发布了Gemini1.5ProGemini1.5Pro的核心功
木易AI信息差·2024-02-20 13:02

谷歌Gemini1.5火速上线：MoE架构，100万上下文

它是一种中型多模态模型，针对多种任务的扩展进行了优化，其性能水平与谷歌迄今为止最大的模型1.0Ultra类
人工智能与算法学习·2024-02-20 13:02

Gemini技术报告解读：从Google多模态大模型看后续大模型应该具备哪些能力

NLP论文投稿、LLM交流、论文直播群前段时间Google推出Gemini多模态大模型，展示了不凡的对话能力和多模态能力，其表现究竟如何呢？
zenRRan·2024-02-20 13:00

Google：Gemini 1.5跨数百万上下文令牌解锁多模态理解技术报告（中文）

1、概述在本报告中，我们展示了Gemini系列的最新模型Gemini1.5Pro，这是一个计算效率极高的多模态专家混合模型，能够从数百万个上下文标记中回忆和推理细粒度信息，包括多个长文档和数小时的视频和音频
缘起性空、·2024-02-20 12:26

Python+Flask低代码数据融合引擎工具

我用了2年多时间开发了一个低代码数据融合引擎工具1.整体界面2.主要功能1)通过excel文件生成mysql数据表结构及数据保存说明:功能细节包括(excel文件上传,文件内容预览,建表导入数据),难点在于对
阿桂天山·2024-02-20 12:30

融云观察：给 ChatGPT 加上声音和脸庞，AI 社交的多模态试验

（点击获取行业首款《社交泛娱乐出海作战地图》）如果将短剧的爆火简单粗暴地归因为剧情上头、狗血反转和精妙卡点，那GenAI世界这一年来可以说是一部短剧LiveShow。关注【融云全球互联网通信云】了解更多这厢OpenAI宫斗内幕还没起底完，那头Google就因为Gemini的Demo视频造假喜提热搜。不过我们还是能从混杂的剧情中摘取出主线，那就是后发力量所展示出的大模型演进方向——从一开始便进行多模
·2024-02-20 11:25

青少年和成人错误监测神经源的多模态研究

本研究使用多模态方法探究了与行为监测相关神经反应的年龄差异。该方法将fMRI和ERPs的源定位相结合，对12岁、15岁和成人参与者进行了研究。
茗创科技·2024-02-20 07:05

万字盘点 Android 领域在 2023 年的重要技术：AI, 14, Compose, 鸿蒙...

作为在AI领域耕耘多年的巨头，Google自然不会坐视不管，于2023年底之际发布了超越GPT-4的Gemini系列模型，其在多模态领域的表现令无数人震撼。
TechMerger·2024-02-20 05:28

《深入浅出OCR》第八章：文档处理多模态预训练

✨专栏介绍：经过几个月的精心筹备，本作者推出全新系列《深入浅出OCR》专栏，对标最全OCR教程，具体章节如导图所示，将分别从OCR技术发展、方向、概念、算法、论文、数据集等各种角度展开详细介绍。‍面向对象：本篇前言知识主要介绍深度学习知识，全面总结知知识点，方便小白或AI爱好者学习基础知识。友情提醒：本文内容可能未能含概深度学习所有知识点，其他内容可以访问本人主页其他文章或个人博客，同时因本人水平
GoAI·2024-02-20 05:53

《深入浅出多模态》：智能文档处理多模态大模型总结

✨专栏介绍：本作者推出全新系列《深入浅出多模态》专栏，具体章节如导图所示（导图后续更新），将分别从各个多模态模型的概念、经典模型、创新点、论文综述、发展方向、数据集等各种角度展开详细介绍，欢迎大家关注。
GoAI·2024-02-20 05:22

OpenAI突然发布首款文生视频模型——Sora；谷歌发布Gemini 1.5，迈向多模态大模型新时代

AI新闻OpenAI突然发布首款文生视频模型——Sora摘要：OpenAI发布了首个AI视频模型Sora，可以根据文字指令生成神级效果的长视频，引发了广泛关注和震惊。Sora模型通过深入理解语言和图像，能够创造出逼真且充满想象力的视频场景，展现了革命性的意义。Sora模型具备多镜头一致性，理解世界物理规律，以及对电影拍摄语法的自发理解，为实现通用人工智能（AGI）奠定了基础，可能重塑视频行业。谷歌
go2coding·2024-02-20 01:53

多模态推荐系统综述

此外，多模态特征也有助于缓解RS中的数据稀疏问题。因此，多模态推荐系统(multimodalrecommendationsSystem,MRS)近年来受到了学术界和业界的广泛关注。
凤凰AI·2024-02-20 00:27

（2024，CtrlColor，多模态提示，局部颜色操作）控制颜色：基于多模态扩散的交互式图像着色

ControlColor:MultimodalDiffusion-basedInteractiveImageColorization公和众和号：EDPJ（进Q交流群：922230617或加VX：CV_EDPJ进V交流群）目录0.摘要3.方法3.1.预备工作：LDM和ControlNet3.2.ControlColor框架3.2.1无条件上色3.2.2有条件上色3.2.3处理颜色溢出和不正确颜色4.
EDPJ·2024-02-19 22:37

每月AI科研动向（2024年1月）

目前的分类包括：LLM研究、Agent、多模态（图像、音视频、其他）、特定领域应用、具身智能。内容较多所以每个相对简略，后续会对必要的专题做更进一步的研究。
陌北有棵树·2024-02-19 16:17

营销系统黑名单优化：位图的应用解析 | 京东云技术团队

营销系统一般是通过大数据分析建模，在CDP（客户数据平台，以客户为核心，围绕数据融合、人群圈选、用户洞察等提供产品能力）创建营销目标客户群体，黑名单同样也是通过CDP维护。
·2024-02-19 16:59
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他