大模型训练

Apache Iceberg数据湖技术在海量实时数据处理、实时特征工程和模型训练的应用技术方案和具体实施步骤及代码

ApacheIceberg在处理海量实时数据、支持实时特征工程和模型训练方面的强大能力。Iceberg支持实时特征工程和模型训练，特别适用于需要处理海量实时数据的机器学习工作流。

weixin_30777913·2025-02-03 15:07

大模型低显存推理优化-Offload技术

近两年大模型火出天际；同时，也诞生了大量针对大模型的优化技术。本系列将针对一些常见大模型优化技术进行讲解。

AI大模型-大飞·2025-02-03 15:04

DeepSeek横空出世，AI格局或将改写？

引言这几天，国产AI大模型DeepSeekR1，一飞冲天，在全球AI圈持续引爆热度，DeepSeekR1已经是世界上最先进的AI模型之一，可与OpenAI的新o1和Meta的LlamaAI模型相媲美。

倔强的石头_·2025-02-03 15:59

ip地址简单求二进制转十进制，十进制转二进制

按照2的n次方按从大到小排列，从左到右排列8个数字2^72^62^52^42^32^22^12^01286432168421十进制转二进制例:将192.168.230.131地址转换为二进制从左到右查找相加等于

2301_79262155·2025-02-03 15:29

hive分区和分桶详解

Hive中的分区就是分目录，把一个大的数据集根据业务需要分割成小的数据集。在查询时通过WHERE子句中的表达式选择查询所需要的指定的分区，这样的查询效率会提高很多。

CodeShelby·2025-02-03 14:56

力扣 215. 数组中的第K个最大元素

leetcode.cn/problems/kth-largest-element-in-an-array题目返回数组nums中的第k大数思路桶排，把数据都调整为正数，放置到对应的桶位置，最后遍历桶获得第K大的数代码

pursuit_csdn·2025-02-03 13:50

React 和 Vue _使用区别

二、框架结构1.创建应用2.框架结构三、使用区别1.单页面组成2.样式3.显示响应式数据4.响应式html标签属性5.控制元素显隐6.条件渲染7.渲染列表react和vue是目前前端比较流行的两大框架，

m0_74823490·2025-02-03 13:49

蓝桥杯python基础算法（2-2）——基础算法（C）——递归

开始时，这n个圆盘由大到小依次套在a柱上，如图所示。要求把a柱上n个圆盘按下述规则移到c柱上：(1)一次只能移一个圆盘；(2)圆盘只能在三个柱上存放；(3)在移动过程中

X _X·2025-02-03 13:48

深度学习：基于MindNLP的RAG应用开发

RAG（Retrieval-AugmentedGeneration，检索增强生成）是一种结合检索（Retrieval）和生成（Generation）的技术，旨在提升大语言模型（LLM）生成内容的准确性、

Landy_Jay·2025-02-03 13:47

OpenAI紧急加播：ChatGPT上新深度搜索，持续思考30分钟输出1万字，刷榜“人类最后的考试”

ChatGPT上新“DeepResearch”，把推理大模型的思考能力用于联网搜索。据介绍，DeepResearch功能可在数十分钟完成人类专家需要几个小时的复杂研究任务。

·2025-02-03 12:30

Mixture of Experts（MoE）学习笔记

不过在这之后开源社区并没有对MoE架构进行很多的探索，更多的工作还是聚焦在预训练新的大模型，在Llama2或其他模型上做Fine-tune，以及扩展大模型的ContextLength。12月8号

南七小僧·2025-02-03 12:44

学习第七十七行

+TAB自动生成骨架，有src路径，titie提示文本，alt替换文本（图片不显示，显示的文字），width宽设置一个即可，（height），border边框，同时div和span是个块，前者大后者小，

不是只有你能在乱世中成为大家的救世主·2025-02-03 12:40

大型语言模型（LLM）压缩技术：如何让庞然大物更轻巧？

大型语言模型（LLM）压缩技术：如何让庞然大物更轻巧？随着大模型在各个领域的广泛应用，我们面临的一个核心问题是——如何让这些庞大的模型在硬件资源有限的环境下运行？

空间机器人·2025-02-03 12:09

MFC CScrollView 对大视图出现滚动条回滚问题的解决

CScrollView类中，若视图尺寸很大。如100000*100000；voidCLOView::OnInitialUpdate(){CScrollView::OnInitialUpdate()；SetScrollSizes(MM_TEXT,CSize(100000,100000));}那么当拖动滚动框距离稍大一点时，就会出现回滚，即滚动框又回到0位置。原因：CScrollView使用的滚动条是

xiaji2007·2025-02-03 11:32

45页PPT解读集团企业数据治理总体解决方案

面对数据存储分散、算力消耗大、数据质量参差不齐、指标口径不统一等挑战，数据治理显得尤为重要。

智慧化智能化数字化方案·2025-02-03 11:26

算法初学者（单调栈）

单调栈：栈中的元素是严格单调递增或者递减的，也就是说：从栈底到栈顶，元素的值逐渐增大或者减小，多用于求解元素的左右大小边界问题：1：向左找第一个比自身大的数2：向左找第一个比自身小的数。

KuaCpp·2025-02-03 10:54

刀客doc：快手的商业化架构为什么又调了？

根据自媒体《申妈的朋友圈》报道，快手取消了短视频、商家、泛健康、游戏、传媒资讯、品牌、金融、教育等多个中心；成立大服饰、大快消、健康食饮、内容消费、金教资讯业务中心。大服饰业务中心负责服装配

刀客Doc·2025-02-03 10:24

buuctf [极客大挑战 2019]FinalSQL

进入题目，又是这个作者，试试万能密码经过实验，双写什么的都没用。作者说的神秘代码，点进去发现url变了发现并没有什么卵用……正当我没有头绪的时候，我突然看到一句话，审题真的很重要：盲注！这里附上大佬的脚本：importrequestsimporttimeurl="http://def9937b-1746-4f41-98c7-a2b55b95664a.node4.buuoj.cn:81/search

cng_Capricornus·2025-02-03 10:23

[BUUCTF][极客大挑战 2019]PHP

备份根据提示应该就是网站备份文件能被爆破出来随手写了个爆破脚本,基于御剑字典,只供学习使用importrandomimportrequestsimporttimefrommultiprocessingimportPooldefmultiScan(target,file_name,pool_num,delay):local_pool=Pool(pool_num)dirs=get_path_dict(

朋克归零膏·2025-02-03 10:20

BUUCTF [极客大挑战 2019]Secret File 1

还差一步这道题就出来了在想了在想了别骂了别骂了打开题目后一片黑这个时候根据经验有事没事先ctrl+a安排一下果然有问题在最下方有一个连接打开链接出现一个按钮按他就完事了并没有出来什么用burp拦截后发现提示：secr3t.php打开后提示flag在flag.php中并且给了一串php其中stristr函数不用绕过直接干就完了然后就是啊哈！你找到我了！可是你看不到我QAQ~~~我就在这里这边最后请教

THEMIScale·2025-02-03 10:48

网络安全工具大合集

导语：这里有一份很棒的黑客工具列表可以提供给黑客，渗透测试人员，安全研究人员。它的目标是收集，分类，让你容易找到想要的工具，创建一个工具集，你可以一键检查和更新。这里有一份很棒的黑客工具列表可以提供给黑客，渗透测试人员，安全研究人员。它的目标是收集，分类，让你容易找到想要的工具，创建一个工具集，你可以一键检查和更新。你可以通过以下命令检查所有的工具：gitclone--recursivehttps

黑客Jack·2025-02-03 09:17

网络安全最新网络安全工具大合集_remnux部署

Rekall–Google开发的内存分析框架.Volatility–提取易失性内存（RAM）中的样本.移动AndroidForensicToolkit–允许你从安卓手机中提取短信记录，通话记录，照片，浏览历史，以及密码。网络取证Dshell–一个网络取证分析框架.Passivedns–一个网络嗅探工具能够记录所有的DNS响应和被动DNS其他HxD–十六进制编辑工具,能够修改任意大小的硬盘二进制数据

2301_79985178·2025-02-03 09:17

Spring---Spring的两大特点

Spring的两大特点Spring框架的两大核心特点是依赖注入(DependencyInjection,DI)和面向切面编程(AspectOrientedProgramming,AOP)。

淡写青春209·2025-02-03 09:46

纯C代码模拟stm32 的结构体赋值，快速掌握stm32开发

stm32系统的C语法一开始难度大，采用C语言模拟，能快速上手。

真实义·2025-02-03 09:45

运行megatron框架的运行环境

megatron是什么，为什么要用主要是在实现Yuan1.0大规模模型时，他们引用了Nvidia开发的megatron这个框架，因为这个框架就是为了分布式多卡环境而设计的，而要上大参数量的模型时要获得比较可观的速度就避免不了要上这个框架

David's Code·2025-02-03 08:39

Webpack 模块加载、动态引入机制源码解读

其实我对这两大框架也没有认真钻研过它们的细节，也就是工作上用它们写一些简单业务，或偶尔看看相关的博客文章，但还是有一些浅显的认识的，写下来记录一下。Vue和React都是用于构建UI界面的流行框架。

AIGC小陈·2025-02-03 07:02

FastDFS实用笔记（Docker 搭建环境 + 整合 SpringBoot）

解决了大容量存储和负载均衡的问题，特别适合中小文件（4KB>文件路径为空…”);return“文件路径不能为空”;}try{StorePathstorePath=StorePath.parseFromUrl

字节全栈_kYu·2025-02-03 07:29

为什么要用tauri开发跨平台桌面

2、体积小：electron打包非常大，特别是在macos中打包，大得可怕。我在macos中打包了一个electron项目，占600MB，改成tauri，只用了16MB。

扎量丙不要犟·2025-02-03 06:25

可视化大屏

高效性：一次性处理大

梦屿千寻！！·2025-02-03 06:53

101算法javaScript描述【3】

通常情况下，不能出现超过连续三个相同的罗马数字并且罗马数字中小的数字在大的数字的右边。但也存在特例，例如4不写做IIII，而是IV。数字1在数字5的左边，所表示的数等于大数5减小数1得到的数值4。

2401_89317507·2025-02-03 06:22

Python机器学习实战：人脸识别技术的实现和挑战

Python机器学习实战：人脸识别技术的实现和挑战作者：禅与计算机程序设计艺术/ZenandtheArtofComputerProgramming关键词：人脸识别技术,模型训练,多人识别,动态人脸检测,

AI天才研究院·2025-02-03 06:19

哪些大模型使用了MOE？

在人工智能快速发展的今天，大语言模型（LLM）的规模越来越大，参数量动辄上千亿甚至万亿。然而，更大的模型往往意味着更高的计算成本和更多的资源消耗。

明哲AI·2025-02-03 06:18

day36|（dp)leetcode 1049. 最后一块石头的重量 II , 494. 目标和 , 474.一和零

假设石头的重量分别为x和y，且x&stones){vectordp(1501,0);intsum=0;for(inti=0;i=stones[i];j--)//从大到小遍历背包容量，防止重复{dp[j]

kcwqxx·2025-02-03 05:46

愿景：做机器视觉行业的颠覆者

我给自己创业，立一个大的愿景：做机器视觉行业的颠覆者。两场战斗：无监督-大模型上半场，无监督。2025-2030，共五年。用无监督算法，颠覆现有缺陷检测方法，争取在2-3个场景落地。

gaoenyang760525·2025-02-03 05:45

【书生·浦语大模型实战营】学习笔记（三）：“茴香豆” 搭建你的RAG 智能助理

GoAI·2025-02-03 05:10

『大模型笔记』视觉语言模型解释

视觉语言模型解释文章目录一.视觉语言模型解析1.什么是视觉语言模型？2.开源视觉语言模型概览3.如何找到合适的视觉语言模型MMMUMMBench4.技术细节5.使用变压器(transformers)运用视觉语言模型6.使用TRL微调视觉语言模型二.参考文章一.视觉语言模型解析视觉语言模型是一类能够同时从图像和文本中学习，以处理从视觉问题回答到图像描述等多种任务的模型。本文将深入探讨视觉语言模型的核

AI大模型前沿研究·2025-02-03 05:40

读书笔记-《乡下人的悲歌》

01Vance的成长经历Vance成长时所处的大背景是：中西部工业地区经济下滑，制造业岗位流向海外，没

萝卜青今天也要开心·2025-02-03 04:04

新春特辑：人工智能专题大复盘

播洒一年的阳光，收获一路的辉煌;挥洒一年的汗水，绽放一路的明媚;付出一年的辛苦，装点一路的幸福;感谢一年的努力，创造一路的奇迹。新的一年，愿与你再扬帆济海，创造美好精彩!人工智能：人工智能是计算机科学的一个分支，它企图了解智能的实质，并生产出一种新的能以人类智能相似的方式做出反应的智能机器，该领域的研究包括机器人、语言识别、图像识别、自然语言处理和专家系统等。人工智能从诞生以来，理论和技术日益成熟

互联互通社区·2025-02-03 04:33

详解大模型微调数据集构建方法(持续更新)

本文详细介绍了大模型微调数据集构建方法，希望能对学习大模型的同学们有所帮助。文章目录

herosunly·2025-02-03 04:03

读书笔记-《Redis设计与实现》（一）数据结构与对象（下）

编码方式uint32_tencoding;//元素数量uint32_tlength;//数组int8_tcontents[];}intset;可以看到，contents就是存储元素的地方，各个元素按从小到大

萝卜青今天也要开心·2025-02-03 03:31

二叉搜索树中的众数(力扣501)

根据二叉树的特性，我们使用中序遍历，确保是从小到大遍历各个节点。为了方便计数，我们使用双指针法，一旦发现当前且节点和前一个节点相同(指的是按照中序遍历的顺序的前一个)，则累加该数字的次数。

qy发大财·2025-02-03 03:00

Setgsolve使用方法

文件格式可以看见图片的具体信息DataExtract数据提取左边：RGBA的颜色通道1.Alpha是透明度，用来定义透明，不透明，半透明其中0代表透明，7代表不透明2.RGB红蓝绿，其值代表亮度，数字大代表亮度高

Aresy596·2025-02-03 03:28

验证二叉搜索树(力扣98)

根据二叉搜索树的特性，我们使用中序遍历，保证节点按从小到大的顺序遍历。既然要验证，就是看在中序遍历的条件下，各个节点的大小关系是否符合二叉搜索树的特性。

qy发大财·2025-02-03 03:28

VARGPT：将视觉理解与生成统一在一个模型中，北大推出支持混合模态输入与输出的多模态统一模型

❤️如果你也关注AI的发展现状，且对AI应用开发非常感兴趣，我会每日分享大模型与AI领域的最新开源项目和应用，提供运行实例和实用教程，帮助你快速上手AI技术，欢迎关注我哦！

蚝油菜花·2025-02-03 02:18

kimi o1和deepseek o1对比，非常直观！

刘俊是丁师兄大模型2025年01月25日21:34湖北两家凑巧同一天放出了解题推理模型，简单对比着看了下实现方案，o1类模型实现并没有和大家早期推测的那样用上MCTS，PRM这些方法，个人感觉也是太复杂的方法

AI生成曾小健·2025-02-03 02:46

期货市场程序化交易发展迅猛，未来真能取代主观交易吗

这种交易方式能够快速、准确地处理大

股票程序化交易接口·2025-02-03 01:42

换硬币,人民币等多种思路方法(以谁作为输出结果的排列依据就以谁作为外层for)

输出格式:要求按5分、2分和1分硬币的数量依次从大到小的顺序，输出各种换法。

Q1684964515·2025-02-03 01:10

Seata：分布式事务解决方案

二、Seata的三大角色tc(transactioncoordinator)-事务协调者：维护全局和分支事务的状态，驱动全局事务提交或回滚。

代码星辰阁·2025-02-03 01:39

Python 基础语法一维列表

六大基本数据类型数字型字符串str列表list元组tuple字典dict集合set列表由元素（element）组成，而元素由元素的值（value）和元素的索引（in

HASHMOTO·2025-02-03 01:06

数模测评：doubao1.5＞deepseek-v3＞gpt-o1

本次测试了当前评价最高的三款大模型doubao1.5、gpt-o1、deepseek-v3(r1崩溃)，都是采用无提示词的硬核提问方式，测试视频如下。

您好啊数模君·2025-02-03 00:29

推荐频道