悟乙己
悟乙己

LLM大模型中文开源数据集集锦（三）

文章目录

  • 1 ChatGLM-Med: 基于中文医学知识的ChatGLM模型微调
    • 1.1 数据集
    • 1.2 ChatGLM+P-tuning V2微调
    • 1.3 Llama + Alpaca的Lora微调版本
  • 2 LawGPT_zh：中文法律大模型（獬豸）
    • 2.1 数据集
      • 2.1.1 利用ChatGPT清洗CrimeKgAssitant数据集得到52k单轮问答：
      • 2.1.2 带有法律依据的情景问答92k:
      • 2.1.3 法律知识问答
    • 2.2 模型
  • 3 ChatGLM+哈利波特剧本：ChatHarryPotter
    • 3.1 数据构造过程
    • 3.2 LLM微调模型的一些通病
  • 4 Lawyer LLaMA
    • 4.1 数据集
      • 4.1.1 通用指令微调数据
      • 4.1.2 法律指令微调数据
      • 4.1.3 法律咨询微调数据
    • 4.2 LLaMA 7B微调模型
  • 5 法律：Legal-ChatGLM
    • 5.1 数据集
      • 5.1.1 基于在线法律知识问答构造的指令集
      • 5.1.2 基于已有司法任务数据集构建的指令集合(未公开)
    • 5.2 模型
  • 6 医疗：MedQA-ChatGLM
    • 6.1 数据集
      • 6.1.1 中文医学问答数据集
      • 6.1.2 人设指令
      • 6.1.3 华佗、本草数据集
      • 6.1.4 CMD整合版本数据集：wangrongsheng/CMD-merged
      • 6.1.5 MedDialog-1.1M
    • 6.2 模型
  • 7 三国演义:ChatGLM微调
  • 8 MedicalGPT-zh：中文医疗对话语言模型
    • 8.1 数据集
      • 8.1.1 情景对话
      • 8.1.2 知识问答
    • 8.2 模型效果
  • 9 alpaca_chinese_dataset 翻译数据集
  • 10 BELLE：1.5M中文数据集
    • 10.1 数据集
      • 10.1.1 175个种子任务
      • 10.1.2 参考Stanford Alpaca 生成的中文数据集1M + 0.5M
      • 10.1.3 10M中文数据集
  • 11 Firefly(流萤): 中文对话式大语言模型
  • 12 中文对话模型 Linly-ChatFlow
    • 12.1 预训练语料
    • 12.2 指令精调数据
  • 13 pCLUE
  • 14 中文科学文献数据集（CSL）
  • 9 其他项目

头两篇在写【悟乙己：LangChain:通过LLM实现QA问答中的一些细节笔记（二）】和【悟乙己：LangChain:万能的非结构化文档载入详解（一）】
然后笔者自己也测试了一把ChatGLM的P-Tuning V2在【悟乙己：ChatGLM的P-Tuning v2微调笔记】感觉
LangChain+ChatGLM这一套知识库的打法有几种：

  • LLM基础模型 + 知识库（向量化搜索）
  • LLM微调模型 + 知识库（向量化搜索）

其中，笔者自己测试下来，如果你的数据集符合微调的标准，最好就是走第二种路线，效果会好些，这里我们从几个开源项目入手，来了解一下：

  • 数据准备的经过
  • 训练效果与开源模型

你可能感兴趣的:(付费-智能写作专栏,LLM大模型,开源,大模型,LLM,GPT,微调)

  • vSphere开发指南1——vSphere Automation API H_00c8
    前言VMwarevCenterServer是VMware虚拟化管理平台，广泛的应用于企业私有云内网中。站在渗透测试工具开发的角度，我们需要通过命令行实现vCenterServer同虚拟机的交互。本系列文章将要比较多种不同的API，介绍实现细节，开源代码，实现以下功能：·读取虚拟机的配置·查看虚拟机文件·删除虚拟机文件·向虚拟机上传文件·从虚拟机下载文件·在虚拟机中执行命令简介本文将要介绍以下内容：
  • 你说为什么十个知识付费运营九个迷茫八个跳槽，还有一大堆失业的 愈神堂
    你知道吗，特别有意思，近期咨询过【面试模拟】和【职业规划】的运营同学里，80%居然都是因为做的是知识付费运营而变得焦虑，其中一大半人是找工作困难，这里强调困难是如果不想继续在做知识付费运营，转到其他类别总是碰壁。这个锅该不该让知识付费来背呢？从运营工作的本质来看，不论在哪个行业哪个领域哪个类别，能带来的目的应该都是相同的。即我很早就提到过在商业运营的目标中，获客与获利是运营人主要能带来的量化价值。
  • Word 编写的宏不显示/找不到宏问题解决 拂过世俗的风 word经验分享笔记学习方法
    问题原因分析及解决办法总结问题Word显示找不到宏或宏被禁用。使用AI生成的VBA代码在保存后无法再宏列表中找到。原因分析及解决办法由于安全问题，宏被禁用了。如果你信任宏的来源，可以在Word-文件-选项-信任中心-信任中心设置中，选择“启用所有宏”以及勾选“信任对VBA工程对象模型的访问”并保存。VBA代码有问题。如果VBA代码有问题，比如语法错误（如拼写错误、漏掉ENDSub等）、没有正确保存
  • Secs/Gem第十二讲(基于secs4net项目的ChatGpt介绍)
    好，那我们进入最关键的一讲——第十二讲：完整事件通知流程全景图——CEID触发到主机接收的全过程关键词：CEID事件上报、S6F11报文、事件触发流程、数据驱动机制、ReportDispatch、主机解析流程本讲目标你将彻底理解：设备是如何触发一个事件上报的？报文（S6F11）结构是怎么设计的？主机是怎么解析报文、提取变量、派发处理？报文中包含的信息是怎么匹配你之前定义的CEID/RPTID/VI
  • 关于 SECS4NET 专栏的几点说明(内附资源) 好学近乎知o secs/gemsecs4net
    关于SECS4NET专栏的几点说明根据很多小伙伴在评论区的留言，我总结了几个反馈点：✅常见问题反馈部分章节讲解存在个别错误关于资源来源、项目版本的问题更新速度偏慢，期待能加快节奏简单说明一下：我是一个没有感情的复制粘贴机器，发布这些作品最初只是为了自己闲来学习、顺便看着玩。起初我以为这种纯纯的复制粘贴内容，甚至连开头和结尾都带着ChatGPT的沟通痕迹，肯定不会有人感兴趣。但没想到，发布之后阅读量
  • Secs/Gem第二讲 (基于secs4net项目的ChatGpt介绍)
    好的，我们正式进入：第二讲：深入SECS4NET项目结构——主机程序是怎么搭起来的？关键词：项目结构、类图、通信类、事件处理、连接生命周期、异步机制本讲目的我们从源码入手，一步步搞懂：SECS4NET主机（Host）是如何设计通信逻辑的有哪些关键类，类之间的关系是什么通信的生命周期怎么管理怎么实现“接收消息”和“主动发送”的功能如何集成到你自己的EAP或测试程序中你将不再只是“调Sample”，而
  • Secs/Gem第一讲(基于secs4net项目的ChatGpt介绍) 好学近乎知o c#secs/gem
    后续内容为基于github上secs4net项目源码的ChatGpt介绍以该项目为主，从零开始介绍讲解secs/gem，更多的以面试口吻讲述形式。主要为个人学习，提升使用第一讲：SECS/GEM协议是个什么东西？第1段：SECS/GEM是谁？它在哪些场合出现？️口述稿（你面试时可以这样说）：SECS/GEM协议是半导体行业的通信标准，它解决的是“设备”和“主机系统”之间如何说话、怎么互相理解命令和
  • AI人工智能 Agent：金融投资中智能体的应用 AI天才研究院 AI大模型企业级应用开发实战AI大模型应用入门实战与进阶AI人工智能与大数据计算科学神经计算深度学习神经网络大数据人工智能大型语言模型AIAGILLMJavaPython架构设计AgentRPA
    AI人工智能Agent：金融投资中智能体的应用1.背景介绍在金融投资领域，人工智能（AI）技术的应用已经成为一种趋势。随着数据量的爆炸性增长和计算能力的提升，AI技术在金融市场中的应用变得越来越广泛和深入。智能体（Agent）作为AI技术的重要组成部分，能够在金融投资中发挥重要作用。智能体可以通过学习和适应市场环境，自动执行交易策略，优化投资组合，甚至预测市场趋势。2.核心概念与联系2.1智能体（
  • 开源流程引擎Camunda简介 ° 安如少年初如梦662 Java学习记录java后端
    目录简单介绍主要组件与名词介绍常见名词解释核心组件介绍一些思考与前端的关系前端逻辑的简化后端接口的专注流程引擎的控制作用数据和状态的管理监控和管理的集中化参考资料简单介绍Camunda的本质是可以独立运行的一套流程引擎，流程引擎会根据预先设定（类似流程图内的流程图）好的规则和逻辑进行流程执行。主要组件与名词介绍常见名词解释BPMN：即业务流程模型和标记，是一种业界标准的流程建模语言。Camunda
  • 新年逼自己一把，学会使用DeepSeek R1：从「翻车」到「封神」实战 无数碎片寻妳 杂谈人工智能
    DeepSeekR1的发布就像是一颗闪亮的星星，瞬间照亮了整个AI领域。它不仅颠覆了我们对传统指令模型的认知，更带来了全新的推理能力，让我们在日常工作、学习中都能高效利用AI。然而，要想完全发挥R1的潜力，你必须掌握一些使用技巧，避免那些让AI“翻车”的错误。接下来，我们将通过一些经典案例和实用技巧，帮助你从入门到精通，让DeepSeekR1成为你工作中的得力助手。1.DeepSeekR1模型的独
  • 普通人这样赚钱，才能一年顶十年 作家格格
    普通人想靠挣工资发家致富，是一种妄念，要放弃。你想赚更多钱、甚至实现财富自由，需要正要的人生战略，才能一年顶十年。001找到你赚钱的动力赚钱是极有意义的事，不要懒于赚钱。比如，我就是想通过努力，去赚更多的钱，好进入更优秀的圈子，去长见识、连接更牛的人，从而实现个人更好的发展。002做离钱最近的事要卖对的产品，让产品贴近刚需。尽可能让自己离钱近，比如：帮别人做增长。同时，要和对的人在一起，即和有付费
  • 选择了一件事情，就要把它做好 辰诺一启
    加入了一个日更群，把写作当成了每一天的头等大事。因此，选择早起在家人还没起床的时候，静下心来阅读和写文。谁料今天早上孩子醒的早，打乱了我的计划。一直拖到中午都还没有完成。趁着孩子午睡，再次起来续文。可是思绪已被打断，再重拾起来需要花更长的时间，结果还没有拼回原来的头绪呢，孩子又起来了。宝妈可真是伤不起。但是不管怎么说，决定做一件事情就得克服万难，把它做好。以后还是得向早起要时间，那是我比别人多赚一
  • 中原焦点团队焦点初级32期孙晓娟2021年11月29日坚持分享第️12天 85b9745cfed8
    周一恐惧证还是没能消失，周未的作业完不成，去了也会被罚到教室外面补作业，这是孩子的理由，今日他没有照常上学。由于老公昨天休息的早，我没有来及和他沟通。早上，老公隐忍很长时间的怒气一下子爆发了，老公说周未有那么多时间，可他写作业了吗？你一次次给他机会，抱着希望，可结果又如何呢。老公的意思我明白，他认为我不应该太信任孩子，没有必要再为这样的孩子付出太多。就在我们不愉快的争执中，孩子起床了，老公起身离开
  • 对话谷歌前 CEO Eric Schmidt：数字超智能将在十年内到来，AI 将创造更多更高薪的工作 AI科技大本营 人工智能
    责编|王启隆出品|CSDN（ID：CSDNnews）投稿或寻求报道|[email protected]科技巨擘、谷歌前CEOEricSchmidt最近做客PeterDiamandis的Moonshots播客，与主持人PeterDiamandis及DaveLondon展开了一场关于人工智能未来的深度对话。全世界都在为AI的飞速发展感到兴奋又焦虑时，这位曾经执掌谷歌帝国长达十年、亲眼见证并推动了这场技术
  • AI周报：技术面试卷出新高度，Agent落地开启“工具觉醒”时代 哪小吒圈子 人工智能语言模型
    一句话暴论：当面试官要求手搓FP16精度时，真正的考题是“你能否在硅基文明觉醒前跟上进化速度”。一、面试地狱难度实录（开发者生存指南）百度二面手搓FP16精度：考的不是浮点数，而是对硬件底层的敬畏（原文）腾讯夺命11连问：混元大模型面试暴露行业真相——懂原理已不够，得会调参、训推、修故障的“全栈炼丹师”（解析)NVIDIA四轮拷打实录：GPU厂面试竟考Attention优化！LightingAtt
  • JAVA API (三)：从基础爬虫构建到带条件数据提取 —— 详解 URL、正则与爬取策略 钮祜禄.爱因斯晨 JAVA学习笔记java爬虫开发语言
    个人主页-爱因斯晨文章专栏-Java学习相关文章：API(一)相关文章：API（二）持续努力中，感谢支持一、爬虫基础（一）爬虫的基本概念定义：爬虫是按照一定规则自动抓取网络信息的程序，在Java环境下，可借助URL、HttpURLConnection等API来实现。应用场景：广泛应用于数据采集，如电商平台的价格监控、各类新闻的聚合；还可用于信息分析，如舆情监测等。（二）Java实现简单爬虫的步骤建
  • 全球企业生成式AI应用图谱：601个案例揭示11行业×6类智能体实践，全网最详细！
    写在前面：本文为谷歌发布的《601real-worldgenAIusecasesfromtheworld’sleadingorganizations》原文链接为：https://cloud.google.com/transform/101-real-world-generative-ai-use-cases-from-industry-leaders?hl=en以下案例按照“汽车与物流、商业与专用
  • 解决pip指令超时问题 好学近乎知o pippython
    用pip指令，在安装Django3.2时报错，询问ChatGpt后得到的解决方案pip下载超时——是当前网络连接到PyPI官方源太慢或不稳定，甚至可能连不上了，而pip默认的超时时间又太短，就导致了中途失败：ReadTimeoutError:HTTPSConnectionPool(host='files.pythonhosted.org',port=443):Readtimedout.解决方案：换
  • 可惜你 不说实话 不经诱惑 不懂珍惜 不值一提3 一只神奇的做设计小姐姐
    7.我想对你说：你可以去忙你的事情你可以随时随去做你喜欢的事情我决不反对但你做事儿之前要跟我说一声你不说我就很容易胡思乱想会费尽心思的去想你在做什么但你要是告诉我了我就会踏踏实实做自己的事情还有就是我很喜欢你发一大堆信息和我讲讲今天所发生的事即使是鸡毛蒜皮的小事我也想听——网易云热评《地铁等待》8.꯭人꯭这꯭一꯭生꯭大꯭约꯭会꯭说꯭8꯭.꯭8꯭万꯭个꯭谎꯭꯭最꯭容꯭易꯭脱꯭口꯭而꯭出꯭的꯭就꯭是꯭
  • Docker原理 Namespace
    Docker是一个开源的容器化平台，使用了多种Linux内核特性来实现隔离和资源管理。其中，Namespace（命名空间）是Docker实现进程隔离的核心技术之一。Namespace提供了对操作系统资源的视图隔离，使得容器内的进程以为它们独占了系统资源。本文将详细介绍Docker的Namespace机制。一、Namespace概述Namespace是Linux内核的一项关键技术，用于隔离不同进程的
  • 真相大曝光：卧虎藏隆应天书府隆国强免费荐股就是骗局！投资亏损无法出金!被骗不要慌 墨守成法
    在风起云涌的金融市场中，股票犹如一把双刃剑，既能创造财富神话，也可能让人跌入深渊。对于那些怀揣梦想的投资者而言，股票不仅是他们追求财富的舞台，更是寄托了无尽希望的载体。然而，现实往往残酷，股市的变幻莫测让许多人迷失了方向，甚至不幸成为了一些不法分子精心设计的骗局中的牺牲品。卧虎藏隆应天书府隆国强免费讲股博取信任后带股民参加慈善投票大赛套路曝光！若不幸被骗发现不能提现赶紧与我们联系正道顾问：【文章末
  • 格灵深瞳视觉算法面试30问全景精解 机 ＿ 长 算法面试职场和发展
    格灵深瞳视觉算法面试30问全景精解——AI感知×智能安防×场景创新：格灵深瞳视觉算法面试核心考点全览前言格灵深瞳（GREATVISION）作为国内领先的人工智能与计算机视觉企业，专注于智慧安防、智能交通、智慧零售等领域，推动视觉算法在大规模城市级场景的落地。格灵深瞳视觉算法岗位面试不仅考察候选人对视觉基础理论的扎实掌握，更关注其在复杂场景下的创新能力与工程实践。本文精选30个高质量面试问题，涵盖基
  • 商汤科技视觉算法面试30问全景精解
    商汤科技视觉算法面试30问全景精解——AI赋能×智能视觉×产业创新：商汤科技视觉算法面试核心考点全览前言商汤科技（SenseTime）作为全球领先的人工智能平台公司，专注于计算机视觉、深度学习和智慧城市、智能汽车、智能医疗等领域，推动人脸识别、目标检测、视频分析、自动驾驶等前沿技术的产业化落地。商汤视觉算法岗位面试不仅考察候选人对视觉基础理论的扎实掌握，更关注其在大规模安防、自动驾驶、智慧医疗等复
  • 旷视科技视觉算法面试30问全景精解 机 ＿ 长 科技算法面试深度学习YOLO
    旷视科技视觉算法面试30问全景精解——AI赋能×智能安防×视觉创新：旷视科技视觉算法面试核心考点全览前言旷视科技（Megvii）作为全球领先的人工智能公司，专注于计算机视觉、深度学习和智能安防等领域，推动人脸识别、目标检测、视频分析、工业视觉等前沿技术的产业化落地。旷视视觉算法岗位面试不仅考察候选人对视觉基础理论的扎实掌握，更关注其在大规模安防、工业检测、智慧城市等复杂场景下的创新与工程能力。本文
  • 七律·忆游 郭大牛
    图片发自App七律·忆游牧童遥指杏花村，千古诗文独一尊。太白长吟秋浦月，樊川赋酒晚枫痕。青峰紫气辰曦染，仙寺霞云暮色昏。烟雨江南舟棹远，平天湖上最销魂。注：杜牧，字牧之，号樊川居士，唐代杰出诗人。曾任安徽池州刺史（治所秋浦县，今贵池），写下了脍炙人口的"清明"一诗，千古流传。李白晚年居秋浦时，亦写出了著名的"秋浦歌"组诗。池州物华天宝，人杰地灵，且有四大佛山九华山，山川秀美，是旅游胜地。图片发自A
  • Unity 新旧输入系统对比 死也不注释 unity游戏引擎
    Unity新旧输入系统全面对比与选型指南一、核心架构对比特性旧输入系统(InputManager)新输入系统(InputSystem)架构模型基于轮询的单体式架构基于事件的模块化架构配置方式Edit>ProjectSettings>InputInputActionAssets(可视化编辑)核心组件Input静态类InputAction,PlayerInput组件多平台支持需要手动配置不同输入轴设备
  • Spring Boot 和 Netty Hao4K影音 springboot后端javaspring
    SpringBoot和Netty是两个强大的工具，它们各自有不同的用途和优势，但可以结合使用来构建高性能的网络应用。下面将详细介绍SpringBoot和Netty，以及它们如何结合使用。SpringBoot简介SpringBoot是一个开源框架，基于Spring框架，用于简化Spring应用的开发过程。它通过以下方式简化开发：自动配置：根据类路径中的依赖自动配置Spring应用程序。开箱即用的设置
  • mysql 清理磁盘空间 汐猫 mysql数据库
    数据库相关学习资料：https://edu.51cto.com/video/655.htmlMySQL清理磁盘空间：代码示例与流程指南MySQL是一种广泛使用的开源关系数据库管理系统，它在处理大量数据时可能会占用大量的磁盘空间。随着时间的推移，数据库可能会积累许多不再需要的数据，导致磁盘空间不足。本文将介绍如何清理MySQL数据库中的磁盘空间，包括代码示例和流程图。清理磁盘空间的原因性能提升：清理
  • 生活随笔 娟恋YOU
    不知从什么时期流行下一句俗语：“老二心眼多，聪明……”因为我是老大，从小到大没觉得妹妹有多少心眼，只是习惯性的疼她，向着她，即使大娘婶子的常在我耳边嘟囔妹妹心眼多。也不曾觉得妹妹有多少心眼，虽然确实妹妹比我聪明，比我审时度势，但疼她已经成为习惯，一直觉得疼她爱她是我作为姐姐应该做的事！家有俩宝，老大老实，也秉承的疼妹妹，爱妹妹的习惯，在老二还未出生之际便告诉老大，将来要好好疼爱弟弟或妹妹，老大也做
  • 从Java到大模型应用：10天拿下5个Offer，我的转型逆袭之路 sky丶Mamba 感悟java开发语言
    前言：本来准备5月发的，感觉现在的行情没有前几个月那么好了，培训机构出来了很多相关的人，然后就是有很多人也发现了这个方向不错，希望看到这篇文章的你能得到一些启发，个人真实经历。记住AI大模型是锦上添花，之前的那些架构能力，软件开发能力，编程思维才是内核。背景：Java开发的困境作为一名2年经验的Java程序员，我深刻感受到传统Java开发市场的“内卷”和瓶颈。根据2024年行业数据：Java岗位竞
  • 项目中 枚举与注解的结合使用 飞翔的马甲 javaenumannotation
    前言：版本兼容，一直是迭代开发头疼的事，最近新版本加上了支持新题型，如果新创建一份问卷包含了新题型，那旧版本客户端就不支持，如果新创建的问卷不包含新题型，那么新旧客户端都支持。这里面我们通过给问卷类型枚举增加自定义注解的方式完成。顺便巩固下枚举与注解。 一、枚举 1.在创建枚举类的时候，该类已继承java.lang.Enum类，所以自定义枚举类无法继承别的类，但可以实现接口。
  • 【Scala十七】Scala核心十一：下划线_的用法 bit1129 scala
    下划线_在Scala中广泛应用，_的基本含义是作为占位符使用。_在使用时是出问题非常多的地方，本文将不断完善_的使用场景以及所表达的含义   1. 在高阶函数中使用 scala> val list = List(-3,8,7,9) list: List[Int] = List(-3, 8, 7, 9) scala> list.filter(_ > 7) r
  • web缓存基础：术语、http报头和缓存策略 dalan_123 Web
    对于很多人来说，去访问某一个站点，若是该站点能够提供智能化的内容缓存来提高用户体验，那么最终该站点的访问者将络绎不绝。缓存或者对之前的请求临时存储，是http协议实现中最核心的内容分发策略之一。分发路径中的组件均可以缓存内容来加速后续的请求，这是受控于对该内容所声明的缓存策略。接下来将讨web内容缓存策略的基本概念，具体包括如如何选择缓存策略以保证互联网范围内的缓存能够正确处理的您的内容，并谈论下
  • crontab 问题 周凡杨 linuxcrontabunix
      一： 0481-079   Reached   a   symbol   that   is   not   expected.   背景： */5   *   *   *   *  /usr/IBMIHS/rsync.sh 
  • 让tomcat支持2级域名共享session g21121 session
    tomcat默认情况下是不支持2级域名共享session的，所有有些情况下登陆后从主域名跳转到子域名会发生链接session不相同的情况，但是只需修改几处配置就可以了。 打开tomcat下conf下context.xml文件 找到Context标签,修改为如下内容 如果你的域名是www.test.com <Context sessionCookiePath="/path&q
  • web报表工具FineReport常用函数的用法总结（数学和三角函数） 老A不折腾 Webfinereport总结
      ABS ABS(number):返回指定数字的绝对值。绝对值是指没有正负符号的数值。 Number:需要求出绝对值的任意实数。 示例: ABS(-1.5)等于1.5。 ABS(0)等于0。 ABS(2.5)等于2.5。   ACOS ACOS(number):返回指定数值的反余弦值。反余弦值为一个角度，返回角度以弧度形式表示。 Number:需要返回角
  • linux 启动java进程 sh文件 墙头上一根草 linuxshelljar
    #!/bin/bash #初始化服务器的进程PId变量 user_pid=0; robot_pid=0; loadlort_pid=0; gateway_pid=0; ######### #检查相关服务器是否启动成功 #说明： #使用JDK自带的JPS命令及grep命令组合，准确查找pid #jps 加 l 参数，表示显示java的完整包路径 #使用awk，分割出pid
  • 我的spring学习笔记5-如何使用ApplicationContext替换BeanFactory aijuans Spring 3 系列
    如何使用ApplicationContext替换BeanFactory？ package onlyfun.caterpillar.device; import org.springframework.beans.factory.BeanFactory; import org.springframework.beans.factory.xml.XmlBeanFactory; import
  • Linux 内存使用方法详细解析 annan211 linux内存Linux内存解析
    来源 http://blog.jobbole.com/45748/ 我是一名程序员，那么我在这里以一个程序员的角度来讲解Linux内存的使用。 一提到内存管理，我们头脑中闪出的两个概念，就是虚拟内存，与物理内存。这两个概念主要来自于linux内核的支持。 Linux在内存管理上份为两级，一级是线性区，类似于00c73000-00c88000，对应于虚拟内存，它实际上不占用
  • 数据库的单表查询常用命令及使用方法(-) 百合不是茶 oracle函数单表查询
        创建数据库;       --建表 create table bloguser(username varchar2(20),userage number(10),usersex char(2));       创建bloguser表,里面有三个字段     &nbs
  • 多线程基础知识 bijian1013 java多线程threadjava多线程
    一．进程和线程 进程就是一个在内存中独立运行的程序，有自己的地址空间。如正在运行的写字板程序就是一个进程。 “多任务”：指操作系统能同时运行多个进程（程序）。如WINDOWS系统可以同时运行写字板程序、画图程序、WORD、Eclipse等。 线程：是进程内部单一的一个顺序控制流。 线程和进程 a.       每个进程都有独立的
  • fastjson简单使用实例 bijian1013 fastjson
    一.简介         阿里巴巴fastjson是一个Java语言编写的高性能功能完善的JSON库。它采用一种“假定有序快速匹配”的算法，把JSON Parse的性能提升到极致，是目前Java语言中最快的JSON库；包括“序列化”和“反序列化”两部分，它具备如下特征：     
  • 【RPC框架Burlap】Spring集成Burlap bit1129 spring
    Burlap和Hessian同属于codehaus的RPC调用框架，但是Burlap已经几年不更新，所以Spring在4.0里已经将Burlap的支持置为Deprecated,所以在选择RPC框架时，不应该考虑Burlap了。 这篇文章还是记录下Burlap的用法吧，主要是复制粘贴了Hessian与Spring集成一文，【RPC框架Hessian四】Hessian与Spring集成  
  • 【Mahout一】基于Mahout 命令参数含义 bit1129 Mahout
    1. mahout seqdirectory   $ mahout seqdirectory --input (-i) input Path to job input directory(原始文本文件). --output (-o) output The directory pathna
  • linux使用flock文件锁解决脚本重复执行问题 ronin47 linux lock　重复执行
    linux的crontab命令，可以定时执行操作，最小周期是每分钟执行一次。关于crontab实现每秒执行可参考我之前的文章《linux crontab 实现每秒执行》现在有个问题，如果设定了任务每分钟执行一次，但有可能一分钟内任务并没有执行完成，这时系统会再执行任务。导致两个相同的任务在执行。 例如： <? //  test .php
  • java-74-数组中有一个数字出现的次数超过了数组长度的一半，找出这个数字 bylijinnan java
    public class OcuppyMoreThanHalf { /** * Q74 数组中有一个数字出现的次数超过了数组长度的一半，找出这个数字 * two solutions: * 1.O(n) * see <beauty of coding>--每次删除两个不同的数字，不改变数组的特性 * 2.O(nlogn) * 排序。中间
  • linux 系统相关命令 candiio linux
    系统参数 cat /proc/cpuinfo  cpu相关参数 cat /proc/meminfo 内存相关参数 cat /proc/loadavg 负载情况 性能参数 1）top M：按内存使用排序 P：按CPU占用排序 1：显示各CPU的使用情况 k：kill进程 o：更多排序规则 回车：刷新数据 2）ulimit ulimit -a：显示本用户的系统限制参
  • [经营与资产]保持独立性和稳定性对于软件开发的重要意义 comsci 软件开发
         一个软件的架构从诞生到成熟，中间要经过很多次的修正和改造       如果在这个过程中，外界的其它行业的资本不断的介入这种软件架构的升级过程中           那么软件开发者原有的设计思想和开发路线
  • 在CentOS5.5上编译OpenJDK6 Cwind linuxOpenJDK
    几番周折终于在自己的CentOS5.5上编译成功了OpenJDK6，将编译过程和遇到的问题作一简要记录，备查。 0. OpenJDK介绍 OpenJDK是Sun（现Oracle）公司发布的基于GPL许可的Java平台的实现。其优点： 1、它的核心代码与同时期Sun（-> Oracle）的产品版基本上是一样的，血统纯正，不用担心性能问题，也基本上没什么兼容性问题；（代码上最主要的差异是
  • java乱码问题 dashuaifu java乱码问题js中文乱码
    swfupload上传文件参数值为中文传递到后台接收中文乱码     在js中用setPostParams（{"tag" : encodeURI( document.getElementByIdx_x("filetag").value，"utf-8")}）; 然后在servlet中String t
  • cygwin很多命令显示command not found的解决办法 dcj3sjt126com cygwin
    cygwin很多命令显示command not found的解决办法   修改cygwin.BAT文件如下 @echo off D: set CYGWIN=tty notitle glob set PATH=%PATH%;d:\cygwin\bin;d:\cygwin\sbin;d:\cygwin\usr\bin;d:\cygwin\usr\sbin;d:\cygwin\us
  • [介绍]从 Yii 1.1 升级 dcj3sjt126com PHPyii2
    2.0 版框架是完全重写的，在 1.1 和 2.0 两个版本之间存在相当多差异。因此从 1.1 版升级并不像小版本间的跨越那么简单，通过本指南你将会了解两个版本间主要的不同之处。 如果你之前没有用过 Yii 1.1，可以跳过本章，直接从"入门篇"开始读起。 请注意，Yii 2.0 引入了很多本章并没有涉及到的新功能。强烈建议你通读整部权威指南来了解所有新特性。这样有可能会发
  • Linux SSH免登录配置总结 eksliang ssh-keygenLinux SSH免登录认证Linux SSH互信
    转载请出自出处：http://eksliang.iteye.com/blog/2187265 一、原理      我们使用ssh-keygen在ServerA上生成私钥跟公钥，将生成的公钥拷贝到远程机器ServerB上后,就可以使用ssh命令无需密码登录到另外一台机器ServerB上。      生成公钥与私钥有两种加密方式，第一种是
  • 手势滑动销毁Activity gundumw100 android
    老是效仿ios，做android的真悲催！ 有需求：需要手势滑动销毁一个Activity 怎么办尼？自己写？ 不用~，网上先问一下百度。 结果： http://blog.csdn.net/xiaanming/article/details/20934541 首先将你需要的Activity继承SwipeBackActivity，它会在你的布局根目录新增一层SwipeBackLay
  • JavaScript变换表格边框颜色 ini JavaScripthtmlWebhtml5css
    效果查看：http://hovertree.com/texiao/js/2.htm代码如下，保存到HTML文件也可以查看效果： <html> <head> <meta charset="utf-8"> <title>表格边框变换颜色代码-何问起</title> </head> <body&
  • Kafka Rest : Confluent kane_xie kafkaRESTconfluent
    最近拿到一个kafka rest的需求，但kafka暂时还没有提供rest api（应该是有在开发中，毕竟rest这么火），上网搜了一下，找到一个Confluent Platform，本文简单介绍一下安装。 这里插一句，给大家推荐一个九尾搜索，原名叫谷粉SOSO，不想fanqiang谷歌的可以用这个。以前在外企用谷歌用习惯了，出来之后用度娘搜技术问题，那匹配度简直感人。 环境声明：Ubu
  • Calender不是单例 men4661273 单例Calender
             在我们使用Calender的时候，使用过Calendar.getInstance()来获取一个日期类的对象，这种方式跟单例的获取方式一样，那么它到底是不是单例呢，如果是单例的话，一个对象修改内容之后，另外一个线程中的数据不久乱套了吗？从试验以及源码中可以得出，Calendar不是单例。 测试： Calendar c1 =
  • 线程内存和主内存之间联系 qifeifei java thread
    1， java多线程共享主内存中变量的时候，一共会经过几个阶段，    lock:将主内存中的变量锁定，为一个线程所独占。   unclock:将lock加的锁定解除，此时其它的线程可以有机会访问此变量。   read:将主内存中的变量值读到工作内存当中。   load:将read读取的值保存到工作内存中的变量副本中。  
  • schedule和scheduleAtFixedRate tangqi609567707 javatimerschedule
    原文地址：http://blog.csdn.net/weidan1121/article/details/527307 import java.util.Timer;import java.util.TimerTask;import java.util.Date; /** * @author vincent */public class TimerTest {  
  • erlang 部署 wudixiaotie erlang
    1.如果在启动节点的时候报这个错 ： {"init terminating in do_boot",{'cannot load',elf_format,get_files}} 则需要在reltool.config中加入 {app, hipe, [{incl_cond, exclude}]},     2.当generate时，遇到： ERROR
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他