人鱼线
人鱼线

ChatGLM-6B+LangChain与训练及模型微调教程

Ref:  讲解视频  

【官方教程】ChatGLM + LangChain 实践培训_哔哩哔哩_bilibili

吴恩达教授讲的【LangChain+ChatGLM-6B】LLM应用开发实践  LangChain_Intro_v02_哔哩哔哩_bilibili

代码：GitHub - chatchat-space/Langchain-Chatchat: Langchain-Chatchat（原Langchain-ChatGLM）基于 Langchain 与 ChatGLM 等语言模型的本地知识库问答 | Langchain-Chatchat (formerly langchain-ChatGLM), local knowledge based LLM (like ChatGLM) QA app with langchain

ChatGLM-6B+LangChain与训练及模型微调教程_第1张图片

ChatGLM-6B+LangChain与训练及模型微调教程_第2张图片

本地知识库问答项目讲解：

ChatGLM-6B+LangChain与训练及模型微调教程_第3张图片

ChatGLM-6B+LangChain与训练及模型微调教程_第4张图片

ChatGLM-6B+LangChain与训练及模型微调教程_第5张图片

ChatGLM-6B+LangChain与训练及模型微调教程_第6张图片

ChatGLM-6B+LangChain与训练及模型微调教程_第7张图片

ChatGLM-6B+LangChain与训练及模型微调教程_第8张图片

ChatGLM-6B+LangChain与训练及模型微调教程_第9张图片

你可能感兴趣的:(langchain)

  • #LLM入门|Prompt#3.1 第三部分 使用 LangChain 开发应用程序_简介 向日葵花籽儿 LLM入门教程笔记AIGCpromptpythonLLMlangchain人工智能chatgpt
    概述如何能够基于ChatGPT搭建一个完整、全面的问答系统，要搭建基于ChatGPT的完整问答系统，除去上一部分所讲述的如何构建PromptEngineering外，还需要完成多个额外的步骤。例如，处理用户输入提升系统处理能力，使用思维链、提示链来提升问答效果，检查输入保证系统反馈稳定，对系统效果进行评估以实现进一步优化等。当ChatGPTAPI提供了足够的智能性，系统的重要性就更充分地展现在保证
  • 【AI】如何创建自己的自定义ChatGPT 小涵 AIChatGPTaichatgptopenaillamalangchainpython语言模型
    如何创建自己的自定义ChatGPT目录如何创建自己的自定义ChatGPT大型语言模型（LLM）GPT模型ChatGPTOpenAIAPILlamaIndexLangChain参考推荐超级课程：Docker快速入门到精通Kubernetes入门到大师通关课本文将记录如何使用OpenAIGPT-3.5模型、LlamaIndex和LangChain创建自己的自定义ChatGPT.大型语言模型（LLM）大
  • 安装langchain环境报错：ModuleNotFoundError: No module named ‘fastchat‘，解决方案 苏鱼鱼的小鱼儿 pythonlangchain
    这个报错需要下载fschat包，没有fastchat包pipinstallfschat即可可以从阿里源下载pipinstallfschat-ihttps://mirrors.aliyun.com/pypi/simple
  • Langchain 加载网络信息实现RAG以及UnstructuredURLLoader的使用 hehui0921 LangChainlangchain
    以下实现了从wikipedia加载Android的网页然后保存在本地的向量数据库，然后通过上下文发给大模型，让他来总结什么是android。fromlangchain_community.vectorstoresimportChromafromlangchain_core.promptsimportChatPromptTemplatefromlangchain_core.output_parser
  • 【Langchain Agent研究】SalesGPT项目介绍（五） AI小万老师 salesGPT研究拆解langchain人工智能promptSalesGPTAgentLLM
    【LangchainAgent研究】SalesGPT项目介绍（四）-CSDN博客上节课，我们分析了一下salesGPT项目里源代码的一些问题，重新写了一个运行方法，换了一个模型并修改了一些源代码开始把项目跑起来了，我们已经可以通过console和模型进行对话了。我们之前选的模式是不使用工具的模式，所以我们启用的是sales_conversation_utterance_chain，这节课我们尝试使
  • 【Langchain Agent研究】SalesGPT项目介绍（四） AI小万老师 salesGPT研究拆解langchainsalesGPTopenaiAgentprompt
    【LangchainAgent研究】SalesGPT项目介绍（三）-CSDN博客github地址：GitHub-jerry1900/SalesGPT:Context-awareAISalesAgenttoautomatesalesoutreach.上节课，我们主要介绍了SalesGPT的类属性和它最重要的类方法from_llm()。因为SalesGPT没有构造器方法，所以类方法from_llm()
  • 使用 RAG 创建 LLM 应用程序 ericliu2017 人工智能chatgptRAGLLM
    如果您考虑为您的文件或网站制作一个能够回应您的个性化机器人，那么您来对地方了。我可以帮助您使用Langchain和RAG策略来创建这样一个机器人。了解ChatGPT的局限性和LLMsChatGPT和其他大型语言模型（LLMs）经过广泛训练，以理解语言的语义和连贯性。尽管它们具有令人印象深刻的能力，但这些模型也存在一些限制，需要在特定用例中进行仔细考虑。一个重要的挑战是可能出现幻觉，模型可能会生成不
  • 基于langgraph的开发入门（初稿） 瓶子好亮 langchainpytorch人工智能
    前言：由于langgraph是较新的multi-agent框架，资料较少，官方文档又晦涩难懂，且自己只有一点点langchain的经验，所以准备精读langgraph的框架，特此记录，以供查阅Chapter1：初识langgraph作用：1.一个能够实现多个action的库，用循环的方式能够协调多个langchain。能够循环调用大模型的能力，而不是一个DAG框架（类似于metagpt那种），这能
  • 基于 InternLM 和 LangChain 搭建你的知识库(三) 骆驼穿针眼 langchain
    基于InternLM和LangChain搭建你的知识库大模型开发范式Finetune在大型语言模型中，Finetune（微调）是一种技术，用于调整预训练的模型以提高其在特定任务或数据集上的表现。这种方法通常涉及以下步骤：预训练模型：首先，需要一个预训练的大型语言模型，如GPT、BERT或其他变体。这些模型通常在大型文本语料库上训练，以学习语言的广泛特征和结构。特定任务的数据：接着，收集和准备针对特
  • 使用GPT3.5,LangChain，FAISS和python构建一个本地知识库 juhanishen GPTgpt-3langchainfaisschatbot
    本篇文章获得同事刘工的授权刊登。原文发表于2023年6月28日。引言介绍本地知识库的概念和用途在现代信息时代，我们面临着海量的数据和信息，如何有效地管理和利用这些信息成为一项重要的任务。本地知识库是一种基于本地存储的知识管理系统，旨在帮助用户收集、组织和检索大量的知识和信息。它允许用户在本地环境中构建和管理自己的知识资源，以便更高效地进行信息处理和决策。本地知识库通常采用数据库、索引和搜索技术，以
  • 使用GPT3.5,LangChain，Milvus和python构建一个本地知识库 juhanishen gpt-3langchainmilvus
    本篇文章获得同事刘工的授权刊登。原文发表于2023年7月13日。引言介绍本地知识库的概念和用途在现代信息时代，我们面临着海量的数据和信息，如何有效地管理和利用这些信息成为一项重要的任务。本地知识库是一种基于本地存储的知识管理系统，旨在帮助用户收集、组织和检索大量的知识和信息。它允许用户在本地环境中构建和管理自己的知识资源，以便更高效地进行信息处理和决策。本地知识库通常采用数据库、索引和搜索技术，以
  • langchain和openai不匹配的问题 Wwwilling langchain
    thissolvedmyproblem:langchain0.0.316openai0.28.1
  • 【基于ChatGLM搭建本地化知识库 windows10系统】第一部分：Langchain-Chatchat本地化部署，内附遇到问题及解决办法（GPU版本，亲测有效） wkchaha673 LLMlangchain人工智能python
    本地化部署ChatGLM后，想搭建一个本地化知识库，搜了全网，基本都在推荐Langchain-Chatchat项目，因此就部署一下，我部署的时间是2023年11月29日，在github上作者刚更新了文件，因此在部署过程中与原来论坛里的经验有些不同，加之本人是小白，所以也踩了一些坑，故在这里总结一下，以供参考。一、部署服务器主要配置操作系统：Windows10；内存：32GB;显卡：rtx3060，
  • langchain==win11搭建使用GPU 一个java开发 大模型langchain深度学习人工智能
    annaconda安装Python3.11.7下载代码：GitHub-chatchat-space/Langchain-Chatchat:Langchain-Chatchat（原Langchain-ChatGLM）基于Langchain与ChatGLM等语言模型的本地知识库问答|Langchain-Chatchat(formerlylangchain-ChatGLM),localknowledge
  • 书生谱语-基于 InternLM 和 LangChain 搭建知识库 SatVision炼金士 NLPlangchain
    大语言模型与外挂知识库（RAG）的优缺点RAG方案构建与优化作业在创建web_demo时，需要根据教程将服务器端口映射到本地端口，另外需要将链接的demo从服务器中复制出来，不要直接从服务器打开demo页面，不然会显示异常。
  • 【Langchain Agent研究】SalesGPT项目介绍（三） AI小万老师 salesGPT研究拆解langchainsalesGPTpython人工智能Agent
    【LangchainAgent研究】SalesGPT项目介绍（二）-CSDN博客上节课，我们介绍了salesGPT项目的初步的整体结构，poetry脚手架工具和里面的run.py。在run.py这个运行文件里，引用的最主要的类就是SalesGPT类，今天我们就来看一下这个SalesGPT类，这两节课程应该是整个项目最复杂、也是最有技术含量的部分了。初步了解SalesGPT类salesGPT类在sa
  • 【Langchain Agent研究】SalesGPT项目介绍（二） AI小万老师 salesGPT研究拆解langchainchatgptSalesGPTaiprompt人工智能agent
    【LangchainAgent研究】SalesGPT项目介绍（一）-CSDN博客上节课，我们介绍了SalesGPT他的业务流程和技术架构，这节课，我们来关注一下他的项目整体结构、poetry工具和一些工程项目相关的设计。项目整体结构介绍我们把整个项目从git上拉下来之后，来看一下它的整体工程结构：这里面所有的文件，其中，最最重要的是salesgpt这个文件夹，打开这个文件夹，可以看到里面的pyth
  • 大模型最全八股文和答案 lichunericli LLM人工智能语言模型
    大模型（LLMs）langchain面1.什么是LangChain?[https://python.langchain.com/docs/get_started/introduction](https://python.langchain.com/docs/get_started/introduction)LangChain是一个基于语言模型的框架，用于构建聊天机器人、生成式问答（GQA）、摘要等
  • 第四节课[XTuner微调]作业 早上真好 InternLM大模型实战语言模型人工智能
    文章目录前言作业基础作业-XTunerInternLM-Chat个人小助手认知微调实践前言XTuner做在第三节课LangChain作业之前，因为第三节课没想好找哪个领域，等第三节课作业做了一起部署。作业基础作业-XTunerInternLM-Chat个人小助手认知微调实践然后中间瓜兮兮地不小心关了终端了，重新开始。可以看到在第二个epoch训练到一半的时候就已经基本完成了，为了节约时间，在第二个
  • 第三节课[LangChain]作业 早上真好 InternLM大模型实战langchain语言模型人工智能
    文章目录前言实践搭建向量知识库前言本次作业虽然是第三节课作业，但是在第四次作业之后才完成，所以用的是经过自我认知微调的小助手权重。使用**诡秘之主和宿命之环小说（仅用于学习和研究）**以及设定集、百度百科，搭建“诡秘世界观zhaocake专家助手”。教程文档：https://github.com/InternLM/tutorial/tree/main/langchain实践搭建向量知识库使用教程中
  • 创新S3存储桶检索：Langchain社区S3加载器搭载OpenAI API MinIO官方账号 程序人生
    在瞬息万变的数据存储和处理领域，将高效的云存储解决方案与先进的AI功能相结合，为处理大量数据提供了一种变革性的方法。本文演示了使用MinIO、Langchain和OpenAI的GPT-3.5模型的实际实现，重点总结了存储在MinIO存储桶中的文档。MinIO的强大功能MinIO是开源的高性能对象存储，与AmazonS3API完全兼容。MinIO以其可扩展性而闻名，非常适合存储非结构化数据，例如照片
  • 大模型实战营第二期——3. 基于 InternLM 和 LangChain 搭建你的知识库 吨吨不打野 意外接触的一些知识#大模型实战营langchain
    github地址：InternLM/tutorial-书生·浦语大模型实战营文档地址：基于InternLM和LangChain搭建你的知识库视频地址：基于InternLM和LangChain搭建你的知识库InternStudio:https://studio.intern-ai.org.cn/console/instance动手学大模型应用开发文章目录1.大模型开发范式2.LangChain3.构
  • [ai笔记4] 将AI工具场景化，应用于生活和工作 文思源想 文思AI笔记人工智能文思源想文思ai笔记ai
    欢迎来到文思源想的AI空间，这是技术老兵重学ai以及成长思考的第4篇分享内容！转眼已经到了大年初三，但是拜年的任务还只完成了一半，准备的大部头的书，现在也就看了两本，还好AI笔记通过每天早起坚持了下来。早上醒来的时候，我就开始思考接下来应该怎样去熟悉和梳理ai这个领域，对于一个技术人来说，自然是通过技术的手段，研究下大模型原理、深度学习、langchain这些框架会更合适，但这些东西不能直接解决人
  • 大语言模型langchain+ChatGLM3-6B+本地知识库实战 North_D AI人工智能langchain人工智能自然语言处理AIGCpromptembedding
    大语言模型langchain+ChatGLM3-6B+本地知识库实战文章目录大语言模型langchain+ChatGLM3-6B+本地知识库实战目标微调、本地知识库和Prompt基本概念1、环境准备2、创建conda虚拟环境3、langchain+chatglm3-6b模型源码下载4、运行ChatGLM3的web_demo5、运行langchain的WebUI，准备本地知识库6、新建本地知识库7、
  • InternLM大模型实战-3.InternLM+Langchain搭建知识库 早上真好 InternLM大模型实战langchain语言模型人工智能
    文章目录前言笔记正文大模型开发范式RAGFinetuneLangChain简介构建向量数据库搭建知识库助手1InternLM+Langchain2构建检索问答链3优化建议WebDemo部署搭建知识库前言本文是对于InternLM全链路开源体系系列课程的学习笔记。【基于InternLM和LangChain搭建你的知识库】https://www.bilibili.com/video/BV1sT4y1p
  • 基于OpenIM 实现聊天机器人功能 github
    简要描述使用OpenIM中的Webhook机制实现聊天机器人功能。发送文本消息或图片消息给聊天机器人后，机器人会返回相同的消息。开发者可以替换此逻辑，在LangChain框架上调用LLM接口（包括gpt3.5或其他开源本地模型），以实现智能客服功能。1.修改配置文件参照下面的模板修改open-im-server中的config/config.yaml配置。提示:url为回调URL。当afterSe
  • LLM应用开发报错与解决：langchain_Core not installed, pydev debugger: CRITICAL WARNING: This version of python 德国Viviane langchain
    已经安装了langChain_core后，仍有以上报错，解决如下，首先升级了pycharm（网上有人说是pycahrm版本低导致不兼容，出现debug错误）但这个方法，没有用，仍有报错。有效解决办法，直接去interpreteroption输入：-Xfrozen_modules=off
  • LLM之LangChain（七）| 使用LangChain，LangSmith实现Prompt工程ToT wshzd LangChain笔记langchainprompt
    如下图所示，LLM仍然是自治代理的backbone，可以通过给LLM增加以下模块来增强LLM功能:PrompterAgentCheckerModuleMemorymoduleToTcontroller当解决具体问题时，这些模块与LLM进行多轮对话。这是基于LLM的自治代理的典型情况，其中动态创建链并按顺序执行，同时多次轮询LLM。下图是LangSmith[1]的界面，从图中可以看到使用的token
  • LangGraph基础理解 我只钓小鱼 LLM笔记langchain
    文章目录动机功能StateGraphNodesEdges起始边正常边条件边AgentExecutorChatAgentExecutorModifications本文对LangGraph博客内容做下简单总结，详细内容请查看langchain博客https://blog.langchain.dev/langgraph/动机Agent的实现基本上有两个步骤:调用LLM来决定(a)采取什么行动，或(b)向
  • LLM之LangChain（六）| 使用LangGraph创建一个超级AI Agent wshzd LangChain笔记langchain人工智能
    几天前，LangChain正式宣布了名为LangGraph的新库，LangGraph建立在LangChain之上，简化了创建和管理Agent及其运行时的过程。在这篇文章中，我们将全面介绍langGraph，什么是代理和代理运行时？Langgraph的特点是什么，以及如何在Langgraph中构建一个代理执行器，我们将探讨Langgraph中的聊天代理执行器以及如何在人类循环和聊天中修改Langgr
  • SQL的各种连接查询 xieke90 UNION ALLUNION外连接内连接JOIN
    一、内连接   概念：内连接就是使用比较运算符根据每个表共有的列的值匹配两个表中的行。                 内连接（join 或者inner join ）       SQL语法：       select * fron
  • java编程思想--复用类 百合不是茶 java继承代理组合final类
          复用类看着标题都不知道是什么,再加上java编程思想翻译的比价难懂,所以知道现在才看这本软件界的奇书   一:组合语法:就是将对象的引用放到新类中即可     代码:     package com.wj.reuse; /** * * @author Administrator 组
  • [开源与生态系统]国产CPU的生态系统 comsci cpu
          计算机要从娃娃抓起...而孩子最喜欢玩游戏....       要让国产CPU在国内市场形成自己的生态系统和产业链,国家和企业就不能够忘记游戏这个非常关键的环节....       投入一些资金和资源,人力和政策,让游
  • JVM内存区域划分Eden Space、Survivor Space、Tenured Gen，Perm Gen解释 商人shang jvm内存
    jvm区域总体分两类，heap区和非heap区。heap区又分：Eden Space（伊甸园）、Survivor Space(幸存者区)、Tenured Gen（老年代-养老区）。 非heap区又分：Code Cache(代码缓存区)、Perm Gen（永久代）、Jvm Stack(java虚拟机栈)、Local Method Statck(本地方法栈)。 HotSpot虚拟机GC算法采用分代收
  • 页面上调用 QQ oloz qq
    <A href="tencent://message/?uin=707321921&amp;Site=有事Q我&amp;Menu=yes">   <img style="border:0px;" src=http://wpa.qq.com/pa?p=1:707321921:1></a>
  • 一些问题 文强chu 问题
    1.eclipse 导出 doc  出现“The Javadoc command does not exist.” javadoc command 选择 jdk/bin/javadoc.exe 2.tomcate 配置 web 项目 ..... SQL:3.mysql  * 必须得放前面 否则  select&nbs
  • 生活没有安全感 小桔子 生活孤独安全感
           圈子好小，身边朋友没几个，交心的更是少之又少。在深圳，除了男朋友，没几个亲密的人。不知不觉男朋友成了唯一的依靠，毫不夸张的说，业余生活的全部。现在感情好，也很幸福的。但是说不准难免人心会变嘛，不发生什么大家都乐融融，发生什么很难处理。我想说如果不幸被分手(无论原因如何)，生活难免变化很大，在深圳，我没交心的朋友。明
  • php 基础语法 aichenglong php 基本语法
    1 .1 php变量必须以$开头 <?php $a=” b”; echo ?> 1 .2 php基本数据库类型 Integer  float/double Boolean string 1 .3 复合数据类型 数组array和对象 object 1 .4 特殊数据类型  null 资源类型(resource)    $co
  • mybatis tools 配置详解 AILIKES mybatis
    MyBatis Generator中文文档 MyBatis Generator中文文档地址： http://generator.sturgeon.mopaas.com/ 该中文文档由于尽可能和原文内容一致，所以有些地方如果不熟悉，看中文版的文档的也会有一定的障碍，所以本章根据该中文文档以及实际应用，使用通俗的语言来讲解详细的配置。 本文使用Markdown进行编辑，但是博客显示效
  • 继承与多态的探讨 百合不是茶 JAVA面向对象 继承 对象
    继承 extends   多态 继承是面向对象最经常使用的特征之一：继承语法是通过继承发、基类的域和方法 //继承就是从现有的类中生成一个新的类，这个新类拥有现有类的所有extends是使用继承的关键字：     在A类中定义属性和方法； class A{ //定义属性 int age； //定义方法 public void go
  • JS的undefined与null的实例 bijian1013 JavaScriptJavaScript
    <form name="theform" id="theform"> </form> <script language="javascript"> var a alert(typeof(b)); //这里提示undefined if(theform.datas
  • TDD实践（一） bijian1013 java敏捷TDD
    一.TDD概述         TDD：测试驱动开发，它的基本思想就是在开发功能代码之前，先编写测试代码。也就是说在明确要开发某个功能后，首先思考如何对这个功能进行测试，并完成测试代码的编写，然后编写相关的代码满足这些测试用例。然后循环进行添加其他功能，直到完全部功能的开发。     
  • [Maven学习笔记十]Maven Profile与资源文件过滤器 bit1129 maven
    什么是Maven Profile Maven Profile的含义是针对编译打包环境和编译打包目的配置定制，可以在不同的环境上选择相应的配置，例如DB信息，可以根据是为开发环境编译打包，还是为生产环境编译打包，动态的选择正确的DB配置信息   Profile的激活机制 1.Profile可以手工激活，比如在Intellij Idea的Maven Project视图中可以选择一个P
  • 【Hive八】Hive用户自定义生成表函数(UDTF) bit1129 hive
    1. 什么是UDTF   UDTF，是User Defined Table-Generating Functions，一眼看上去，貌似是用户自定义生成表函数，这个生成表不应该理解为生成了一个HQL Table， 貌似更应该理解为生成了类似关系表的二维行数据集   2. 如何实现UDTF 继承org.apache.hadoop.hive.ql.udf.generic
  • tfs restful api 加auth 2.0认计 ronin47
    　　目前思考如何给tfs的ngx-tfs api增加安全性。有如下两点： 　　一是基于客户端的ip设置。这个比较容易实现。 　　二是基于OAuth2.0认证，这个需要lua，实现起来相对于一来说，有些难度。 　　现在重点介绍第二种方法实现思路。 　　 前言：我们使用Nginx的Lua中间件建立了OAuth2认证和授权层。如果你也有此打算，阅读下面的文档，实现自动化并获得收益。SeatGe
  • jdk环境变量配置 byalias javajdk
    进行java开发，首先要安装jdk，安装了jdk后还要进行环境变量配置： 1、下载jdk（http://java.sun.com/javase/downloads/index.jsp），我下载的版本是：jdk-7u79-windows-x64.exe 2、安装jdk-7u79-windows-x64.exe 3、配置环境变量：右击"计算机"-->&quo
  • 《代码大全》表驱动法-Table Driven Approach-2 bylijinnan java
    package com.ljn.base; import java.io.BufferedReader; import java.io.FileInputStream; import java.io.InputStreamReader; import java.util.ArrayList; import java.util.Collections; import java.uti
  • SQL 数值四舍五入 小数点后保留2位 chicony 四舍五入
    1.round() 函数是四舍五入用，第一个参数是我们要被操作的数据，第二个参数是设置我们四舍五入之后小数点后显示几位。 2.numeric 函数的2个参数，第一个表示数据长度，第二个参数表示小数点后位数。 例如： 　　select   cast(round(12.5,2)   as   numeric(5,2))  
  • c++运算符重载 CrazyMizzz C++
    一、加+，减-，乘*，除/ 的运算符重载 Rational operator*(const Rational &x) const{ return Rational(x.a * this->a); } 在这里只写乘法的，加减除的写法类似 二、<<输出,>>输入的运算符重载      &nb
  • hive DDL语法汇总 daizj hive修改列DDL修改表
    hive DDL语法汇总 １、对表重命名 hive> ALTER TABLE table_name RENAME TO new_table_name;   2、修改表备注 hive> ALTER TABLE table_name SET TBLPROPERTIES ('comment' = new_comm
  • jbox使用说明 dcj3sjt126com Web
    参考网址：http://www.kudystudio.com/jbox/jbox-demo.html jBox v2.3 beta [ 点击下载]  技术交流QQGroup：172543951 100521167 [2011-11-11] jBox v2.3 正式版 - [调整&修复] IE6下有iframe或页面有active、applet控件
  • UISegmentedControl 开发笔记 dcj3sjt126com
      //    typedef NS_ENUM(NSInteger, UISegmentedControlStyle) {     //        UISegmentedControlStylePlain,     // large plain   &
  • Slick生成表映射文件 ekian scala
    Scala添加SLICK进行数据库操作，需在sbt文件上添加slick-codegen包 "com.typesafe.slick" %% "slick-codegen" % slickVersion 因为我是连接SQL Server数据库，还需添加slick-extensions，jtds包 "com.typesa
  • ES-TEST gengzg test
    package com.MarkNum; import java.io.IOException; import java.util.Date; import java.util.HashMap; import java.util.Map; import javax.servlet.ServletException; import javax.servlet.annotation
  • 为何外键不再推荐使用 hugh.wang mysqlDB
    表的关联，是一种逻辑关系，并不需要进行物理上的“硬关联”，而且你所期望的关联，其实只是其数据上存在一定的联系而已，而这种联系实际上是在设计之初就定义好的固有逻辑。 在业务代码中实现的时候，只要按照设计之初的这种固有关联逻辑来处理数据即可，并不需要在数据库层面进行“硬关联”，因为在数据库层面通过使用外键的方式进行“硬关联”，会带来很多额外的资源消耗来进行一致性和完整性校验，即使很多时候我们并不
  • 领域驱动设计 julyflame VODAO设计模式DTOpo
    概念： VO（View Object）：视图对象，用于展示层，它的作用是把某个指定页面（或组件）的所有数据封装起来。 DTO（Data Transfer Object）：数据传输对象，这个概念来源于J2EE的设计模式，原来的目的是为了EJB的分布式应用提供粗粒度的数据实体，以减少分布式调用的次数，从而提高分布式调用的性能和降低网络负载，但在这里，我泛指用于展示层与服务层之间的数据传输对
  • 单例设计模式 hm4123660 javaSingleton单例设计模式懒汉式饿汉式
           单例模式是一种常用的软件设计模式。在它的核心结构中只包含一个被称为单例类的特殊类。通过单例模式可以保证系统中一个类只有一个实例而且该实例易于外界访问，从而方便对实例个数的控制并节约系统源。如果希望在系统中某个类的对象只能存在一个，单例模式是最好的解决方案。      &nb
  • logback zhb8015 loglogback
    一、logback的介绍      Logback是由log4j创始人设计的又一个开源日志组件。logback当前分成三个模块：logback-core,logback- classic和logback-access。logback-core是其它两个模块的基础模块。logback-classic是log4j的一个 改良版本。此外logback-class
  • 整合Kafka到Spark Streaming——代码示例和挑战 Stark_Summer sparkstormzookeeperPARALLELISMprocessing
    作者Michael G. Noll是瑞士的一位工程师和研究员，效力于Verisign，是Verisign实验室的大规模数据分析基础设施（基础Hadoop）的技术主管。本文，Michael详细的演示了如何将Kafka整合到Spark Streaming中。 期间， Michael还提到了将Kafka整合到 Spark Streaming中的一些现状，非常值得阅读，虽然有一些信息在Spark 1.2版
  • spring-master-slave-commondao 王新春 DAOspringdataSourceslavemaster
    互联网的web项目，都有个特点：请求的并发量高，其中请求最耗时的db操作，又是系统优化的重中之重。 为此，往往搭建 db的 一主多从库的 数据库架构。作为web的DAO层，要保证针对主库进行写操作，对多个从库进行读操作。当然在一些请求中，为了避免主从复制的延迟导致的数据不一致性，部分的读操作也要到主库上。（这种需求一般通过业务垂直分开，比如下单业务的代码所部署的机器，读去应该也要从主库读取数
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他