DragonflyDavid
DragonflyDavid

Netty源码05-Netty编解码器框架

TCP粘包/半包问题

TCP是以流的方式来处理数据，一个完整的包可能会被TCP拆分成多个包进行发送，也可能把小的封装成一个大的数据包发送

TCP粘包/分包的原因

  • 应用程序写入的字节大小大于套接字发送缓冲区的大小，会发生拆包现象* 应用程序写入数据小于套接字缓冲区大小，网卡将应用多次写入的数据发送到网络上，这将会发生粘包现象
进行MSS大小的TCP分段，当TCP报文长度-TCP头部长度 > MSS的时候将发生拆包
以太网帧的payload（净荷）大于MTU（1500字节）进行ip分片

Netty源码05-Netty编解码器框架_第1张图片

TCP粘包/分包解决方法

主要有四种方法：

  • 消息定长：FixedLengthFrameDecoder类
  • 行分隔符类： LineBasedFrameDecoder类
  • 定义分隔符类：DelimiterBasedFrameDecoder类
  • 将消息分为消息头和消息体：LengthFieldBasedFrameDecoder类。分为有头部的拆包与粘包、长度字段在前且有头部的拆包与粘包、多扩展头部的拆包与粘包
底层Socket通信经常遇到这种基础打解包的需求，我写了一个针对该场景的通用信息交换平台，可以实现打解包的配置化，放在Github上

GitHub 地址：https://github.com/dragonflysun2019/GXPMaster

编解码器框架

什么是编解码器

每个网络应用程序都必须定义如何解析在两个节点之间来回传输的原始字节，以及如何将其和目标应用程序的数据格式做相互转换。这种转换逻辑由Codec处理，Codec由Encoder和Decoder组成，它们每种都可以将字节流从一种格式转换为另一种格式。那么它们的区别是什么呢？

如果将消息看作是对于特定的应用程序具有具体含义的结构化的字节序列—它的数据。那么Encoder是将消息转换为适合于传输的格式（最有可能的就是字节流）；而对应的Decoder则是将网络字节流转换回应用程序的消息格式。因此，Encoder操作出站数据，而Decoder处理入站数据。我们前面所学的解决粘包半包的其实也是编解码器框架的一部分。

解码器

  • 将字节解码为消息：ByteToMessageDecoder
  • 将一种消息类型解码为另一种：MessageToMessageDecoder
因为解码器是负责将入站数据从一种格式转换到另一种格式的，所以 Netty 的解码器实现了 ChannelInboundHandler

什么时候会用到解码器呢？

很简单：每当需要为 ChannelPipeline 中的下一个 ChannelInboundHandler 转换入站数据时会用到。此外，得益于 ChannelPipeline 的设计，可以将多个解码器链接在一起，以实现任意复杂的转换逻辑

将字节解码为消息ByteToMessageDecoder

抽象类ByteToMessageDecoder

将字节解码为消息（或者另一个字节序列）是一项如此常见的任务，以至于Netty 为它提供了一个抽象的基类：ByteToMessageDecoder。由于你不可能知道远程节点是否会一次性地发送一个完整的消息，所以这个类会对入站数据进行缓冲，直到它准备好处理

它最重要方法

decode(ChannelHandlerContext ctx,ByteBuf in,List out) 
 
这是你必须实现的唯一抽象方法。decode()方法被调用时将会传入一个包含了传入数据的ByteBuf，以及一个用来添加解码消息的List。对这个方法的调用将会重复进行，直到确定没有新的元素被添加到该List，或者该ByteBuf 中没有更多可读取的字节时为止。然后，如果该List 不为空，那么它的内容将会被传递给ChannelPipeline 中的下一个ChannelInboundHandler
 
 
将一种消息类型解码为另一种MessageToMessageDecoder
 
 
在两个消息格式之间进行转换（例如，从String->Integer）
 
 
decode(ChannelHandlerContext ctx,I msg,List out) 
 
对于每个需要被解码为另一种格式的入站消息来说，该方法都将会被调用。解码消息随后会被传递给ChannelPipeline中的下一个ChannelInboundHandler
 
 
MessageToMessageDecoder，T代表源数据的类型
 
 
TooLongFrameException
 
 
由于Netty 是一个异步框架，所以需要在字节可以解码之前在内存中缓冲它们（没有读取完之前是无法解码的）。因此，不能让解码器缓冲大量的数据以至于耗尽可用的内存。为了解除这个常见的顾虑，Netty 提供了TooLongFrameException 类，其将由解码器在帧超出指定的大小限制时抛出
 
 
为了避免这种情况，你可以设置一个最大字节数的阈值，如果超出该阈值，则会导致抛出一个TooLongFrameException（随后会被ChannelHandler.exceptionCaught()方法捕获）。然后，如何处理该异常则完全取决于该解码器的用户。某些协议（如HTTP）可能允许你返回一个特殊的响应。而在其他的情况下，唯一的选择可能就是关闭对应的连接
 
 
编码器
 
 
和解码器的功能正好相反。Netty 提供了一组类，用于帮助你编写具有以下功能的编码器：
 
 
     
  
  •  将消息编码为字节：MessageToByteEncoder 
    •  
  
  •  将消息编码为消息：MessageToMessageEncoder，T代表源数据的类型
    •  
 
 
 
将消息编码为字节MessageToByteEncoder
 
 
encode(ChannelHandlerContext ctx,I msg,ByteBuf out)
 
 
encode()方法是你需要实现的唯一抽象方法。它被调用时将会传入要被该类编码为ByteBuf 的（类型为I 的）出站消息。该ByteBuf 随后将会被转发给ChannelPipeline中的下一个ChannelOutboundHandler
 
 
将消息编码为消息MessageToMessageEncoder
 
 
encode(ChannelHandlerContext ctx,I msg,List out)
 
 
这是你需要实现的唯一方法。每个通过write()方法写入的消息都将会被传递给encode()方法，以编码为一个或者多个出站消息。随后，这些出站消息将会被转发给ChannelPipeline中的下一个ChannelOutboundHandler
 
 
编解码器类
 
 
我们一直将解码器和编码器作为单独的实体讨论，但是你有时将会发现在同一个类中管理入站和出站数据和消息的转换是很有用的。Netty 的抽象编解码器类正好用于这个目的，因为它们每个都将捆绑一个解码器/编码器对，以处理我们一直在学习的这两种类型的操作。这些类同时实现了ChannelInboundHandler 和ChannelOutboundHandler 接口。
 
 
为什么我们并没有一直优先于单独的解码器和编码器使用这些复合类呢？因为通过尽可能地将这两种功能分开，最大化了代码的可重用性和可扩展性，这是Netty 设计的一个基本原则。
 
 
相关的类：
 
 
     
  
  • 抽象类ByteToMessageCodec
    •  
  
  • 抽象类MessageToMessageCodec
    •  
  
  • HttpServerCodec
    •  
  
  • HttpClientCodec
    •  
 
 

                            
                        
                    
                    
                    

                    
                    
                    

                
                

                    
                

            
        
    
    

        
你可能感兴趣的:(netty,codecs)

        

            

                
    
                    
  • 聊聊Netty那些事儿之Reactor在Netty中的实现(创建篇)
                        Java小海.
java开发语言后端程序人生springboot
                        
    本系列Netty源码解析文章基于4.1.56.Final版本在上篇文章《聊聊Netty那些事儿之从内核角度看IO模型》中我们花了大量的篇幅来从内核角度详细讲述了五种IO模型的演进过程以及ReactorIO线程模型的底层基石IO多路复用技术在内核中的实现原理。最后我们引出了netty中使用的主从ReactorIO线程模型。通过上篇文章的介绍，我们已经清楚了在IO调用的过程中内核帮我们搞了哪些事情，那
    
                    
    • 
                    
  • 深入剖析 Netty：高性能网络编程框架的奥秘
                        艾斯比的日常
网络
                        
    引言在当今高并发的网络应用场景下，对网络编程的性能要求越来越高。Netty作为一个基于JavaNIO构建的高性能网络编程框架，凭借其卓越的性能表现，在众多网络应用中得到了广泛的应用。本文将深入剖析Netty性能高的原因，帮助开发者更好地理解和使用Netty。一、异步非阻塞I/O模型1.1传统阻塞I/O的困境在传统的阻塞I/O模型中，当一个线程进行I/O操作时，它会被阻塞，直到操作完成。这意味着在高
    
                    
    • 
                    
  • Orleans7.0 游戏服务器全栈开发实战
                        
unity
                        
    本课程目标是从零开始搭建一套基于微软Orleans和DotNetty开源方案的游戏服务器框架，框架遵守Actor模型，可以充分利用多核，方便水平扩展。并且使用.NET平台，开发和部署都非常便捷。为了演示功能，也实现了一个简单的Unity客户端框架，最后使用这个框架实现了一个井字棋的对战小案例，来教会大家学以致用。这个案例演示了如何登录、开房间、匹配、对战、结算以及断线重连等一系列回合制游戏的关键节
    
                    
    • 
                    
  • Netty是怎么实现Java NIO多路复用的？（源码）
                        嘉友
中间件JavaIONettyjavanio后端
                        
    目录NIO多路复用实现事件循环是什么？核心源码（1）调用NioEventLoopGroup默认构造器（2）指定SelectorProvider（3）创建`Selector`（4）创建单线程和队列（5）单线程处理就绪IO事件最近想再巩固一下NIO等多路复用的实现思路，本文通过Netty源码来进一步总结NIO多路复用的运用。先上一组简单的NIO多路复用实现，NIO多路复用实现服务端通过selector
    
                    
    • 
                    
  • 带你吃透（Netty+Redis+ZooKeeper+高并发实战）从底层原理开始剖析
                        java熬夜党
Javajava面试redis
                        
    前言今天给大家分享的Netty+Redis+ZooKeeper底层原理+高并发实战，希望大家认真阅读，跟上文章的节奏，一步步去提升自己~大公司的面试题从某个侧面映射出生产场景中对专项技术的要求。高并发的面试题以前基本是BAT等大公司的专利，现在几乎蔓延至与Java项目相关的整个行业。例如，与JavaNIO、Reactor模式、高性能通信、分布式锁、分布式ID、分布式缓存、高并发架构等技术相关的面试
    
                    
    • 
                    
  • Netty是如何实现零拷贝的？
                        java1234_小锋
javajava
                        
    大家好，我是锋哥。今天分享关于【Netty是如何实现零拷贝的？】面试题。希望对大家有帮助；Netty是如何实现零拷贝的？1000道互联网大厂Java工程师精选面试题-Java资源分享网Netty是一个高性能的Java网络应用框架，它通过多种技术实现了“零拷贝”（Zero-Copy）机制，以提高数据传输的效率，减少CPU的使用率和内存的消耗。零拷贝指的是在数据传输过程中，避免不必要的内存拷贝，提高处
    
                    
    • 
                    
  • Netty为什么性能很高?
                        java1234_小锋
javajava开发语言
                        
    大家好，我是锋哥。今天分享关于【Netty为什么性能很高?】面试题。希望对大家有帮助；Netty为什么性能很高?1000道互联网大厂Java工程师精选面试题-Java资源分享网Netty是一款高性能的网络通信框架，主要用于构建高性能的网络应用程序。其高性能的原因可以归结为以下几个方面：1.NIO（Non-blockingI/O）模型Netty基于JavaNIO（即非阻塞I/O）API，能够实现异步
    
                    
    • 
                    
  • netty 与 websocket
                        JIU_WW
websocket网络协议网络nettyjava
                        
    目录1.Netty简介2.WebSocket简介3.Netty与WebSocket的关系3.1Netty对WebSocket的支持3.2两者的层级关系3.3常见误解澄清4.Netty的通用性体现4.1多协议支持4.2非WebSocket应用示5.选择Netty实现WebSocket的优势6.总结1.Netty简介Netty是一个高性能、异步事件驱动的网络应用框架，专为开发可扩展和高性能的服务器与客
    
                    
    • 
                    
  • Netty长连接
                        JIU_WW
nettywebsocketjavatcp
                        
    1.长连接的概念目录1.长连接的概念2.Netty对长连接的支持2.1内置协议支持2.2连接状态管理2.3资源优化3.Netty长连接与WebSocket的关系4.实现长连接的两种典型方式4.1基于TCP自定义协议4.2基于WebSocket5.长连接的关键优化策略6.性能对比：Nettyvs传统实现总结长连接指客户端与服务器建立一次连接后，保持该连接持续打开，供多次数据传输使用。与短连接（每次请
    
                    
    • 
                    
  • Spring Cloud Alibaba Spring Cloud Spring Boot 版本对应关系
                        马丁半只瞄
javaspringspringbootspringcloud
                        
    版本不对应可能有以下报错：Failedtobindpropertiesundermybatis-plus.configuration.result-maps[0]NoClassDefFoundError:reactor/netty/http/server/WebsocketServerSpec$Builderreactor.netty.resources.ConnectionProvider.el
    
                    
    • 
                    
  • netty使用场景
                        酷爱码
java技术教程java
                        
    Netty是一个Java网络编程框架，提供了高性能、高可扩展性的网络通信能力。它通常被用于以下场景：服务器端网络编程：Netty可用于构建各种服务器端应用程序，如Web服务器、游戏服务器、聊天服务器等。客户端网络编程：Netty也可以用于构建客户端应用程序，用于与服务器进行通信。分布式系统：Netty可在分布式系统中作为通信框架，用于节点之间的数据传输和通信。高性能网络应用：由于Netty具有高性
    
                    
    • 
                    
  • Netty之ByteBuf详解
                        非ban必选
nettynetty
                        
    ByteBuf的结构，如下图所示1.ByteBuf是一个字节容器，容器里面的数据分为三部分，第一部分是已经丢弃的字节，这部分数据是无效的；第二部分是可读字节，这部分数据是ByteBuf的主体数据，从ByteBuf里读取的数据都来自这一部分；最后一部分的数据是可写字节，所有写到ByteBuf的数据都会写到这一段。后面的虚线部分表示该ByteBuf最多还能扩容多少容量。2.以上三部分内容是被两个指针划
    
                    
    • 
                    
  • netty详解
                        p-knowledge
jettyjava
                        
    Netty是一个高性能的网络通信框架，广泛用于构建网络应用程序，如高性能的服务器、客户端和分布式系统。以下是Netty的各个组件介绍与原理分析，以及客户端和服务端的实现示例。一、Netty的组件介绍Channel：概念：表示一个连接到网络的对象，负责处理网络I/O操作。可以是TCP、UDP等。作用：提供数据读写操作，并可以注册到事件循环。EventLoop：概念：负责处理I/O操作的事件循环。每个
    
                    
    • 
                    
  • Kafka 基础教程 — 可靠的数据传递
                        码炫课堂-码哥
kafka专题kafka消息队列
                        
    作者简介：大家好，我是码炫码哥，前中兴通讯、美团架构师，现任某互联网公司CTO，兼职码炫课堂主讲源码系列专题代表作：《jdk源码&多线程&高并发》，《深入tomcat源码解析》，《深入netty源码解析》，《深入dubbo源码解析》，《深入springboot源码解析》，《深入spring源码解析》，《深入redis源码解析》等联系qq：184480602，加我进群，大家一起学习，一起进步，一起对
    
                    
    • 
                    
  • netty详细使用
                        酷爱码
编程学习netty
                        
    Netty是一个基于Java的高性能网络应用框架，主要用于快速开发高性能的网络通信应用程序。以下是Netty的详细使用步骤：添加Netty依赖：在项目的pom.xml中添加Netty的依赖项，例如：io.nettynetty-all4.1.66.Final创建Netty服务器：编写一个Netty服务器应用程序，监听指定的端口，并处理网络请求。以下是一个简单的示例：publicclassNettyS
    
                    
    • 
                    
  • Netty Reactor 线程模型
                        Think_Higher
Netty从入门到理解
                        
    Reactor线程模型是Netty实现高性能的核心所在，在Netty中EventLoop是Reactor线程模型的核心处理引擎，那么EventLoop到底是如何实现的呢？又是如何保证高性能和线程安全性的呢？说明：本文参考的Netty源码版本为4.1.42.Final。文章目录Reactor线程执行的主流程轮询I/O事件处理I/O事件1.processSelectedKeysPlain2.proce
    
                    
    • 
                    
  • 物联网基础知识-Netty学习路线
                        不对法
物联网java学习websocketjava
                        
    netty入门Netty入门教程——认识NettyNetty入门教程2——动手搭建HttpServerNetty入门教程3——Decoder和EncoderNetty入门教程4——如何使用Socket在客户端实现长连接其他基础知识IO相关Tomcat的BIO、NIO、APR模式对比与性能测试结果SOCKETWebSocket介绍和Socket的区别WebSocket机制WebSocket是HTML
    
                    
    • 
                    
  • 深入理解 Netty：高效的网络通信框架
                        HelloZheQ
java
                        
    在分布式系统和高性能应用程序中，网络通信是核心组成部分。尤其是需要处理大量并发连接、低延迟、高吞吐量的应用，传统的网络通信框架往往无法满足要求。Netty是一个高性能的网络通信框架，广泛应用于大型系统的网络层设计中。无论是在构建即时通讯应用、在线游戏、物联网系统，还是处理实时数据流，Netty都能提供强大的支持。什么是Netty？Netty是一个基于Java的网络通信框架，专为高效、可靠的网络通信
    
                    
    • 
                    
  • 用Netty实现物联网04：自定义通信协议
                        湘王
CTO的几把刷子物联网JavaNetty车联网自定义通信协议
                        
    上一讲咱们澄清了Netty的一些基本概念，然后也写了一个服务端与客户端通信的简单应答程序。从这一讲开始，就来一步步搭建一个Netty物联网应用。大多数硬件电子产品，都自带了嵌入式软件，或者说固件。这些嵌入式软件/固件基本上都是用C/C++编写的。由于这些小微电子设备资源极其有限，所以它们的通讯方式和协议也极为简单：99.99%都只支持TCP/UDP通讯协议，HTTP根本不在考虑之列。但同时，这些电
    
                    
    • 
                    
  • Netty在物联网中的应用(一)
                        happyLazyAnt
Netty物联网tcp/ipjavanio
                        
    简介物联网是指通过互联网将各种智能设备连接起来形成一个庞大的网络。现在各种智能家居应用也越来月广泛，有的需要远程控制，有的只是采集数据。有需要远程控制的场景，我们一般会选择TCP/IP网络协议，让设备和服务端保持长连接通信，以保证指令能够及时下发到智能设备上。Netty作为一种高性能，异步事件驱动的网络应用程序框架，提供了更好的可扩展性和效率，支持多种传输协议，如TCP、UDP、HTTP、WebS
    
                    
    • 
                    
  • 【可靠有效】springboot使用netty搭建TCP服务器
                        weixin_43833540
springbootnettytcp
                        
    NettyNetty是一个高性能、异步事件驱动的网络应用程序框架，它提供了对并发和异步编程的抽象，使得开发网络应用程序变得更加简单和高效。在Netty中，EventLoopGroup是处理I/O操作的多线程事件循环器。在上面的示例中，我们创建了两个EventLoopGroup实例：bossGroup和workerGroup。bossGroup负责接收客户端的连接请求，并将这些连接分配给worker
    
                    
    • 
                    
  • 开源的H5即时聊天系统 spring-boot + netty + protobuf + vue ~
                        lmxdawn
黎明晓spring-bootvuenettywebsocketprotobuf
                        
    前言一篇文章引发的思考？一次读公号推文,发现一篇文章写得特好,勾起了好奇心《群聊比单聊，为什么复杂这么多？》,@沈大大.GitHub地址him-vue前往him-netty前往心路历程第一阶段,刚看完文章时,特别兴奋,开始着手,花了一个月把聊天界面基本弄,然后着手于后端,经过些简单的调研,决定用netty搭建一个,后面发现里面的复杂逻辑,再加上心中的火似乎已经熄灭,最后…第二阶段,最近刷公文时又刷
    
                    
    • 
                    
  • 利用TCP协议服务器从单用户到多用户的理解思路与解决办法（select\poll\epoll）（一）
                        Gpangpangwa
网络编程c++tcp
                        
    在进行TCP协议的了解之前，首先要了解用到的基本函数：**socket函数是一种可用于根据指定的地址族、数据类型和协议来分配一个套接口的描述字及其所用的资源的函数intsocket(intAdress_family,inttype,intprotocol);af:如AF_INETtype:连接类型，通常是SOCK_STREAM或SOCK_DGRAMprotocol:协议类型，通常是IPPROTO_
    
                    
    • 
                    
  • 使用 Python 脚本和 VSCode 任务系统
                        109702008
#python编程vscodepythonide
                        
    1.编写Python脚本创建一个Python脚本，使用文件I/O和字符串替换功能来读取文本文件，替换''字符，然后保存修改后的内容。#remove_nonbreaking_spaces.pyimportcodecsimportsysdefremove_nonbreaking_spaces(input_file,output_file):withcodecs.open(input_file,'r',
    
                    
    • 
                    
  • 分布式消息中间件（十三）——RocketMQ延时消息
                        码炫课堂-码哥
rocketmq专题rocketmq消息中间件
                        
    作者简介：大家好，我是码炫码哥，前中兴通讯、美团架构师，现任某互联网公司CTO，兼职码炫课堂主讲源码系列专题代表作：《jdk源码&多线程&高并发》，《深入tomcat源码解析》，《深入netty源码解析》，《深入dubbo源码解析》，《深入springboot源码解析》，《深入spring源码解析》，《深入redis源码解析》等联系qq：184480602，加我进群，大家一起学习，一起进步，一起对
    
                    
    • 
                    
  • Netty学习 - 编译Netty4.2
                        wisfy_21
Netty学习
                        
    编译Netty4.2版本遇到一些问题：首先是缺失io.netty.util.collection.IntObjectHashMap这类collection包。这个问题的原因是，在netty-common下，这些是需要根据模板生成类，所以需要先编译打包netty-common。在netty-common下执行package的时候，会遇到另一个错误io.netty:netty-dev-tools:ja
    
                    
    • 
                    
  • Springboot 集成 netty-socketio + Vue前端分离
                        Synologs过客
Javajavaajaxsocketwebsocketspring
                        
    Springboot集成netty-socketionetty-socketio：仿`node.js`实现的socket.io服务端1.将WebSocket、AJAX和其它的通信方式全部封装成了统一的通信接口2.使用时，不用担心兼容问题，底层会自动选用最佳的通信方式3.适合进行服务端和客户端双向数据通信pom.xmlcom.corundumstudio.socketionetty-socketio
    
                    
    • 
                    
  • 前后端分离的Netty + WebSocket实现聊天室
                        CRE_MO
websocketpython网络协议
                        
    1.前端WebSocketChatvarsocket;if(!window.WebSocket){window.WebSocket=window.MozWebSocket;}if(window.WebSocket){socket=newWebSocket("ws://localhost:8088/ws");socket.onmessage=function(event){console.log("
    
                    
    • 
                    
  • 【Python系列】Python 解释器的站点配置
                        Kwan的解忧杂货铺@新空间代码工作室
s1Pythonpython开发语言
                        
    欢迎来到我的博客，很高兴能够在这里和您见面！希望您在这里可以感受到一份轻松愉快的氛围，不仅可以获得有趣的内容和知识，也可以畅所欲言、分享您的想法和见解。推荐:kwan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,kafka,Spring,微服务,Netty等常用开发工具系列:罗列常用的开发工具,如IDEA,M
    
                    
    • 
                    
  • iot架构 mqtt netty_一个关于小程序Iot的具体实现（MQTT版）
                        Alfred Cheng
iot架构mqttnetty
                        
    前言Iot，这个名词应该很多人都听过了吧，即大数据、Ai等兴起后也紧跟着研发大潮流的到来，即物联网。传统简单的说就是智能化、程序化的控制硬件设施，大家最容易想到的应该是智能家居，通过一个App或者遥控进行对家具设置的远程控制。而今天要说的是人与物之间的通信控制，且通过互联网产品来执行人的命令，而机器进行应答。竞品说到小程序控制硬件，大家应该立马想到什么产品呢？某拜、某FO、售货机等等，他们的架构上
    
                    
    • 
                                
  • knob UI插件使用
                                    换个号韩国红果果
JavaScriptjsonpknob
                                    
    图形是用canvas绘制的 
 

js代码
var paras = {
			max:800,
			min:100,
			skin:'tron',//button type
			thickness:.3,//button width
			width:'200',//define canvas width.,canvas height
			displayInput:'tr
    
                                
    • 
                                
  • Android+Jquery Mobile学习系列(5)-SQLite数据库
                                    白糖_
JQuery Mobile
                                    
    目录导航 
  
SQLite是轻量级的、嵌入式的、关系型数据库，目前已经在iPhone、Android等手机系统中使用,SQLite可移植性好，很容易使用，很小，高效而且可靠。 
  
因为Android已经集成了SQLite，所以开发人员无需引入任何JAR包，而且Android也针对SQLite封装了专属的API，调用起来非常快捷方便。 
  
我也是第一次接触S
    
                                
    • 
                                
  • impala-2.1.2-CDH5.3.2
                                    dayutianfei
impala
                                    
    最近在整理impala编译的东西，简单记录几个要点： 
根据官网的信息（https://github.com/cloudera/Impala/wiki/How-to-build-Impala）： 
1. 首次编译impala，推荐使用命令： 
${IMPALA_HOME}/buildall.sh -skiptests -build_shared_libs -format 
2.仅编译BE 
${I
    
                                
    • 
                                
  • 求二进制数中1的个数
                                    周凡杨
java算法二进制
                                    
    解法一：    
对于一个正整数如果是偶数，该数的二进制数的最后一位是 0 ，反之若是奇数，则该数的二进制数的最后一位是 1 。因此，可以考虑利用位移、判断奇偶来实现。  
   
   public int bitCount(int x){

       int count = 0;

       while(x!=0){

        if(x%2!=0){  /
    
                                
    • 
                                
  • spring中hibernate及事务配置
                                    g21121
Hibernate
                                    
    hibernate的sessionFactory配置： 
<!-- hibernate sessionFactory配置 -->
<bean id="sessionFactory"
	class="org.springframework.orm.hibernate3.LocalSessionFactoryBean">
	<
    
                                
    • 
                                
  • log4j.properties 使用
                                    510888780
log4j
                                    
    log4j.properties 使用 
一.参数意义说明 
输出级别的种类 
ERROR、WARN、INFO、DEBUG 
ERROR 为严重错误 主要是程序的错误 
WARN 为一般警告，比如session丢失 
INFO 为一般要显示的信息，比如登录登出 
DEBUG 为程序的调试信息 
配置日志信息输出目的地 
log4j.appender.appenderName = fully.qua
    
                                
    • 
                                
  • Spring mvc-jfreeChart柱图（2）
                                    布衣凌宇
jfreechart
                                    
    上一篇中生成的图是静态的，这篇将按条件进行搜索，并统计成图表，左面为统计图，右面显示搜索出的结果。 
第一步：导包 
第二步；配置web.xml(上一篇有代码) 
 
建BarRenderer类用于柱子颜色 
 
import java.awt.Color; 
import java.awt.Paint; 
import org.jfree.chart.renderer.category.BarR
    
                                
    • 
                                
  • 我的spring学习笔记14-容器扩展点之PropertyPlaceholderConfigurer
                                    aijuans
Spring3
                                    
    PropertyPlaceholderConfigurer是个bean工厂后置处理器的实现，也就是BeanFactoryPostProcessor接口的一个实现。关于BeanFactoryPostProcessor和BeanPostProcessor类似。我会在其他地方介绍。 
PropertyPlaceholderConfigurer可以将上下文（配置文件）中的属性值放在另一个单独的标准java
    
                                
    • 
                                
  • maven 之 cobertura 简单使用
                                    antlove
maventestunitcoberturareport
                                    
    1. 创建一个maven项目 
2. 创建com.CoberturaStart.java 
package com;

public class CoberturaStart {
	public void helloEveryone(){
		System.out.println("=================================================
    
                                
    • 
                                
  • 程序的执行顺序
                                    百合不是茶
JAVA执行顺序
                                    
      
  
  刚在看java核心技术时发现对java的执行顺序不是很明白了,百度一下也没有找到适合自己的资料,所以就简单的回顾一下吧 
  
代码如下; 
    经典的程序执行面试题 
//关于程序执行的顺序   
//例如：   
//定义一个基类   
public class A(){   
public A(
    
                                
    • 
                                
  • 设置session失效的几种方法
                                    bijian1013
web.xmlsession失效监听器
                                    
    在系统登录后，都会设置一个当前session失效的时间，以确保在用户长时间不与服务器交互，自动退出登录，销毁session。具体设置很简单，方法有三种：（1）在主页面或者公共页面中加入：session.setMaxInactiveInterval(900);参数900单位是秒，即在没有活动15分钟后，session将失效。这里要注意这个session设置的时间是根据服务器来计算的，而不是客户端。所
    
                                
    • 
                                
  • java jvm常用命令工具
                                    bijian1013
javajvm
                                    
    一.概述 
        程序运行中经常会遇到各种问题，定位问题时通常需要综合各种信息，如系统日志、堆dump文件、线程dump文件、GC日志等。通过虚拟机监控和诊断工具可以帮忙我们快速获取、分析需要的数据，进而提高问题解决速度。 本文将介绍虚拟机常用监控和问题诊断命令工具的使用方法，主要包含以下工具: 
      &nbs
    
                                
    • 
                                
  • 【Spring框架一】Spring常用注解之Autowired和Resource注解
                                    bit1129
Spring常用注解
                                    
    Spring自从2.0引入注解的方式取代XML配置的方式来做IOC之后，对Spring一些常用注解的含义行为一直处于比较模糊的状态，写几篇总结下Spring常用的注解。本篇包含的注解有如下几个： 
 
 Autowired 
 Resource 
 Component 
 Service 
 Controller 
 Transactional 
 
根据它们的功能、目的，可以分为三组，Autow
    
                                
    • 
                                
  • mysql 操作遇到safe update mode问题
                                    bitray
update
                                    
        我并不知道出现这个问题的实际原理,只是通过其他朋友的博客,文章得知的一个解决方案,目前先记录一个解决方法,未来要是真了解以后,还会继续补全. 
 
    在mysql5中有一个safe update mode,这个模式让sql操作更加安全,据说要求有where条件,防止全表更新操作.如果必须要进行全表操作,我们可以执行 
SET
    
                                
    • 
                                
  • nginx_perl试用
                                    ronin47
nginx_perl试用
                                    
    因为空闲时间比较多，所以在CPAN上乱翻，看到了nginx_perl这个项目(原名Nginx::Engine)，现在托管在github.com上。地址见：https://github.com/zzzcpan/nginx-perl 
这个模块的目的，是在nginx内置官方perl模块的基础上，实现一系列异步非阻塞的api。用connector/writer/reader完成类似proxy的功能（这里
    
                                
    • 
                                
  • java-63-在字符串中删除特定的字符
                                    bylijinnan
java
                                    
    

public class DeleteSpecificChars {

	/**
	 * Q 63 在字符串中删除特定的字符
	 * 输入两个字符串，从第一字符串中删除第二个字符串中所有的字符。
	 * 例如，输入”They are students.”和”aeiou”，则删除之后的第一个字符串变成”Thy r stdnts.”
	 */
	public static voi
    
                                
    • 
                                
  • EffectiveJava--创建和销毁对象
                                    ccii
创建和销毁对象
                                    
    本章内容： 
1. 考虑用静态工厂方法代替构造器 
2. 遇到多个构造器参数时要考虑用构建器（Builder模式） 
3. 用私有构造器或者枚举类型强化Singleton属性 
4. 通过私有构造器强化不可实例化的能力 
5. 避免创建不必要的对象 
6. 消除过期的对象引用 
7. 避免使用终结方法 
 
 
1. 考虑用静态工厂方法代替构造器 
    类可以通过
    
                                
    • 
                                
  • [宇宙时代]四边形理论与光速飞行
                                    comsci

                                    
       从四边形理论来推论 为什么光子飞船必须获得星光信号才能够进行光速飞行？ 
 
 
   一组星体组成星座  向空间辐射一组由复杂星光信号组成的辐射频带，按照四边形-频率假说  一组频率就代表一个时空的入口 
 
   那么这种由星光信号组成的辐射频带就代表由这些星体所控制的时空通道，该时空通道在三维空间的投影是一
    
                                
    • 
                                
  • ubuntu server下python脚本迁移数据
                                    cywhoyi
pythonKettlepymysqlcx_Oracleubuntu server
                                    
    因为是在Ubuntu下，所以安装python、pip、pymysql等都极其方便，sudo apt-get install pymysql， 
但是在安装cx_Oracle（连接oracle的模块）出现许多问题，查阅相关资料，发现这边文章能够帮我解决，希望大家少走点弯路。http://www.tbdazhe.com/archives/602 
1.安装python 
2.安装pip、pymysql
    
                                
    • 
                                
  • Ajax正确但是请求不到值解决方案
                                    dashuaifu
Ajaxasync
                                    
    Ajax正确但是请求不到值解决方案 
  
解决方案：1 .     async: false ,    2.     设置延时执行js里的ajax或者延时后台java方法！！！！！！！ 
  
例如： 
  
$.ajax({     &
    
                                
    • 
                                
  • windows安装配置php+memcached
                                    dcj3sjt126com
PHPInstallmemcache
                                    
    Windows下Memcached的安装配置方法 
1、将第一个包解压放某个盘下面，比如在c:\memcached。 
2、在终端（也即cmd命令界面）下输入 'c:\memcached\memcached.exe -d install' 安装。 
3、再输入： 'c:\memcached\memcached.exe -d start' 启动。（需要注意的: 以后memcached将作为windo
    
                                
    • 
                                
  • iOS开发学习路径的一些建议
                                    dcj3sjt126com
ios
                                    
    iOS论坛里有朋友要求回答帖子，帖子的标题是： 想学IOS开发高阶一点的东西，从何开始，然后我吧啦吧啦回答写了很多。既然敲了那么多字，我就把我写的回复也贴到博客里来分享，希望能对大家有帮助。欢迎大家也到帖子里讨论和分享，地址：http://bbs.csdn.net/topics/390920759 
  
下面是我回复的内容： 
  
结合自己情况聊下iOS学习建议，
    
                                
    • 
                                
  • Javascript闭包概念
                                    fanfanlovey
JavaScript闭包
                                    
    1.参考资料 
 
 
 
http://www.jb51.net/article/24101.htm 
 
 
http://blog.csdn.net/yn49782026/article/details/8549462 
 
 
 
 
 
 
2.内容概述 
要理解闭包，首先需要理解变量作用域问题 
内部函数可以饮用外面全局变量 
 
    var n=999;

　　functio
    
                                
    • 
                                
  • yum安装mysql5.6
                                    haisheng
mysql
                                    
    1、安装http://dev.mysql.com/get/mysql-community-release-el7-5.noarch.rpm 
  
2、yum install mysql 
  
3、yum install mysql-server 
  
4、vi /etc/my.cnf   添加character_set_server=utf8
    
                                
    • 
                                
  • po/bo/vo/dao/pojo的详介
                                    IT_zhlp80
javaBOVODAOPOJOpo
                                    
        JAVA几种对象的解释 
PO:persistant object持久对象,可以看成是与数据库中的表相映射的java对象。最简单的PO就是对应数据库中某个表中的一条记录，多个记录可以用PO的集合。PO中应该不包含任何对数据库的操作. 
VO:value object值对象。通常用于业务层之间的数据传递，和PO一样也是仅仅包含数据而已。但应是抽象出的业务对象,可
    
                                
    • 
                                
  • java设计模式
                                    kerryg
java设计模式
                                    
    设计模式的分类： 
   一、 设计模式总体分为三大类： 
 1、创建型模式（5种）：工厂方法模式，抽象工厂模式，单例模式，建造者模式，原型模式。 
 2、结构型模式（7种）：适配器模式，装饰器模式，代理模式，外观模式，桥接模式，组合模式，享元模式。 
 3、行为型模式（11种）：策略模式，模版方法模式，观察者模式，迭代子模式，责任链模式，命令模式，备忘录模式，状态模式，访问者
    
                                
    • 
                                
  • [1]CXF3.1整合Spring开发webservice——helloworld篇
                                    木头.java
springwebserviceCXF
                                    
    Spring 版本3.2.10 
CXF 版本3.1.1 
项目采用MAVEN组织依赖jar 
 
 
我这里是有parent的pom，为了简洁明了，我直接把所有的依赖都列一起了，所以都没version，反正上面已经写了版本 
 

<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="ht
    
                                
    • 
                                
  • Google 工程师亲授：菜鸟开发者一定要投资的十大目标
                                    qindongliang1922
工作感悟人生
                                    
    身为软件开发者，有什么是一定得投资的？ Google 软件工程师 Emanuel Saringan 整理了十项他认为必要的投资，第一项就是身体健康，英文与数学也都是必备能力吗？来看看他怎么说。（以下文字以作者第一人称撰写））  你的健康  无疑地，软件开发者是世界上最久坐不动的职业之一。  每天连坐八到十六小时，休息时间只有一点点，绝对会让你的鲔鱼肚肆无忌惮的生长。肥胖容易扩大罹患其他疾病的风险，
    
                                
    • 
                                
  • linux打开最大文件数量1,048,576
                                    tianzhihehe
clinux
                                    
    File descriptors are represented by the C int type. Not using a special type is often  considered odd, but is, historically, the Unix way. Each Linux process has a maximum number of files th
    
                                
    • 
                                
  • java语言中PO、VO、DAO、BO、POJO几种对象的解释
                                    衞酆夼
javaVOBOPOJOpo
                                    
    PO:persistant object持久对象 
最形象的理解就是一个PO就是数据库中的一条记录。好处是可以把一条记录作为一个对象处理，可以方便的转为其它对象。可以看成是与数据库中的表相映射的java对象。最简单的PO就是对应数据库中某个表中的一条记录，多个记录可以用PO的集合。PO中应该不包含任何对数据库的操作。 
 
BO:business object业务对象 
封装业务逻辑的java对象
    
                                
    •