lixjluck
lixjluck

20110802

Java & JVM 相关

 

  1. 买了一本书 ，深入理解java虚拟机
  2. JMM jsr-133-faq 
  3. jdk7 source code: http://download.java.net/openjdk/jdk7/

 

 

分布式锁相关

 

  1. 拜占庭失效问题
  2. Paxos算法， 分布式系统中消息传输一致性算法
  3. 两个具体实现
    1. google chubby  http://news.cnblogs.com/n/86066/
    2. zookeeper

 

其他

 

  1. bigpipe研究

 

你可能感兴趣的:(20110802)

  • hive mapjoin使用 lvhuiyin hive
    今天遇到一个Hive的问题，如下hivesql：selectf.a,f.bfromAtjoinBfon(f.a=t.aandf.ftime=20110802)该语句中B表有30亿行记录，A表只有100行记录，而且B表中数据倾斜特别严重，有一个key上有15亿行记录，在运行过程中特别的慢，而且在reduece的过程中遇有内存不够而报错。为了解决用户的这个问题，考虑使用mapjoin,mapjoin的
  • Hive mapjoin使用(数据倾斜优化) TechChan Hadoop
    今天遇到一个Hive的问题，如下hivesql：selectf.a,f.bfromAtjoinBfon(f.a=t.aandf.ftime=20110802)该语句中B表有30亿行记录，A表只有100行记录，而且B表中数据倾斜特别严重，有一个key上有15亿行记录，在运行过程中特别的慢，而且在reduece的过程中遇有内存不够而报错。为了解决用户的这个问题，考虑使用mapjoin,mapjoin的
  • Eclipse CDT开发环境的搭建（Windows） iteye_15500
    1.下载并安装MinGW1.1下载MinGWMinGW是指只用自由软件来生成纯粹的Win32可执行文件的编译环境，它是MinimalistGNUonWindows的略称。当前最新版本为：mingw-get-inst-20110802.exe1.官方下载地址：http://downloads.sourceforge.net/project/mingw/Automated%20MinGW%20Inst
  • hive mapjoin使用 xqy1522 hivejoinmapreducesql
    今天遇到一个hive的问题，如下hivesql：selectf.a,f.bfromAtjoinBfon(f.a=t.aandf.ftime=20110802)该语句中B表有30亿行记录，A表只有100行记录，而且B表中数据倾斜特别严重，有一个key上有15亿行记录，在运行过程中特别的慢，而且在reduece的过程中遇有内存不够而报错。为了解决用户的这个问题，考虑使用mapjoin,mapjoin的
  • hive 中的map join 操作 weifengLD 大数据
    今天遇到一个Hive的问题，如下hivesql：selectf.a,f.bfromAtjoinBfon(f.a=t.aandf.ftime=20110802)该语句中B表有30亿行记录，A表只有100行记录，而且B表中数据倾斜特别严重，有一个key上有15亿行记录，在运行过程中特别的慢，而且在reduece的过程中遇有内存不够而报错。为了解决用户的这个问题，考虑使用mapjoin,mapjoin的
  • mapjoin解析 love others as self MR
    今天遇到一个hive的问题，如下hivesql：selectf.a,f.bfromAtjoinBfon(f.a=t.aandf.ftime=20110802)该语句中B表有30亿行记录，A表只有100行记录，而且B表中数据倾斜特别严重，有一个key上有15亿行记录，在运行过程中特别的慢，而且在reduece的过程中遇有内存不够而报错。为了解决用户的这个问题，考虑使用mapjoin,mapjoin的
  • hive mapjoin 使用 和个人理解 赶路人儿 hive
    1、遇到一个hive的问题，如下hivesql：selectt1.a,t1.bfromtablet1jointable2t2on(t1.a=t2.aandt1.datecol=20110802)该语句中B表有30亿行记录，t1表只有100行记录，而且t2表中数据倾斜特别严重，有一个key上有15亿行记录，在运行过程中特别的慢，而且在reduece的过程中遇有内存不够而报错。为了解决用户的这个问题，
  • hive mapjoin使用 hive
    link:http://blog.csdn.net/xqy1522/article/details/6699740 今天遇到一个hive的问题，如下hive sql：   select f.a,f.b from A t join B f  on ( f.a=t.a and f.ftime=20110802)   该语句中B表有30亿行记录，A表只有1
  • eclipse3.7.2+cdt+mingw Lanfog
    开发环境  1、MinGW   下载并安装（参考:http://blog.csdn.net/hemingwang0902/article/details/6889595）MinGW是指只用自由软件来生成纯粹的Win32可执行文件的编译环境，它是MinimalistGNUonWindows的略称。当前最新版本为：mingw-get-inst-20110802.exe1.官方下载地址：http://d
  • hive mapjoin使用 An342647823
    link:http://blog.csdn.net/xqy1522/article/details/6699740今天遇到一个hive的问题，如下hivesql： selectf.a,f.bfromAtjoinBf on(f.a=t.aandf.ftime=20110802)  该语句中B表有30亿行记录，A表只有100行记录，而且B表中数据倾斜特别严重，有一个key上有15亿行记录，在运行过程中
  • 理解Linux系统负荷 leonzhouwei
    理解Linux系统负荷作者：http://www.kuqin.com/linux/20110802/92991.html出处：http://www.kuqin.com/linux/20110802/92991.html一、查看系统负荷如果你的电脑很慢，你或许想查看一下，它的工作量是否太大了。在Linux系统中，我们一般使用uptime命令查看（w命令和top命令也行）。（另外，它们在苹果公司的Ma
  • hive mapjoin 使用 和个人理解 原创学无止尽 Hive
    遇到一个hive的问题，如下hivesql：selectt1.a,t1.bfromtablet1jointable2t2on(t1.a=t2.aandt1.datecol=20110802)该语句中B表有30亿行记录，t1表只有100行记录，而且t2表中数据倾斜特别严重，有一个key上有15亿行记录，在运行过程中特别的慢，而且在reduece的过程中遇有内存不够而报错。为了解决用户的这个问题，考虑
  • ffmpeg在win32中的编译 lptsun
    MinGW+msys百度出来的多数说的比较麻烦，特别是下载一些MinGW+msys的文件，随着时间的更新，实际上已经没有那么麻烦了。1.首先去下载MinGW，去http://sourceforge.net/搜索mingw，下载一个最新的名字类似于mingw-get-inst-20110802.exe的文件。这个文件一般只有几百K字节，下完以后双击运行，按提示安装，在需要选择的时候把和C、C++、m
  • FFmepg - 编译 iamshaofa cwindowsshellMicrosoftdllBuild
    FFmpeg的官网http://ffmpeg.org想要得到FFmpeg在Windows下可用的dll，需要使用MinGW+MSYS,VC2008的编译环境。总体上编译会很顺利，下面详细介绍其步骤。 1.下载MinGW到sourceforge.net上下载MinGW,下载mingw-get-inst-20110802.exe类似这样的东西，这是一个在线安装包。打开后，会自动下载MinGW,MSYS
  • hive mapjoin使用 datong838 并行计算
    今天遇到一个hive的问题，如下hivesql：selectf.a,f.bfromAtjoinBf on(f.a=t.aandf.ftime=20110802) 该语句中B表有30亿行记录，A表只有100行记录，而且B表中数据倾斜特别严重，有一个key上有15亿行记录，在运行过程中特别的慢，而且在reduece的过程中遇有内存不够而报错。为了解决用户的这个问题，考虑使用mapjoin,mapjoi
  • 理解Linux系统负荷 onlyonename linux工作语言终端
    转自：http://www.kuqin.com/linux/20110802/92991.html一、查看系统负荷如果你的电脑很慢，你或许想查看一下，它的工作量是否太大了。在Linux系统中，我们一般使用uptime命令查看（w命令和top命令也行）。（另外，它们在苹果公司的Mac电脑上也适用。）你在终端窗口键入uptime，系统会返回一行信息。这行信息的后半部分，显示"loadaverage"，
  • Eclipse+CDT+MinGW出错：Error: Cannot run program "gcc": ????????解决方法 guzicheng
    Eclipse+CDT+MinGW出错：Error:Cannotrunprogram"gcc":????????解决方法:突然想在eclipse中试试写CC++代码，可是却一直不顺，具体情况如下。工具：eclipse-jee-indigo-SR1-win32.zip+cdt-master-8.0.0.zip+mingw-get-inst-20110802.exe写了简单的HelloWord.c，没
  • Eclipse CDT开发环境的搭建（Windows） yanghuidang eclipse
    1.下载并安装MinGW1.1下载MinGWMinGW是指只用自由软件来生成纯粹的Win32可执行文件的编译环境，它是MinimalistGNUonWindows的略称。当前最新版本为：mingw-get-inst-20110802.exe1.官方下载地址：http://downloads.sourceforge.net/project/mingw/Automated%20MinGW%20Inst
  • Eclipse CDT开发环境的搭建（Windows） hemingwang0902 eclipsejdkwindowsapplicationideComponents
    1.  下载并安装MinGW1.1   下载MinGWMinGW是指只用自由软件来生成纯粹的Win32可执行文件的编译环境，它是MinimalistGNUonWindows的略称。当前最新版本为：mingw-get-inst-20110802.exe1.官方下载地址：http://downloads.sourceforge.net/project/mingw/Automated%20MinGW%2
  • hive mapjoin使用 xqy1522 mapreduceJOINsql
    今天遇到一个hive的问题，如下hivesql：selectf.a,f.bfromAtjoinBf on(f.a=t.aandf.ftime=20110802) 该语句中B表有30亿行记录，A表只有100行记录，而且B表中数据倾斜特别严重，有一个key上有15亿行记录，在运行过程中特别的慢，而且在reduece的过程中遇有内存不够而报错。为了解决用户的这个问题，考虑使用mapjoin,mapjoi
  • 11款用于优化、分析源代码的Java工具 sealbird java
    from http://java.csdn.net/a/20110802/302514.html 本文将提供一些工具，帮助你优化代码以及检查源代码中的潜在问题。 1. PMD from http://pmd.sourceforge.net/ PMD能够扫描Java 源代码，查找类似以下的潜在问题： 可能的bug——try/catch/finally/switch
  • 20110802 lixjluck
    Java & JVM 相关   买了一本书 ，深入理解java虚拟机 JMM jsr-133-faq  jdk7 source code: http://download.java.net/openjdk/jdk7/     分布式锁相关   拜占庭失效问题 Paxos算法， 分布式系
  • 猫咪和水的那些事儿 丸子 YxY 视频水猫洗澡
    事实证明，确实不是所有的猫都怕水，玩的很兴奋的也有的是…©丸子for鸸鹋动物园,2011.|楼被抢了4层了...转发本文地址猫咪和水的那些事儿http://www.ermiao.com/video/20110802/20895.html本文标签：水,洗澡,猫继续阅读分类【视频】下的更多精彩小帖士，看不见图或者看不见视频的，请点这里试试看|欢迎给动物园投稿欢迎使用feed.ermiao.com订阅鸸
  • 每日动物园20110802 丸子 Clover 趣图狗狐狸每日动物园松鼠
    今天的这几张全部都和镜头有关，要不就是抢镜头的，要不就是镜头感超好的…©丸子for鸸鹋动物园,2011.|楼被抢了3层了...转发本文地址每日动物园20110802http://www.ermiao.com/gallery/20110802/20886.html本文标签：松鼠,每日动物园,狐狸,狗,猫,鸟继续阅读分类【趣图】下的更多精彩小帖士，看不见图或者看不见视频的，请点这里试试看|欢迎给动物园
  • 动物手影指南 丸子 Lc 指南趣图动物手影皮影
    以后聚会的时候，可以照此玩玩看…©丸子for鸸鹋动物园,2011.|抢个沙发吧！转发本文地址动物手影指南http://www.ermiao.com/gallery/20110802/20883.html本文标签：动物,手影,指南,皮影继续阅读分类【趣图】下的更多精彩小帖士，看不见图或者看不见视频的，请点这里试试看|欢迎给动物园投稿欢迎使用feed.ermiao.com订阅鸸鹋动物园搞不好这些您也想
  • tomcat基础与部署发布 暗黑小菠萝 Tomcat java web
    从51cto搬家了，以后会更新在这里方便自己查看。 做项目一直用tomcat，都是配置到eclipse中使用，这几天有时间整理一下使用心得，有一些自己配置遇到的细节问题。 Tomcat：一个Servlets和JSP页面的容器，以提供网站服务。 一、Tomcat安装     安装方式：①运行.exe安装包      &n
  • 网站架构发展的过程 ayaoxinchao 数据库应用服务器网站架构
    1.初始阶段网站架构：应用程序、数据库、文件等资源在同一个服务器上 2.应用服务和数据服务分离：应用服务器、数据库服务器、文件服务器 3.使用缓存改善网站性能：为应用服务器提供本地缓存，但受限于应用服务器的内存容量，可以使用专门的缓存服务器，提供分布式缓存服务器架构 4.使用应用服务器集群改善网站的并发处理能力：使用负载均衡调度服务器，将来自客户端浏览器的访问请求分发到应用服务器集群中的任何
  • [信息与安全]数据库的备份问题 comsci 数据库
          如果你们建设的信息系统是采用中心-分支的模式,那么这里有一个问题   如果你的数据来自中心数据库,那么中心数据库如果出现故障,你的分支机构的数据如何保证安全呢?    是否应该在这种信息系统结构的基础上进行改造,容许分支机构的信息系统也备份一个中心数据库的文件呢?  &n
  • 使用maven tomcat plugin插件debug关联源代码 商人shang mavendebug查看源码tomcat-plugin
    *首先需要配置好'''maven-tomcat7-plugin'''，参见[[Maven开发Web项目]]的'''Tomcat'''部分。 *配置好后，在[[Eclipse]]中打开'''Debug Configurations'''界面，在'''Maven Build'''项下新建当前工程的调试。在'''Main'''选项卡中点击'''Browse Workspace...'''选择需要开发的
  • 大访问量高并发 oloz 大访问量高并发
    大访问量高并发的网站主要压力还是在于数据库的操作上，尽量避免频繁的请求数据库。下面简 要列出几点解决方案： 01、优化你的代码和查询语句，合理使用索引 02、使用缓存技术例如memcache、ecache将不经常变化的数据放入缓存之中 03、采用服务器集群、负载均衡分担大访问量高并发压力 04、数据读写分离 05、合理选用框架，合理架构(推荐分布式架构)。
  • cache 服务器 小猪猪08 cache
    Cache   即高速缓存.那么cache是怎么样提高系统性能与运行速度呢？是不是在任何情况下用cache都能提高性能？是不是cache用的越多就越好呢？我在近期开发的项目中有所体会，写下来当作总结也希望能跟大家一起探讨探讨，有错误的地方希望大家批评指正。 　　1.Cache   是怎么样工作的? 　　Cache   是分配在服务器上
  • mysql存储过程 香水浓 mysql
    Description:插入大量测试数据 use xmpl; drop procedure if exists mockup_test_data_sp; create procedure mockup_test_data_sp( in number_of_records int ) begin declare cnt int; declare name varch
  • CSS的class、id、css文件名的常用命名规则 agevs JavaScriptUI框架Ajaxcss
      CSS的class、id、css文件名的常用命名规则     (一)常用的CSS命名规则 　　头：header 　　内容：content/container 　　尾：footer 　　导航：nav 　　侧栏：sidebar 　　栏目：column 　　页面外围控制整体布局宽度：wrapper 　　左右中：left right
  • 全局数据源 AILIKES javatomcatmysqljdbcJNDI
    实验目的：为了研究两个项目同时访问一个全局数据源的时候是创建了一个数据源对象，还是创建了两个数据源对象。 1：将diuid和mysql驱动包（druid-1.0.2.jar和mysql-connector-java-5.1.15.jar）copy至%TOMCAT_HOME%/lib下；2：配置数据源，将JNDI在%TOMCAT_HOME%/conf/context.xml中配置好,格式如下：&l
  • MYSQL的随机查询的实现方法 baalwolf mysql
    MYSQL的随机抽取实现方法。举个例子，要从tablename表中随机提取一条记录，大家一般的写法就是：SELECT * FROM tablename ORDER BY RAND() LIMIT 1。但是，后来我查了一下MYSQL的官方手册，里面针对RAND()的提示大概意思就是，在ORDER BY从句里面不能使用RAND()函数，因为这样会导致数据列被多次扫描。但是在MYSQL 3.23版本中，
  • JAVA的getBytes()方法 bijian1013 javaeclipseunixOS
        在Java中，String的getBytes()方法是得到一个操作系统默认的编码格式的字节数组。这个表示在不同OS下，返回的东西不一样！      String.getBytes(String decode)方法会根据指定的decode编码返回某字符串在该编码下的byte数组表示，如： byte[] b_gbk = "
  • AngularJS中操作Cookies bijian1013 JavaScriptAngularJSCookies
            如果你的应用足够大、足够复杂，那么你很快就会遇到这样一咱种情况：你需要在客户端存储一些状态信息，这些状态信息是跨session(会话)的。你可能还记得利用document.cookie接口直接操作纯文本cookie的痛苦经历。         幸运的是，这种方式已经一去不复返了，在所有现代浏览器中几乎
  • [Maven学习笔记五]Maven聚合和继承特性 bit1129 maven
    Maven聚合   在实际的项目中，一个项目通常会划分为多个模块，为了说明问题，以用户登陆这个小web应用为例。通常一个web应用分为三个模块： 1. 模型和数据持久化层user-core, 2. 业务逻辑层user-service以 3. web展现层user-web， user-service依赖于user-core user-web依赖于user-core和use
  • 【JVM七】JVM知识点总结 bit1129 jvm
      1. JVM运行模式 1.1 JVM运行时分为-server和-client两种模式，在32位机器上只有client模式的JVM。通常，64位的JVM默认都是使用server模式，因为server模式的JVM虽然启动慢点，但是，在运行过程，JVM会尽可能的进行优化 1.2 JVM分为三种字节码解释执行方式：mixed mode, interpret mode以及compiler
  • linux下查看nginx、apache、mysql、php的编译参数 ronin47
    在linux平台下的应用，最流行的莫过于nginx、apache、mysql、php几个。而这几个常用的应用，在手工编译完以后，在其他一些情况下（如：新增模块），往往想要查看当初都使用了那些参数进行的编译。这时候就可以利用以下方法查看。 1、nginx [root@361way ~]# /App/nginx/sbin/nginx -V nginx: nginx version: nginx/
  • unity中运用Resources.Load的方法？ brotherlamp unity视频unity资料unity自学unityunity教程
    问：unity中运用Resources.Load的方法？ 答：Resources.Load是unity本地动态加载资本所用的方法,也即是你想动态加载的时分才用到它,比方枪弹,特效,某些实时替换的图像什么的,主张此文件夹不要放太多东西,在打包的时分,它会独自把里边的一切东西都会集打包到一同,不论里边有没有你用的东西,所以大多数资本应该是自个建文件放置 1、unity实时替换的物体即是依据环境条件
  • 线段树-入门 bylijinnan java算法线段树
    /** * 线段树入门 * 问题：已知线段[2,5] [4,6] [0,7]；求点2,4,7分别出现了多少次 * 以下代码建立的线段树用链表来保存，且树的叶子结点类似[i,i] * * 参考链接：http://hi.baidu.com/semluhiigubbqvq/item/be736a33a8864789f4e4ad18 * @author lijinna
  • 全选与反选 chicony 全选
      <!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN" "http://www.w3.org/TR/html4/loose.dtd"> <html> <head> <title>全选与反选</title>
  • vim一些简单记录 chenchao051 vim
    mac在/usr/share/vim/vimrc linux在/etc/vimrc   1、问：后退键不能删除数据，不能往后退怎么办？       答：在vimrc中加入set backspace=2   2、问：如何控制tab键的缩进？       答：在vimrc中加入set tabstop=4 (任何
  • Sublime Text 快捷键 daizj 快捷键sublime
    [size=large][/size]Sublime Text快捷键：Ctrl+Shift+P：打开命令面板Ctrl+P：搜索项目中的文件Ctrl+G：跳转到第几行Ctrl+W：关闭当前打开文件Ctrl+Shift+W：关闭所有打开文件Ctrl+Shift+V：粘贴并格式化Ctrl+D：选择单词，重复可增加选择下一个相同的单词Ctrl+L：选择行，重复可依次增加选择下一行Ctrl+Shift+L：
  • php 引用(&)详解 dcj3sjt126com PHP
    在PHP 中引用的意思是：不同的名字访问同一个变量内容. 与Ｃ语言中的指针是有差别的．Ｃ语言中的指针里面存储的是变量的内容在内存中存放的地址 变量的引用 PHP 的引用允许你用两个变量来指向同一个内容  复制代码代码如下: <?  $a="ABC";  $b =&$a;  echo
  • SVN中trunk,branches,tags用法详解 dcj3sjt126com SVN
    Subversion有一个很标准的目录结构，是这样的。比如项目是proj，svn地址为svn://proj/，那么标准的svn布局是svn://proj/|+-trunk+-branches+-tags这是一个标准的布局，trunk为主开发目录，branches为分支开发目录，tags为tag存档目录（不允许修改）。但是具体这几个目录应该如何使用，svn并没有明确的规范，更多的还是用户自己的习惯。
  • 对软件设计的思考 e200702084 设计模式数据结构算法ssh活动
    软件设计的宏观与微观    软件开发是一种高智商的开发活动。一个优秀的软件设计人员不仅要从宏观上把握软件之间的开发，也要从微观上把握软件之间的开发。宏观上，可以应用面向对象设计，采用流行的SSH架构，采用web层，业务逻辑层，持久层分层架构。采用设计模式提供系统的健壮性和可维护性。微观上，对于一个类，甚至方法的调用，从计算机的角度模拟程序的运行情况。了解内存分配，参数传
  • 同步、异步、阻塞、非阻塞 geeksun 非阻塞
    同步、异步、阻塞、非阻塞这几个概念有时有点混淆，在此文试图解释一下。   同步：发出方法调用后，当没有返回结果，当前线程会一直在等待（阻塞）状态。 场景：打电话，营业厅窗口办业务、B/S架构的http请求-响应模式。   异步：方法调用后不立即返回结果，调用结果通过状态、通知或回调通知方法调用者或接收者。异步方法调用后，当前线程不会阻塞，会继续执行其他任务。 实现：
  • Reverse SSH Tunnel 反向打洞實錄 hongtoushizi ssh
    實際的操作步驟： # 首先，在客戶那理的機器下指令連回我們自己的 Server，並設定自己 Server 上的 12345 port 會對應到幾器上的 SSH port ssh -NfR 12345:localhost:22 [email protected] # 然後在 myhost 的機器上連自己的 12345 port，就可以連回在客戶那的機器 ssh localhost -p 1
  • Hibernate中的缓存 Josh_Persistence 一级缓存Hiberante缓存查询缓存二级缓存
    Hibernate中的缓存   一、Hiberante中常见的三大缓存：一级缓存，二级缓存和查询缓存。 Hibernate中提供了两级Cache，第一级别的缓存是Session级别的缓存，它是属于事务范围的缓存。这一级别的缓存是由hibernate管理的，一般情况下无需进行干预；第二级别的缓存是SessionFactory级别的缓存，它是属于进程范围或群集范围的缓存。这一级别的缓存
  • 对象关系行为模式之延迟加载 home198979 PHP架构延迟加载
    形象化设计模式实战     HELLO!架构   一、概念 Lazy Load：一个对象，它虽然不包含所需要的所有数据，但是知道怎么获取这些数据。 延迟加载貌似很简单，就是在数据需要时再从数据库获取，减少数据库的消耗。但这其中还是有不少技巧的。     二、实现延迟加载 实现Lazy Load主要有四种方法：延迟初始化、虚
  • xml 验证 pengfeicao521 xmlxml解析
    有些字符，xml不能识别，用jdom或者dom4j解析的时候就报错 public static void testPattern() { // 含有非法字符的串 String str =       "Jamey&#52828;&#01;&#02;&#209;&#1282
  • div设置半透明效果 spjich css半透明
    为div设置如下样式：   div{filter:alpha(Opacity=80);-moz-opacity:0.5;opacity: 0.5;}        说明： 1、filter：对win IE设置半透明滤镜效果，filter:alpha(Opacity=80)代表该对象80%半透明，火狐浏览器不认2、-moz-opaci
  • 你真的了解单例模式么？ w574240966 java单例设计模式jvm
        单例模式，很多初学者认为单例模式很简单，并且认为自己已经掌握了这种设计模式。但事实上，你真的了解单例模式了么。   一，单例模式的5中写法。（回字的四种写法，哈哈。）     1，懒汉式           （1）线程不安全的懒汉式 public cla
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他