- 大数据手册(Spark)--Spark安装配置
WilenWu
数据分析(DataAnalysis)大数据spark分布式
本文默认在zsh终端安装配置,若使用bash终端,环境变量的配置文件相应变化。若安装包下载缓慢,可复制链接到迅雷下载,亲测极速~准备工作Spark的安装过程较为简单,在已安装好Hadoop的前提下,经过简单配置即可使用。假设已经安装好了hadoop(伪分布式)和hive,环境变量如下JAVA_HOME=/usr/opt/jdkHADOOP_HOME=/usr/local/hadoopHIVE_HO
- HIve项目入门 环境部署遇到的问题及解决方案
Manchesterr
数据分析岗位hivehadoop数据仓库
环境布置的步骤建议是jdk,hadoophive这几个分别去下载,参考以下几个安装教程:【主要参考:傻瓜式教程】Windows下安装HiveMySQL版【附安装Hadoop教程】全网最详细的图文教程【有一些补充的内容】:Windows下安装Hive遇到的几个问题(一)端口50070能够打开,但是端口8088打不开,显示拒绝连接网上有很多种解决办法,有些是跟yarn.site文件有关系,防火墙之类的
- Apache Kyuubi 讲解与实战操作
大数据老司机
Kyuubi大数据SparkKyuubi大数据
文章目录一、概述二、SparkKyuubi架构三、Hadoop基础环境安装1)hadoop下载部署包2)创建网络3)部署MySQL4)部署HadoopHive四、SparkKyuubi安装1)下载Kyuubi2)下载Spark32)配置Kyuubi(Spark3)3)启动Kyuubi4)测试使用五、ApacheKyuubiHA部署1)部署Zookeeper3)KyuubiHA配置4)启动服务5)测
- 13-数据采集项目03
YuPangZa
大数据大数据openresty
一、Hive上的数据导入##4.创建ods层[
[email protected]]#beeline-ujdbc:hive2://caiji:10000-nroot-p123456-e"createdatabaseifnotexistsods_news"[
[email protected]]#beeline-ujdbc:hive2://caiji:10000-nroot-p12345
- 2023.11.13 hive数据仓库之分区表与分桶表操作,与复杂类型的运用
白白的wj
数据仓库hivehadoop
目录0.hadoophive的文档1.一级分区表2.一级分区表练习23.创建多级分区表4.分区表操作5.分桶表6.分桶表进行排序7.分桶的原理8.hive的复杂类型9.array类型:又叫数组类型,存储同类型的单数据的集合10.struct类型:又叫结构类型,可以存储不同类型单数据的集合11.map类型:又叫映射类型,存储键值对数据的映射(根据key找value)0.hadoophive的文档hi
- Hive安装到配置-2021年11月23日
JiaJunRun
hivelinux工具安装javahadooplinuxhive大数据
HadoopHive篇Hive安装到配置前言(一)Hive集群规划(二)安装MySql官网下载需要的包把他们下载到CentOS的`/usr/local/src`目录下安装包,注意依赖,需要联网开启服务器并初始化密码,使用的命令和命令详解:登录MySql:设置密码等级和修改密码命令查看`showvariableslike'character%';`(三)Hive安装下载Hive安装包下载后上传到Ce
- 《10天入门Tableau数据分析》-01功能介绍
柯凌
本章将重点从数据的连接及工作区功能解析2个部分介绍下Tableau的功能一、Tableau功能介绍-连接数据Tableau可以快速地连接到各类数据源,Excel、TextFile和Access等数据文本、Oracle、Mysql、IBMDB2、HadoopHive等各种数据库文件接下来将简单介绍下如何连接一般的数据文件和存储在服务器上的数据库1、数据文件连接:打开TableauDesktop,选择
- Apache Hive
liyantower
hivehadoop数据仓库
目录数据仓库(DW)SQL语法分类Hive和Hadoop之间的关系(底层是HadoopHive将SQL转换为MapReduce)为什么使用Hive使用HadoopMapReduce直接处理数据所面临的问题使用Hive处理数据的好处对Hive的理解ApacheHive--架构图组件用户接口元数据存储Driver驱动程序、包括语法解析器、计划编译器、优化器、执行器执行引擎数据仓库(DW)用于存储、分析
- Hive正则表达式
小碧小琳
参考维基百科、HadoopHive概念学习系列之hive的正则表达式初步(六)和Hive正则匹配函数之前没有在意过正则表达式,但是工作组不可避免的遇到了,感觉也比较重要,就花点时间理解一下。一、正则表达式简介正则表达式的目的:对字符串str进行解析,用正则表达式(pattern)进行匹配,并得到我们想要的符合模板pattern的字符串。一个正则表达式通常被称为一个模式(pattern),为用来描述
- 基于Linux安装Hive
Matrix70
Hivelinuxhive运维hadoophdfs大数据
Hive安装包下载地址Indexof/dist/hive上传解压[root@masteropt]#cd/usr/local/[root@masterlocal]#tar-zxvf/opt/apache-hive-3.1.2-bin.tar.gz重命名及更改权限mvapache-hive-3.1.2-binhivechown-Rhadoop:hadoophive配置环境变量#编辑配置vi/etc/p
- 让大数据平台数据安全可见-行云管家
行云管家
大数据信息安全
数字化经济在快速发展,大数据时代已经到来,大数据已经成为企业和政府决策的重要依据。然而大数据行业快速发展所带来的一系列安全问题也继续解决,例如数据安全更难保障,例如认证体系不完善等等。为此行云管家推出了大数据平台数据安全管理解决方案,让大数据平台数据安全可见。行云管家大数据平台数据操作安全管理解决方案主要特性1、支持主流大数据平台:支持业界主流大数据平台,HadoopHive\Vertica\SA
- docker 构建hadoop 环境
xiao_kong
技能库docker相关linux相关shell相关hadoophive准备文件jdk安装包:jdk-8u211-linux-x64.tar.gzhadoop安装包:hadoop-tar.gzhive安装包:hive-x-x.tar.gz1-dockerfile【jdk】文件#CentOSwithJDK8#Authorqiwei#buildanewimagewithbasiccentosFROMce
- 104_es生产集群备份恢复之部署hadoop hdfs分布式文件存储系统
小山居
104_es生产集群备份恢复之部署hadoophdfs分布式文件存储系统hadoophdfs是什么的同学,简单的介绍,不会花太多时间,hadoop当前大数据领域的事实上的一个标准hadoophdfs,提供的是分布式的文件存储,数据存储hadoopyarn,提供的是分布式的资源调度hadoopmapreduce,提供的是分布式的计算引擎,跑在yarn上面的,由yarn去做资源调度hadoophive
- 邮政储蓄银行面试题
孩子加油孩子
面试题大数据java面试题
一面:4,5个人看着简历来问:1.postgresql原理了解吗?2.postgres调优是怎么进行的?都调哪些参数3.java技术栈都用哪些?4.springboot和springcloud有什么区别?数据调优:是对软件配置调优还是对sql调优?sql调优的思路:pg的运行模式:数据库性能调优?springboot和springcloud的区别;hadoophive有没有搭建过;hadoop的管
- hive学习(仅供参考)
Triumph-CP
hive学习hadoop
hive搭建Hive什么是hiveHive的优势和特点hive搭建解压、改名修改环境变量添加hive-site.xml将maven架包拷贝到hive替换一下gua包使环境变量生效初始化安装成功Hive什么是hive将结构化的数据文件映射为数据库表提供类sql的查询语言HQL(HiveQueryLanguage)Hive让更多的人使用HadoopHive的优势和特点提供了一个简单的优化模型HQL类S
- Hive2.3.4安装[hadoop完全分布式中]
57山本无忧
一、安装HadoopHive运行在Hadoop环境之上,因此需要hadoop环境,本次在安装在hadoop完全分布式模式的namennode节点上请参考:hadoop搭建[完全分布式]二、安装Hive下载[hadoop@s101/home/hadoop]$cd/app/[hadoop@s101/app]$wgethttp://archive.apache.org/dist/hive/stable-
- 推荐算法-协同过滤1 概述
limus
协同过滤用户一起和网站互动,使得自己的推荐列表不断过滤掉不感兴趣的物品,从而越来越满足自己的要求。用户行为用户行为举例当当网浏览“”数据挖掘导论“,推荐“还买过”web数据挖掘用户行为的提取从日志中挖掘会话日志->记录查询+返回结果+点击。评分系统:视频的喜欢/不喜欢和豆瓣评论的5级用户行为的存储hadoopHive,Googledremel,hadoopdrill用户行为的特点用户越活跃,越倾向
- Spark处理数据的速度为什么比Hive更快?
LiJiaSi
考察:Spark和Hadoop运行机制的理解,对技术应用场景的敏感性和理解程度,这对工作的具体质量有很大的影响。SparkSQL比HadoopHive快,是有一定条件的,而且不是SparkSQL的引擎比Hive的引擎快,相反,Hive的HQL引擎还比SparkSQL的引擎更快。其实,关键还是在于Spark本身快。那么Spark为什么快呢?消除了冗余的HDFS读写Hadoop每次shuffle操作后
- Hive3.1.2安装指南
CHILDE Ley
bug挖掘机hivehadoop大数据
安装Hive3.1.2下载并解压Hive安装包sudotar-zxvf./Downloads/apache-hive-3.1.2-bin.tar.gz-C/usr/local#解压到/usr/local中cd/usr/local/sudomvapache-hive-3.1.2-binhive#将文件夹名改为hivesudochown-Rhadoop:hadoophive#修改文件权限配置环境变量使
- 推荐系统-Hive基础
White Root
数据库hivehadoop大数据
Hive基本操作基本概念功能说明架构hive和hadoop数据模型安装部署安装启动基本操作hive的内部表和外部表分区表动态分区Hive函数Hive内置运算符和内置函数Hive自定义函数综合案例基本概念功能说明操作接口采用类SQL法,提供快速开发的能力避免了去写MapReduce,减少开发人员的学习成本功能扩展很方便架构hive和hadoopHive利用HDFS存储数据,利用MapReduce查询
- 推荐系统学习笔记目录
贪钱算法还我头发
AI#RecommendationSystemhivesparkhadoop
根据b站视频推荐系统算法基础+综合项目实战(大牛老师主讲)整理的学习笔记推荐系统学习笔记目录推荐系统介绍推荐算法HadoopHive&HBaseSparkcoreSparkSQL&Sparkstreaming推荐系统案例
- Greenplum企业应用实战(笔记):第一章 greenplum简介
凉秋_不见春暖
第一章greenplum简介[TOC]1.1greenplum的起源和发展历程针对数据密集型计算中的海量数据处理这一高效的数据管理功能。比较典型的解决方案有Teradata、Greenplum、HadoopHive、OracleExadata、IBMNetteza等1.2OLTP与OLAP数据库系统一般分为两种类型:OLTP、OLAP:OLTP(On-LineTransactionProcessi
- Hive学习
予早
Hive学习标签(空格分隔):HadoopHive官网地址:https://hive.apache.org/下载地址:http://www-us.apache.org/dist/hive/hive-2.1.1/官方文档:https://cwiki.apache.org/confluence/display/Hive/GettingStarted安装与配置#下载解压wgethttp://www-eu
- 并发 kinit 导致 kerberos GSS initiate failed 定位与解决
六层楼那么高
线上任务调度工具执行HadoopHive相关的任务会偶发任务执行失败的问题,日志报错为Kerberos认证失败。查看调度工具的运行逻辑:每次执行任务前先kinit认证,再执行任务,考虑到最近迁移任务量大,且多为单个租户的任务,怀疑是该租户并发kinit导致,经一系列的测试与验证,笔者确认了问题的原因,使用一种更优的方案解决了集群租户并发认证的问题。1.问题发现大数据平台Hadoop的安全认证是基于
- Python连接HDFS实现文件上传下载及Pandas转换文本文件到CSV操作
1.目标通过hadoophive或spark等数据计算框架完成数据清洗后的数据在HDFS上爬虫和机器学习在Python中容易实现在Linux环境下编写Python没有pyCharm便利需要建立Python与HDFS的读写通道2.实现安装Python模块pyhdfs版本:Python3.6,hadoop2.9读文件代码如下frompyhdfsimportHdfsClientclient=HdfsCl
- 宙斯 安装部署
仲景武
hadoophive
http://central.maven.org/maven2/com/google/guava/guava/18.0/guava-18.0.jar版本太老HADOOP_CONF_DIR1.一定要在linux设置hadoophive环境变量,否则找不到配置文件,执行时候还报错没有执行权限,这个错误很容易误导人。2.拷贝hadoop2.5.2jar到工程lib下面(hadoop-core在2x版本已
- Hadoo系列之Hive安装和使用(三)
梦Dreamer
大数据
hive下载地址:http://www.apache.org/dyn/closer.cgi/hive/hive的安装tar-zxvfapache-hive-3.1.2-bin.tar.gz#解压mvhive#修改文件名chown-Rhadoop:hadoophive#修改文件权限mkdir-phive/warehouse#创建元数据存储文件夹chmoda+rwx-hive/warehouse#修改
- 表输入帮助文档
CKettle
CKettle插件说明文档sql数据库
表输入步骤用于将数据源的数据加载到Kettle转换中的行集,可以说是数据从持久化到内存的一种加载变换,故名为输入。加载内部过程,就是通过JDBC连接到数据源执行SQL语句,将返回结果解析为行集,传递给下一个步骤。注意,上文中数据源并不一定是关系数据库,可以是任何支持JDBC驱动的存储方式,例如HadoopHive、Impala、LucidDB、SAP等。SQL语句可以固定不带参数,也可以通过变量来
- spark与hadoop的关联和区别,以及spark为什么那么快
小爷欣欣
大数据
spark为什么快?SparkSQL比HadoopHive快,是有一定条件的,而且不是SparkSQL的引擎比Hive的引擎快,相反,Hive的HQL引擎还比SparkSQL的引擎更快。其实,关键还是在于Spark本身快。1,Spark是基于内存的计算,而Hadoop是基于磁盘的计算;Spark是一种内存计算技术。所谓的内存计算技术也就是缓存技术,把数据放到缓存中,减少cpu磁盘消耗。Spark和
- 使用sqoop将数据从mysql导入到hive
tonyemail_st
参考文档:https://segmentfault.com/a/1190000002532293测试环境:完全分布式安装HadoopHive安装(使用默认的derby存储元数据)sqoop的安装当然还是mysql已安装(使用iso文件建立本地仓库)测试数据MariaDB[(none)]>usetestdb;Readingtableinformationforcompletionoftableand
- iOS http封装
374016526
ios服务器交互http网络请求
程序开发避免不了与服务器的交互,这里打包了一个自己写的http交互库。希望可以帮到大家。
内置一个basehttp,当我们创建自己的service可以继承实现。
KuroAppBaseHttp *baseHttp = [[KuroAppBaseHttp alloc] init];
[baseHttp setDelegate:self];
[baseHttp
- lolcat :一个在 Linux 终端中输出彩虹特效的命令行工具
brotherlamp
linuxlinux教程linux视频linux自学linux资料
那些相信 Linux 命令行是单调无聊且没有任何乐趣的人们,你们错了,这里有一些有关 Linux 的文章,它们展示着 Linux 是如何的有趣和“淘气” 。
在本文中,我将讨论一个名为“lolcat”的小工具 – 它可以在终端中生成彩虹般的颜色。
何为 lolcat ?
Lolcat 是一个针对 Linux,BSD 和 OSX 平台的工具,它类似于 cat 命令,并为 cat
- MongoDB索引管理(1)——[九]
eksliang
mongodbMongoDB管理索引
转载请出自出处:http://eksliang.iteye.com/blog/2178427 一、概述
数据库的索引与书籍的索引类似,有了索引就不需要翻转整本书。数据库的索引跟这个原理一样,首先在索引中找,在索引中找到条目以后,就可以直接跳转到目标文档的位置,从而使查询速度提高几个数据量级。
不使用索引的查询称
- Informatica参数及变量
18289753290
Informatica参数变量
下面是本人通俗的理解,如有不对之处,希望指正 info参数的设置:在info中用到的参数都在server的专门的配置文件中(最好以parma)结尾 下面的GLOBAl就是全局的,$开头的是系统级变量,$$开头的变量是自定义变量。如果是在session中或者mapping中用到的变量就是局部变量,那就把global换成对应的session或者mapping名字。
[GLOBAL] $Par
- python 解析unicode字符串为utf8编码字符串
酷的飞上天空
unicode
php返回的json字符串如果包含中文,则会被转换成\uxx格式的unicode编码字符串返回。
在浏览器中能正常识别这种编码,但是后台程序却不能识别,直接输出显示的是\uxx的字符,并未进行转码。
转换方式如下
>>> import json
>>> q = '{"text":"\u4
- Hibernate的总结
永夜-极光
Hibernate
1.hibernate的作用,简化对数据库的编码,使开发人员不必再与复杂的sql语句打交道
做项目大部分都需要用JAVA来链接数据库,比如你要做一个会员注册的 页面,那么 获取到用户填写的 基本信后,你要把这些基本信息存入数据库对应的表中,不用hibernate还有mybatis之类的框架,都不用的话就得用JDBC,也就是JAVA自己的,用这个东西你要写很多的代码,比如保存注册信
- SyntaxError: Non-UTF-8 code starting with '\xc4'
随便小屋
python
刚开始看一下Python语言,传说听强大的,但我感觉还是没Java强吧!
写Hello World的时候就遇到一个问题,在Eclipse中写的,代码如下
'''
Created on 2014年10月27日
@author: Logic
'''
print("Hello World!");
运行结果
SyntaxError: Non-UTF-8
- 学会敬酒礼仪 不做酒席菜鸟
aijuans
菜鸟
俗话说,酒是越喝越厚,但在酒桌上也有很多学问讲究,以下总结了一些酒桌上的你不得不注意的小细节。
细节一:领导相互喝完才轮到自己敬酒。敬酒一定要站起来,双手举杯。
细节二:可以多人敬一人,决不可一人敬多人,除非你是领导。
细节三:自己敬别人,如果不碰杯,自己喝多少可视乎情况而定,比如对方酒量,对方喝酒态度,切不可比对方喝得少,要知道是自己敬人。
细节四:自己敬别人,如果碰杯,一
- 《创新者的基因》读书笔记
aoyouzi
读书笔记《创新者的基因》
创新者的基因
创新者的“基因”,即最具创意的企业家具备的五种“发现技能”:联想,观察,实验,发问,建立人脉。
第一部分破坏性创新,从你开始
第一章破坏性创新者的基因
如何获得启示:
发现以下的因素起到了催化剂的作用:(1) -个挑战现状的问题;(2)对某项技术、某个公司或顾客的观察;(3) -次尝试新鲜事物的经验或实验;(4)与某人进行了一次交谈,为他点醒
- 表单验证技术
百合不是茶
JavaScriptDOM对象String对象事件
js最主要的功能就是验证表单,下面是我对表单验证的一些理解,贴出来与大家交流交流 ,数显我们要知道表单验证需要的技术点, String对象,事件,函数
一:String对象;通常是对字符串的操作;
1,String的属性;
字符串.length;表示该字符串的长度;
var str= "java"
- web.xml配置详解之context-param
bijian1013
javaservletweb.xmlcontext-param
一.格式定义:
<context-param>
<param-name>contextConfigLocation</param-name>
<param-value>contextConfigLocationValue></param-value>
</context-param>
作用:该元
- Web系统常见编码漏洞(开发工程师知晓)
Bill_chen
sqlPHPWebfckeditor脚本
1.头号大敌:SQL Injection
原因:程序中对用户输入检查不严格,用户可以提交一段数据库查询代码,根据程序返回的结果,
获得某些他想得知的数据,这就是所谓的SQL Injection,即SQL注入。
本质:
对于输入检查不充分,导致SQL语句将用户提交的非法数据当作语句的一部分来执行。
示例:
String query = "SELECT id FROM users
- 【MongoDB学习笔记六】MongoDB修改器
bit1129
mongodb
本文首先介绍下MongoDB的基本的增删改查操作,然后,详细介绍MongoDB提供的修改器,以完成各种各样的文档更新操作 MongoDB的主要操作
show dbs 显示当前用户能看到哪些数据库
use foobar 将数据库切换到foobar
show collections 显示当前数据库有哪些集合
db.people.update,update不带参数,可
- 提高职业素养,做好人生规划
白糖_
人生
培训讲师是成都著名的企业培训讲师,他在讲课中提出的一些观点很新颖,在此我收录了一些分享一下。注:讲师的观点不代表本人的观点,这些东西大家自己揣摩。
1、什么是职业规划:职业规划并不完全代表你到什么阶段要当什么官要拿多少钱,这些都只是梦想。职业规划是清楚的认识自己现在缺什么,这个阶段该学习什么,下个阶段缺什么,又应该怎么去规划学习,这样才算是规划。
- 国外的网站你都到哪边看?
bozch
技术网站国外
学习软件开发技术,如果没有什么英文基础,最好还是看国内的一些技术网站,例如:开源OSchina,csdn,iteye,51cto等等。
个人感觉如果英语基础能力不错的话,可以浏览国外的网站来进行软件技术基础的学习,例如java开发中常用的到的网站有apache.org 里面有apache的很多Projects,springframework.org是spring相关的项目网站,还有几个感觉不错的
- 编程之美-光影切割问题
bylijinnan
编程之美
package a;
public class DisorderCount {
/**《编程之美》“光影切割问题”
* 主要是两个问题:
* 1.数学公式(设定没有三条以上的直线交于同一点):
* 两条直线最多一个交点,将平面分成了4个区域;
* 三条直线最多三个交点,将平面分成了7个区域;
* 可以推出:N条直线 M个交点,区域数为N+M+1。
- 关于Web跨站执行脚本概念
chenbowen00
Web安全跨站执行脚本
跨站脚本攻击(XSS)是web应用程序中最危险和最常见的安全漏洞之一。安全研究人员发现这个漏洞在最受欢迎的网站,包括谷歌、Facebook、亚马逊、PayPal,和许多其他网站。如果你看看bug赏金计划,大多数报告的问题属于 XSS。为了防止跨站脚本攻击,浏览器也有自己的过滤器,但安全研究人员总是想方设法绕过这些过滤器。这个漏洞是通常用于执行cookie窃取、恶意软件传播,会话劫持,恶意重定向。在
- [开源项目与投资]投资开源项目之前需要统计该项目已有的用户数
comsci
开源项目
现在国内和国外,特别是美国那边,突然出现很多开源项目,但是这些项目的用户有多少,有多少忠诚的粉丝,对于投资者来讲,完全是一个未知数,那么要投资开源项目,我们投资者必须准确无误的知道该项目的全部情况,包括项目发起人的情况,项目的维持时间..项目的技术水平,项目的参与者的势力,项目投入产出的效益.....
- oracle alert log file(告警日志文件)
daizj
oracle告警日志文件alert log file
The alert log is a chronological log of messages and errors, and includes the following items:
All internal errors (ORA-00600), block corruption errors (ORA-01578), and deadlock errors (ORA-00060)
- 关于 CAS SSO 文章声明
denger
SSO
由于几年前写了几篇 CAS 系列的文章,之后陆续有人参照文章去实现,可都遇到了各种问题,同时经常或多或少的收到不少人的求助。现在这时特此说明几点:
1. 那些文章发表于好几年前了,CAS 已经更新几个很多版本了,由于近年已经没有做该领域方面的事情,所有文章也没有持续更新。
2. 文章只是提供思路,尽管 CAS 版本已经发生变化,但原理和流程仍然一致。最重要的是明白原理,然后
- 初二上学期难记单词
dcj3sjt126com
englishword
lesson 课
traffic 交通
matter 要紧;事物
happy 快乐的,幸福的
second 第二的
idea 主意;想法;意见
mean 意味着
important 重要的,重大的
never 从来,决不
afraid 害怕 的
fifth 第五的
hometown 故乡,家乡
discuss 讨论;议论
east 东方的
agree 同意;赞成
bo
- uicollectionview 纯代码布局, 添加头部视图
dcj3sjt126com
Collection
#import <UIKit/UIKit.h>
@interface myHeadView : UICollectionReusableView
{
UILabel *TitleLable;
}
-(void)setTextTitle;
@end
#import "myHeadView.h"
@implementation m
- N 位随机数字串的 JAVA 生成实现
FX夜归人
javaMath随机数Random
/**
* 功能描述 随机数工具类<br />
* @author FengXueYeGuiRen
* 创建时间 2014-7-25<br />
*/
public class RandomUtil {
// 随机数生成器
private static java.util.Random random = new java.util.R
- Ehcache(09)——缓存Web页面
234390216
ehcache页面缓存
页面缓存
目录
1 SimplePageCachingFilter
1.1 calculateKey
1.2 可配置的初始化参数
1.2.1 cach
- spring中少用的注解@primary解析
jackyrong
primary
这次看下spring中少见的注解@primary注解,例子
@Component
public class MetalSinger implements Singer{
@Override
public String sing(String lyrics) {
return "I am singing with DIO voice
- Java几款性能分析工具的对比
lbwahoo
java
Java几款性能分析工具的对比
摘自:http://my.oschina.net/liux/blog/51800
在给客户的应用程序维护的过程中,我注意到在高负载下的一些性能问题。理论上,增加对应用程序的负载会使性能等比率的下降。然而,我认为性能下降的比率远远高于负载的增加。我也发现,性能可以通过改变应用程序的逻辑来提升,甚至达到极限。为了更详细的了解这一点,我们需要做一些性能
- JVM参数配置大全
nickys
jvm应用服务器
JVM参数配置大全
/usr/local/jdk/bin/java -Dresin.home=/usr/local/resin -server -Xms1800M -Xmx1800M -Xmn300M -Xss512K -XX:PermSize=300M -XX:MaxPermSize=300M -XX:SurvivorRatio=8 -XX:MaxTenuringThreshold=5 -
- 搭建 CentOS 6 服务器(14) - squid、Varnish
rensanning
varnish
(一)squid
安装
# yum install httpd-tools -y
# htpasswd -c -b /etc/squid/passwords squiduser 123456
# yum install squid -y
设置
# cp /etc/squid/squid.conf /etc/squid/squid.conf.bak
# vi /etc/
- Spring缓存注解@Cache使用
tom_seed
spring
参考资料
http://www.ibm.com/developerworks/cn/opensource/os-cn-spring-cache/
http://swiftlet.net/archives/774
缓存注解有以下三个:
@Cacheable @CacheEvict @CachePut
- dom4j解析XML时出现"java.lang.noclassdeffounderror: org/jaxen/jaxenexception"错误
xp9802
java.lang.NoClassDefFoundError: org/jaxen/JaxenExc
关键字: java.lang.noclassdeffounderror: org/jaxen/jaxenexception
使用dom4j解析XML时,要快速获取某个节点的数据,使用XPath是个不错的方法,dom4j的快速手册里也建议使用这种方式
执行时却抛出以下异常:
Exceptio