Hadoop-自学日记

android 自学日记（五） ——ListView

前言：此篇是学习笔记，知识内容学习自：《第一行代码》、《android群英传》、《疯狂android讲义》。使用基础ListViewListView是最常用的控件之一，它以垂直列表的形式显示所有列表项，是比较难用好，也非常重要的。ListView本身只是一个容器，而Adapter负责把内容添加到这个容器中，通过调用setAdapter()方法来实现。基本使用的话很简单，第一步：在布局文件中加入Li
Hubert_bing·2016-04-28 12:00

android 自学日记（四） ---ActionBar

启用和关闭ActionBarandroid3.0（API11）以上默认启动ActionBar。如果不想使用ActionBar，这可以在AndroidManifest.xml文件中修改：或者在代码中使用hide()方法：publicclassMainActivityextendsAppCompatActivity{ ActionBaractionBar; @Override protectedvoi
Hubert_bing·2016-04-21 11:00

android 自学日记（三） ---Intent

什么是Intent？android中四分之三的组件类型（activitie、service和broadcastreceiver）都是通过intent激活的。Intent把不同的独立的组件在运行期绑定在一起(可以把它们当作从其它组件中请求动作的消息),无论这些组件是同一个应用内的或者其它应用的组件都可以。所以说Intent是一个桥梁，连接android各组件。显示Intent：使用Intent是需要
Hubert_bing·2016-04-20 11:00

andrid 自学日记（二） ---Activity

andrid自学日记（二）—Activity自学android开发有一个半月了，《第一行代码》和《疯狂android讲义》也看完了，大部分代码都有自己敲过，也了解了android开发的整体结构。
Hubert_bing·2016-04-19 16:00

【总结】Hadoop配置文件core-site.xml

里的对应此配置替代了1.0里的fs.default.name，ns1 与 hdfs-site.xml中的dfs.nameservices配置项对应hadoop.tmp.dir    /hadoop/1/tmp/hadoop
巧克力黒·2016-04-16 17:27

hadoop 运行java 清洗数据 报错Failed to set permissions of path: \tmp\...

ERRORorg.apache.hadoop.mapred.TaskTracker:Cannotstarttasktrackerbecausejava.io.IOException:Failedtosetpermissionsofpath:\tmp\hadoop
levy_cui·2016-04-13 14:13

JPA

SpringData包含多个子项目：Commons-提供共享的基础框架，适合各个子项目使用，支持跨数据库持久化JPA-简化创建JPA数据访问层和跨存储的持久层功能Hadoop-基于Spring的Hadoop
yangxujia·2016-03-28 18:00

hadoop和hbase安装与配置

3.1修改hadoop-
napoay·2016-03-28 15:00

Hadoop namenode 不能启动解决方案

hadoop.tmp.dir的目录在系统启动时被清空[html]viewplaincopy  [html]viewplaincopy      hadoop.tmp.dir      /tmp/hadoop/hadoop
yangzongzhuan·2016-03-07 16:00

Hadoop-简单的MapReduce案例

分析MapReduce执行过程    MapReduce运行的时候，会通过Mapper运行的任务读取HDFS中的数据文件，然后调用自己的方法，处理数据，最后输出。Reducer任务会接收Mapper任务输出的数据，作为自己的输入数据，调用自己的方法，最后输出到HDFS的文件中。整个流程如图：Mapper任务的执行过程详解每个Mapper任务是一个java进程，它会读取HDFS中的文件，解析成很多的
·2016-02-03 16:00

Hadoop-简单的MapReduce

1.单词统计单词统计被视为MapReduce的HelloWold,下面来在看在Java接口中下如何实现1.定义一个类继承于Mapper,然后重写它的map方法importorg.apache.hadoop.io.LongWritable; importorg.apache.hadoop.io.Text; importorg.apache.hadoop.mapreduce.Mapper; impor
jiangpeng59·2016-01-13 16:00

hadoop-排序算法

二次排序packagesort; importjava.io.DataInput; importjava.io.DataOutput; importjava.io.IOException; importjava.net.URI; importorg.apache.hadoop.conf.Configuration; importorg.apache.hadoop.fs.FileSystem;
u012432611·2015-12-05 20:00

hadoop-分区

hadoop分区的实现分区的作用：1.根据业务需要，产生多个文件输出2.多个reduce任务在运行，提高整体job的运行速度。实现方法：在驱动类里写个分区内部类，它必须继承HashPartitioner接口，同时实现getPartition方法。job指定分区类job.setPartitionerClass(KpiPartitioner.class);job.setNumReduceTasks(分
u012432611·2015-12-05 20:00

hadoop-自定义数据类型

自定义类型必须实现Writable接口而且要指定map，reduce函数的输出类型job.setMapOutputValueClass(KpiWritable.class); job.setOutputValueClass(KpiWritable.class);packagemapreduce; importjava.io.DataInput; importjava.io.DataOutput;
u012432611·2015-12-05 19:00

Hadoop-MapReduce初步应用-统计单词个数

关于hadoop在电脑上安装的过程，请参考我的上一篇博文：Hadoop-利用javaAPI操作HDFS文件我的安装和配置环境是Windows下伪分布模式hadoop下使用eclipse进行开发。
龙吟在天·2015-11-30 20:57

Hadoop－Drill深度剖析

1.概述在《Hadoop-实时查询Drill》一文当中，笔者给大家介绍如何去处理实时查询这样的业务场景，也是简略的提了一下如何去实时查询HDFS，然起相关细节并未说明。
哥不是小萝莉·2015-11-28 14:00

Hadoop－Drill深度剖析

1.概述在《Hadoop-实时查询Drill》一文当中，笔者给大家介绍如何去处理实时查询这样的业务场景，也是简略的提了一下如何去实时查询HDFS，然起相关细节并未说明。
哥不是小萝莉·2015-11-28 14:00

MongoDB自学日记3——架构及HA

在对mongoDB的操作有了一定基础后，终于可以扯扯HA和架构这两个高大上的概念了。在这之前当然还得弄清楚mongoDB的Keyfeature：Sharding。1.Sharding Shard从逻辑上来说就是整个数据的一个子集，从物理来说就是管理这一子集的服务器。一个分片可以包含多台服务器。若一个分片包含多台服务器则每台服务器都有一份完全相同的数据子集副本（Replicaset）。分片是Mong
XiaoH在博客园·2015-11-16 00:00

MongoDB自学日记3——架构及HA

在对mongoDB的操作有了一定基础后，终于可以扯扯HA和架构这两个高大上的概念了。在这之前当然还得弄清楚mongoDB的Keyfeature：Sharding。1.ShardingShard从逻辑上来说就是整个数据的一个子集，从物理来说就是管理这一子集的服务器。一个分片可以包含多台服务器。若一个分片包含多台服务器则每台服务器都有一份完全相同的数据子集副本（Replicaset）。分片是Mongo
XiaoH在博客园·2015-11-16 00:00

hadoop2.2编程：hadoop性能测试

nbsp;version)中的Benchmarking a Hadoop Cluster Test Cases 的class在新的版本中已不再是hadoop
·2015-11-12 17:34

hadoop2.2基准测试

《hadoop the definitive way》(third version)中的Benchmarking a Hadoop Cluster Test Cases的class在新的版本中已不再试hadoop
·2015-11-12 17:27

Hadoop-安装过程-单虚拟机版（伪分布式）（Ubuntu13.04版本下安装）

由于新装的Ubutu默认情况下，系统只安装了SSH客户端，需要自行安装SSH服务端 如何确定是否安装了SSH服务端？ 可以通过命令ssh localhost，结果如下， 即未安装SSH服务端：   安装SSH服务端： sudo apt-get install openssh-server 在安装时，没有设置root密码，所以必须在安装完成进行设置后才
·2015-11-11 06:03

MongoDB自学日记2——权限

首先应该明确的是为什么要学MongoDB。OK，如果是仅仅出于对于流行技术的原始兴趣，可能并不能深入学习，还必须有应用需求。刚开始学习MongoDB，因为以前对其它数据库的了解也不是特别深入，所以许多概念和原理需要梳理。本节主要是学习访问控制权限的问题。第一步就需要创建用户，手头有一些mongodb的文档，然而估计是出版时间和版本太老了，基本都说用db.addUser创建用户，结果执行不成功。原因
XiaoH在博客园·2015-11-08 16:00

MongoDB自学日记2——权限

    首先应该明确的是为什么要学MongoDB。OK，如果是仅仅出于对于流行技术的原始兴趣，可能并不能深入学习，还必须有应用需求。刚开始学习MongoDB，因为以前对其它数据库的了解也不是特别深入，所以许多概念和原理需要梳理。本节主要是学习访问控制权限的问题。第一步就需要创建用户，手头有一些mongodb的文档，然而估计是出版时间和版本太老了，基本都说用db.addUser创建用户，结果执行不成
XiaoH在博客园·2015-11-08 16:00

hadoop-集群管理（2）——内存设置

1. 内存 hadoop为各个守护进程（namenode,secondarynamenode,jobtracker,datanode,tasktracker）统一分配的内存在hadoop-env.sh中设置，参数为HADOOP_HEAPSIZE，默认为1000M。 大部分情况下，这个统一设置的值可能并不适合。例如对于namenode节点，1000M的内存只能存储几百万个文件的数据块的引用。如果
·2015-11-02 16:09

MongoDB自学日记1——基本操作

   作为一个做底层及后台研发的，最近对NoSQL却产生了浓厚的兴趣，加入了一个DBA群，据说北京排的上号的DBA都在里面，然而里面基本都是Oracle系的，MySQL和MongoDB系的少之又少。学习靠不得别人，要和Oracle大佬们撕比尚需时日。   废话少说，在抱怨关系型数据库的死板及开发效率，力推NoSQL之后，NoSQL的代表之一MongoDB也受过一些质疑，比如《Don'tusemon
XiaoH在博客园·2015-11-01 13:00

Hadoop基准测试

《hadoop the definitive way》(third version)中的Benchmarking a Hadoop Cluster Test Cases的class在新的版本中已不再试hadoop
·2015-10-31 09:48

Linux自学日记1

马上就要从事Linux环境下的开发了，Linux还从来没用过，还是要好好学习一下，现在把每天学习Linux的过程记录下来，哈哈，欢迎大家指点啊。 今天首先在server2003 上安装了VMWare，听说这个软件非常NB，微软都想收购下来，只可惜最后银子不够（MS会银子不够，估计是觉得划不来，还不如自己开发）.然后从箱子底翻出一套Redhat 7.3，虽然版本太低了，不过相信原理也差不多。
·2015-10-31 09:54

Hadoop单机部署方法

bin   下载Hadoop wget http://labs.renren.com/apache-mirror/hadoop/common/hadoop-0.20.205.0/hadoop
·2015-10-28 08:25

详解Spring Data JPA

SpringData包含多个子项目：Commons-提供共享的基础框架，适合各个子项目使用，支持跨数据库持久化Hadoop-基于Spring的Hadoop作业配置和一个POJO编程模
offbye·2015-10-23 16:00

ubuntu下设置文件权限

后来想想可能是我前面设置了hadoop文件目录权限到缘故，其命令： sudo chown -R hadoop:hadoop hadoop-0.20.1/ 因此使用查看文件权限命令： ls -all 查看hadoop
·2015-10-21 11:09

Benchmark性能测试工具,TestDFSIO/TeraSort

TestDFSIO //用法 hadoopjar$HADOOP_HOME/hadoop-*test*.jarTestDFSIO-read|-write|-clean[-nrFilesN][
josephguan·2015-10-16 10:00

Hadoop－调优剖析

1.概述其实，在从事过调优相关的工作后，会发现其实调优是一项较为复杂的工作。而对于Hadoop这样复杂且庞大的系统来说，调优更是一项巨大的工作，由于Hadoop包含Common、HDFS、MapReduce、YARN等模块，每个模块都有可以根据自身业务进行优化的工作，本篇博客也是针对某些模块进行调优剖析。在进行Hadoop调优时，不仅仅只是针对其性能调优，还是涉及到更底层的硬件，OS以及JVM等的
哥不是小萝莉·2015-10-10 13:00

Scala学习笔记09【Map、Tuple、Zip常用操作实战】

900.0)构建可变Mapvalscores=scala.collection.mutable.Map("Scala"->7,"Hadoop"->8,"Spark"->10) scores//=>Map(Hadoop
y396397735·2015-10-08 17:00

Hadoop-1.0.4伪分布安装与配置

1、采用伪分布模式安装   将hadoop-****.tar.gz复制到linux的/usr/local目录下。
dabokele·2015-09-22 10:00

新手指导：hadoop-搭建集群必备知识：集群及内存配置介绍

1.集群配置常用配置文件有哪些？2.有哪些控制脚本,如何查看这些配置脚本？3.有哪些守护进程？4.hadoop的内存该如何设置？5.如何单独配置namenode内存？集群介绍1.配置文件列表如下：[tianyc@Routeconf]$pwd/home/tianyc/hadoop-1.0.4/conf[tianyc@Routeconf]$ll总用量76-rw-rw-r--.1tianycNEU745
javastart·2015-09-18 08:00

快速部署，linux命令行

sed-i"s#SELINUX=enforcing#SELINUX=disabled#g"/etc/sysconfig/selinux systemctldisablefirewalld.serviceecho"hadoop
青春掌柜·2015-09-17 15:31

快速部署，linux命令行

sed-i"s#SELINUX=enforcing#SELINUX=disabled#g"/etc/sysconfig/selinux systemctldisablefirewalld.serviceecho"hadoop
青春掌柜·2015-09-17 15:31

windows编译hadoop 2.x Hadoop-eclipse-plugin插件

接下来我们开始编译Hadoop-
liuhao_sh·2015-08-04 11:00

hbase的export与import工具

需要在hbase的conf中添加mapred-site.xml：Java代码  mapred.job.tracker  192.168.0.1:9001    hadoop.tmp.dir  /tmp/hadoop
liyantianmin·2015-07-29 19:00

Hadoop Streaming 编程

脚本语言中的一些命令作为mapper和reducer（cat作为mapper，wc作为reducer）$HADOOP_HOME/bin/hadoop jar$HADOOP_HOME/contrib/streaming/hadoop
baolibin528·2015-07-04 20:00

spring data jpa

SpringData包含多个子项目：Commons-提供共享的基础框架，适合各个子项目使用，支持跨数据库持久化JPA-简化创建JPA数据访问层和跨存储的持久层功能Hadoop-基于Spring的Hadoop
Java蜗牛·2015-07-01 14:57

spring data jpa

SpringData包含多个子项目：Commons-提供共享的基础框架，适合各个子项目使用，支持跨数据库持久化JPA-简化创建JPA数据访问层和跨存储的持久层功能Hadoop-基于Spring的Hadoop
hao707822882·2015-07-01 14:00

Hadoop-远程过程调用

   HadoopIPC类图如下   连接//为了提高通讯效率，连接是可以复用的，通过ConnectionId来区分不同的连接 classConnectionId{ InetSocketAddressaddress;//远端服务器的地址 UserGroupInformationticket;//用户和用户组的信息 Classprotocol;//IPC接口对应的类对象 } //Co
我是小小鸟·2015-06-15 16:00

Hadoop-远程过程调用

   HadoopIPC类图如下   连接//为了提高通讯效率，连接是可以复用的，通过ConnectionId来区分不同的连接 classConnectionId{ InetSocketAddressaddress;//远端服务器的地址 UserGroupInformationticket;//用户和用户组的信息 Classprotocol;//IPC接口对应的类对象 } //Co
我是小小鸟·2015-06-15 16:00

Hadoop HDFS 添加节点

添加新节点的IP到Master的 conf/slaves中4在新节点上运行： bin/hadoop-deamon.shstartdatanode启动数据节点，日志查看$HADOOP_HOME/logs/hadoop
fokYaland·2015-06-04 17:00

私塾在线《深入浅出学 Hadoop- 初级 部分》

http://sishuok.com/forum/blogPost/list/5337.html私塾在线《深入浅出学Hadoop-初级部分》——系列精品教程视频课程地址》》》http://sishuok.com
mituan1234567·2015-05-22 16:46

后Hadoop时代的大数据架构

我在知乎上也写过Hadoop的一些入门文章 如何学习Hadoop-董飞的回答，为了给大家有
u012875880·2015-05-02 13:00

第1章-初识Hadoop-读书笔记

数据！数据！曾有这么一句话：“大量的数据胜于好的算法。”意思是说，对于某些应用（譬如基于先前偏好进行电影和音乐推荐），不论你的算法有多好，大量的可用的数据总能带来更好的推荐效果。现在，我们已经有了大量的数据。不幸的是，我们当下正纠结于存储和分析这些数据。数据存储与分析我们遇到的问题很简单：磁盘访问速度跟不上磁盘存储容量增长的速度。1、一个减少读取磁盘时间的办法？读取一个磁盘中所有的数据需要很长时间
hiqj·2015-04-16 22:00

hadoop2 单机搭建

改名 # mv Hadoop-
xinjie1224·2015-03-14 15:00
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他