HuFeiHu-Blog
HuFeiHu-Blog

Ambari安装之安装并配置Ambari-server（三）

前期博客

 Ambari安装之部署本地库（镜像服务器）（二）

 

 

 

 

安装并配置Ambari-server

（1）检查仓库是否可用

Ambari安装之安装并配置Ambari-server（三）_第1张图片

复制代码 
[hadoop@ambari01 yum.repos.d]$ pwd
/etc/yum.repos.d
[hadoop@ambari01 yum.repos.d]$ yum repolist
Loaded plugins: fastestmirror, refresh-packagekit, security
Loading mirror speeds from cached hostfile
 * base: centos.ustc.edu.cn
 * extras: centos.ustc.edu.cn
 * updates: mirrors.zju.edu.cn
Updates-ambari-2.2.1.0                                                                                                                                                  | 2.9 kB     00:00     
Updates-ambari-2.2.1.0/primary_db                                                                                                                                       |  89 kB     00:00     
repo id                                                                                    repo name                                                                                     status
Updates-ambari-2.2.1.0                                                                     ambari-2.2.1.0 - Updates                                                                        229
base                                                                                       CentOS-6 - Base                                                                               6,696
extras                                                                                     CentOS-6 - Extras                                                                                64
updates                                                                                    CentOS-6 - Updates                                                                              974
repolist: 7,963
[hadoop@ambari01 yum.repos.d]$
复制代码

 

 

 

 

（2）安装Ambari-server

Ambari安装之安装并配置Ambari-server（三）_第2张图片

Ambari安装之安装并配置Ambari-server（三）_第3张图片

复制代码 
[hadoop@ambari01 yum.repos.d]$ pwd
/etc/yum.repos.d
[hadoop@ambari01 yum.repos.d]$ sudo yum install ambari-server
Loaded plugins: fastestmirror, refresh-packagekit, security
Setting up Install Process
Loading mirror speeds from cached hostfile
 * base: mirrors.zju.edu.cn
 * extras: mirrors.zju.edu.cn
 * updates: mirrors.zju.edu.cn
Updates-ambari-2.2.1.0                                                                                                                                                  | 2.9 kB     00:00     
Updates-ambari-2.2.1.0/primary_db                                                                                                                                       |  89 kB     00:00     
Resolving Dependencies
--> Running transaction check
---> Package ambari-server.x86_64 0:2.2.1.0-161 will be installed
--> Processing Dependency: postgresql-server >= 8.1 for package: ambari-server-2.2.1.0-161.x86_64
--> Running transaction check
---> Package postgresql-server.x86_64 0:8.4.20-6.el6 will be installed
--> Processing Dependency: postgresql-libs(x86-64) = 8.4.20-6.el6 for package: postgresql-server-8.4.20-6.el6.x86_64
--> Processing Dependency: postgresql(x86-64) = 8.4.20-6.el6 for package: postgresql-server-8.4.20-6.el6.x86_64
--> Processing Dependency: libpq.so.5()(64bit) for package: postgresql-server-8.4.20-6.el6.x86_64
--> Running transaction check
---> Package postgresql.x86_64 0:8.4.20-6.el6 will be installed
---> Package postgresql-libs.x86_64 0:8.4.20-6.el6 will be installed
--> Finished Dependency Resolution

Dependencies Resolved

===============================================================================================================================================================================================
 Package                                         Arch                                 Version                                       Repository                                            Size
===============================================================================================================================================================================================
Installing:
 ambari-server                                   x86_64                               2.2.1.0-161                                   Updates-ambari-2.2.1.0                               409 M
Installing for dependencies:
 postgresql                                      x86_64                               8.4.20-6.el6                                  base                                                 2.6 M
 postgresql-libs                                 x86_64                               8.4.20-6.el6                                  base                                                 202 k
 postgresql-server                               x86_64                               8.4.20-6.el6                                  base                                                 3.4 M

Transaction Summary
===============================================================================================================================================================================================
Install       4 Package(s)

Total download size: 415 M
Installed size: 464 M
Is this ok [y/N]: y
Downloading Packages:
(1/4): ambari-server-2.2.1.0-161.x86_64.rpm                                                                                                                             | 409 MB     00:22     
(2/4): postgresql-8.4.20-6.el6.x86_64.rpm                                                                                                                               | 2.6 MB     00:02     
(3/4): postgresql-libs-8.4.20-6.el6.x86_64.rpm                                                                                                                          | 202 kB     00:00     
(4/4): postgresql-server-8.4.20-6.el6.x86_64.rpm                                                                                                                        | 3.4 MB     00:03     
-----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
Total                                                                                                                                                           14 MB/s | 415 MB     00:29     
Running rpm_check_debug
Running Transaction Test
Transaction Test Succeeded
Running Transaction
  Installing : postgresql-libs-8.4.20-6.el6.x86_64                                                                                                                                         1/4 
  Installing : postgresql-8.4.20-6.el6.x86_64                                                                                                                                              2/4 
  Installing : postgresql-server-8.4.20-6.el6.x86_64                                                                                                                                       3/4 
  Installing : ambari-server-2.2.1.0-161.x86_64                                                                                                                                            4/4 
  Verifying  : postgresql-server-8.4.20-6.el6.x86_64                                                                                                                                       1/4 
  Verifying  : postgresql-8.4.20-6.el6.x86_64                                                                                                                                              2/4 
  Verifying  : postgresql-libs-8.4.20-6.el6.x86_64                                                                                                                                         3/4 
  Verifying  : ambari-server-2.2.1.0-161.x86_64                                                                                                                                            4/4 

Installed:
  ambari-server.x86_64 0:2.2.1.0-161                                                                                                                                                           

Dependency Installed:
  postgresql.x86_64 0:8.4.20-6.el6                           postgresql-libs.x86_64 0:8.4.20-6.el6                           postgresql-server.x86_64 0:8.4.20-6.el6                          

Complete!
[hadoop@ambari01 yum.repos.d]$
复制代码

 

 

 

 

 

 

 

（3）配置Ambari-server

Ambari安装之安装并配置Ambari-server（三）_第4张图片

Ambari安装之安装并配置Ambari-server（三）_第5张图片

复制代码 
[hadoop@ambari01 yum.repos.d]$ pwd
/etc/yum.repos.d
[hadoop@ambari01 yum.repos.d]$ sudo ambari-server setup
Using python  /usr/bin/python2
Setup ambari-server
Checking SELinux...
SELinux status is 'disabled'
Customize user account for ambari-server daemon [y/n] (n)? y
Enter user account for ambari-server daemon (root):hadoop
Adjusting ambari-server permissions and ownership...
Checking firewall status...
Checking JDK...
[1] Oracle JDK 1.8 + Java Cryptography Extension (JCE) Policy Files 8
[2] Oracle JDK 1.7 + Java Cryptography Extension (JCE) Policy Files 7
[3] Custom JDK
==============================================================================
Enter choice (1): 3
WARNING: JDK must be installed on all hosts and JAVA_HOME must be valid on all hosts.
WARNING: JCE Policy files are required for configuring Kerberos security. If you plan to use Kerberos,please make sure JCE Unlimited Strength Jurisdiction Policy Files are valid on all hosts.
Path to JAVA_HOME: /usr/local/jdk/jdk1.8.0_60
Validating JDK on Ambari Server...done.
Completing setup...
Configuring database...
Enter advanced database configuration [y/n] (n)? n
Configuring database...
Default properties detected. Using built-in database.
Configuring ambari database...
Checking PostgreSQL...
Running initdb: This may take upto a minute.
Initializing database: [  OK  ]

About to start PostgreSQL
Configuring local database...
Connecting to local database...done.
Configuring PostgreSQL...
Restarting PostgreSQL
Extracting system views...
.ambari-admin-2.2.1.0.161.jar
.....
Adjusting ambari-server permissions and ownership...
Ambari Server 'setup' completed successfully.
[hadoop@ambari01 yum.repos.d]$
复制代码

 

 

 

 

 

 

 

（4）查看并启动Ambari-server

Ambari安装之安装并配置Ambari-server（三）_第6张图片

复制代码 
[hadoop@ambari01 yum.repos.d]$ sudo service ambari-server status
Using python  /usr/bin/python2
Ambari-server status
Ambari Server not running. Stale PID File at: /var/run/ambari-server/ambari-server.pid
[hadoop@ambari01 yum.repos.d]$ sudo service ambari-server start
Using python  /usr/bin/python2
Starting ambari-server
Ambari Server running with administrator privileges.
Organizing resource files at /var/lib/ambari-server/resources...
Server PID at: /var/run/ambari-server/ambari-server.pid
Server out at: /var/log/ambari-server/ambari-server.out
Server log at: /var/log/ambari-server/ambari-server.log
Waiting for server start....................
Ambari Server 'start' completed successfully.
[hadoop@ambari01 yum.repos.d]$
复制代码

 

 

 

 

（5）在C:\Windows\System32\drivers\etc目录下配置hosts文件

 Ambari安装之安装并配置Ambari-server（三）_第7张图片

 

 

 

 

 

 

（6）输入地址登录ambari

Ambari安装之安装并配置Ambari-server（三）_第8张图片

 

默认的用户名和密码都为admin

Ambari安装之安装并配置Ambari-server（三）_第9张图片

 

 

 

 

 

登录之后的界面如下

Ambari安装之安装并配置Ambari-server（三）_第10张图片

 

那么到此为止，我们集群部署前的所有准备工作就做好了，接下来我们就可以部署hadoop集群了。

 Ambari安装之部署hdp单节点集群

 

作者：好记性不如烂笔头！
出处：http://www.cnblogs.com/zlslch/

你可能感兴趣的:(大数据计算存储-Hadoop)

  • Ceph Cookbook: 掌握分布式存储技术的实践指南 云山雾村
    本文还有配套的精品资源，点击获取简介：《CephCookbook》是一本面向希望深入学习Ceph分布式存储系统的读者的实用指南。本书通过实际案例和操作指导，全面介绍Ceph的核心概念和关键技术。介绍了Ceph的三个主要组件：RADOS、RBD和RGW，以及它们如何协同工作以提供高可用性和数据冗余。读者将学习Ceph的安装、配置、管理和优化，以及如何利用其高级特性，如CRUSH算法和多租户管理。本书
  • FastDFS存储目录迁移方案 甘蓝聊Java 【更新中...】项目中的那些事FastDFSFastDFS目录迁移
    1背景生产FastDFS的存储目录为/home/fastdfs。当前的存储情况如下：/home挂载点总磁盘量为4.8GB，可用容量不足1GB。所以计划迁移到/usr挂载点，以解决磁盘空间不足的问题。2迁移方案迁移思路：停止服务：停止原有的fastdfs的两个服务，防止外部用户继续上传文件数据备份及迁移：备份原有目录，并迁移到新目录配置备份：备份storage和tracker配置文件配置修改：修改配
  • HIVE 面试题总结 小余真旺财 Hivehive
    Hive依赖于HDFS存储数据，Hive将HQL转换成MapReduce执行，所以说Hive是基于Hadoop的一个数据仓库工具，实质就是一款基于HDFS的MapReduce计算框架，对存储在HDFS中的数据进行分析和管理。一、Hive架构用户接口：CLI（hiveshell）、JDBC/ODBC(java访问hive)、WEBUI（浏览器访问hive）元数据：元数据包括：表名、表所属的数据库（默
  • 在 MySQL 中，删除数据库和表后，自动递增的值通常会被重置为初始值，一般是 1。但如果自动递增不为零，可能有以下原因及解决办法： 无聊大侠hello world 数据库mysql
    在MySQL中，删除数据库和表后，自动递增的值通常会被重置为初始值，一般是1。但如果自动递增不为零，可能有以下原因及解决办法：原因数据文件残留：MySQL的数据存储在数据文件中，虽然删除了数据库或表，但相关的数据文件可能没有被完全清理，其中可能保留了之前自动递增列的最大值记录等信息。当重新创建相同结构的表时，MySQL可能会根据这些残留信息来设置自动递增的起始值。缓存或元数据问题：MySQL的缓存
  • Ubuntu中 json 打包数据的使用 猫猫的小茶馆 嵌入式软件开发ubuntujsonlinux服务器网络mcu
    1.JSON的概念和作用为了避免不同平台下的字节对齐、类型大小不统一的问题，json库把数据封装成具有一定格式的字符流数据，进行传输。json格式：把数据与键值一一对应，数据传输双方约定好同一键值，使用接口API根据键值操作json对象（json_object）存储或取得数据。一般使用：数据-->（封装）json对象-->String格式-->...传输。。。-->String格式-->（解析）j
  • MySQL存储引擎：MyISAM和InnoDB的区别 随风飘雁 数据库mysql数据库
    1、MySQL存储引擎的发展MySQL数据库的存储引擎经历了多年的发展，以下是MySQL存储引擎的主要发展历程：MyISAM（默认存储引擎）：MyISAM是MySQL最早的存储引擎，支持表级锁定和高速读取。它是MySQL的默认存储引擎，支持全文索引和压缩表等功能。但是，MyISAM不支持事务处理和外键约束等功能，这使得它的应用受到一定限制。InnoDB：InnoDB是MySQL的另一种存储引擎，支
  • 从云端到私有：智慧任务管理工具的私有化转型之路 项目管理软件
    智慧任务管理工具私有化是指将智慧任务管理工具部署在组织内部的私有服务器或云环境中，以确保数据的安全性、隐私性和完全控制权。以下是对智慧任务管理工具私有化的详细解析：一、私有化的优势●数据安全：私有化部署确保所有数据存储在组织内部的服务器或私有云中，避免数据泄露或被第三方访问，特别适合处理敏感信息或需要遵守数据保护法规（如GDPR、HIPAA等）的组织。●定制化开发：组织可以完全控制系统的配置、更新
  • 构建专属工作流：私有化部署下的数据安全与效率双赢 项目管理软件
    工作流管理软件私有化是指将工作流管理软件部署在组织内部的私有服务器或专有云环境中，以确保数据的安全性、隐私性和组织的完全控制权。以下是对工作流管理软件私有化的详细分析：一、私有化的优势数据安全：○私有化部署确保所有数据存储在组织内部的服务器或私有云中，避免了数据泄露或被第三方访问的风险。○特别适合处理敏感信息或需要遵守数据保护法规（如GDPR、HIPAA等）的组织。定制化开发：○组织可以完全控制系
  • Hive 面试题 昨夜为你摘星
    什么是Hive?Hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。Hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行。Hive的意义（最初研发的原因）?降低程序员使用Hadoop的难度，降低学习成本Hive的内部组成模块，作用
  • MySQL 两种存储引擎: MyISAM和InnoDB 简单总结 诸葛钢铁云 Mysqlmysql
    MyISAM是MySQL的默认数据库引擎（5.5版之前），由早期的ISAM（IndexedSequentialAccessMethod：有索引的顺序访问方法）所改良。虽然性能极佳，但却有一个缺点：不支持事务处理（transaction）。不过，在这几年的发展下，MySQL也导入了InnoDB（另一种数据库引擎），以强化参考完整性与并发违规处理机制，后来就逐渐取代MyISAM。InnoDB，是MyS
  • Spring Boot与MyBatis geinvse_seg 面试学习路线阿里巴巴springbootmybatis后端
    SpringBoot与MyBatis的配置一、简介SpringBoot是一个用于创建独立的、基于Spring的生产级应用程序的框架，它简化了Spring应用的初始搭建以及开发过程。MyBatis是一款优秀的持久层框架，它支持定制化SQL、存储过程以及高级映射。将SpringBoot和MyBatis结合使用，可以高效地开发数据驱动的应用程序。二、环境准备（一）创建SpringBoot项目可以使用Sp
  • Golang之Context详解 高冷小伙 Golang语言golang开发语言后端设计规范性能
    引言之前对context的了解比较浅薄，只知道它是用来传递上下文信息的对象；对于Context本身的存储、类型认识比较少。最近又正好在业务代码中发现一种用法：在每个协程中都会复制一份新的局部context对象，想探究下这种写法在性能上有没有弊端。jobList:=[]func()error{s.task1,s.task2,s.task3,s.task4,}iferr:=gconc.GConcurr
  • C进阶 自定义类型 一只自律的鸡 C进阶c语言开发语言
    目录前言一结构体二结构体的存储三位段四枚举五联合体总结前言我们之前学习的intchardouble......都是内置类型，但是我们今天所学习的是自定义类型，比如联合体，结构体，枚举一结构体结构体是一些值的集合，这些值统称为成员变量，每个成员都是可以用不同的的基本数据类型结构体的使用场景：结构体的意义在于可以进行封装一个整体的所有变量，这个是十分便捷的，这样就可以不用重复的操作进行重复的定义相同的
  • 深入探讨Ceph：分布式存储架构的未来 深度Linux ceph分布式架构C/C++
    在数字化浪潮汹涌澎湃的当下，数据量呈爆发式增长，传统存储系统在应对海量数据存储、高并发访问以及灵活扩展等方面，逐渐显得力不从心。分布式存储技术应运而生，成为解决现代数据存储难题的关键方案，而Ceph作为分布式存储领域的佼佼者，正日益受到广泛关注和应用。Ceph以其卓越的性能、高可靠性、强大的扩展性以及开源的特性，在众多分布式存储系统中脱颖而出，被广泛应用于云计算、大数据、人工智能等前沿领域。无论是
  • C++ STL std::vector 底层实现 zjkzjk7711 c++
    C++STLstd::vector底层实现std::vector是C++STL中最常用的动态数组容器，其底层实现依赖于连续内存块，并采用动态扩容策略来管理内存。1.std::vector的底层数据结构std::vector内部维护三个指针templateclassvector{private:T*_start;//指向数据存储的起始位置T*_finish;//指向数据存储的末尾（size）T*_e
  • 邻接矩阵存储图 C++题解 繁花开盛夏 图论算法开发语言c++图论
    邻接矩阵存储图内存限制：128MiB时间限制：1000ms标准输入输出题目类型：传统评测方式：文本比较题目描述给出一个无向图，顶点数为n，边数为m。nusingnamespacestd;intn,m,x,y;inta[40][40];intmain(){scanf("%d%d",&n,&m);memset(a,0x3f,sizeof(a));for(inti=1;i<=m;i++){scanf("
  • 我在广州学 Mysql 系列——存储过程与存储函数详解 练小杰 数据库相关mysqlandroid数据库学习adbsql
    ℹ️大家好，我是练小杰，今天周五了，一周就这样从手上溜走了，还有两星期过年！！本文将学习MYSQL中存储过程与存储函数的概念~~回顾：【索引详解】【索引相关练习】数据库专栏【数据库专栏】~想要了解更多内容，主页【练小杰的CSDN】文章目录存储过程与存储函数存储过程（StoredProcedure）存储函数（StoredFunction）⚠️主要区别选择存储过程还是存储函数创建存储过程命令解释创建存
  • Unity（游戏）中五种数据存储的方法 别皱眉inging unity3d游戏存储存储方式
    Unity（游戏）中五种数据存储的方法一、PlayerPrefsunity3d提供了一个用于本地持久化保存与读取的类-------PlayerPrefs.工作原理很简单，以键值对的形式将数据保存在文件中，然后程序可以根据这个名称取出上次保存的数值（注：PlayerPrefs运用起来很方便，随时都可以存取与读取）。Playerprefs类支持3中数据类型的保存和读取，分别是浮点型、整型和字符串型：P
  • 解释SQL和NoSQL数据库的区别，各自的适用场景是什么？ 破碎的天堂鸟 学习教程nosql数据库
    SQL与NoSQL数据库的深度对比及适用场景分析一、核心定义与数据模型差异1：SQL数据库结构化数据模型：基于关系型模型，数据以表格（行和列）形式存储，表之间通过外键建立关联。例如，客户表与订单表通过客户ID关联，形成严格的逻辑结构。预定义模式（Schema）：需提前定义表结构（字段类型、主键、外键等），修改结构需通过ALTER等命令，灵活性较低。标准化查询语言：使用SQL（StructuredQ
  • Llama.cpp 服务器安装指南（使用 Docker，GPU 专用） 田猿笔记 AI高级应用llama服务器dockerllama.cpp
    前置条件在开始之前，请确保你的系统满足以下要求：操作系统：Ubuntu20.04/22.04（或支持Docker的Linux系统）。硬件：NVIDIAGPU（例如RTX4090）。内存：16GB+系统内存，GPU需12GB+显存（RTX4090有24GB）。存储：15GB+可用空间（用于源码、镜像和模型文件）。网络：需要互联网连接以下载源码和依赖。软件：已安装并运行Docker。已安装NVIDIA
  • 类加载器详解1 2401_85327573 java开发语言
    回顾一下类加载过程开始介绍类加载器和双亲委派模型之前，简单回顾一下类加载过程。类加载过程：加载->连接->初始化。连接过程又可分为三步：验证->准备->解析。类加载过程加载是类加载过程的第一步，主要完成下面3件事情：通过全类名获取定义此类的二进制字节流将字节流所代表的静态存储结构转换为方法区的运行时数据结构在内存中生成一个代表该类的Class对象，作为方法区这些数据的访问入口类加载器类加载器介绍类
  • 十大经典排序算法上 2401_85327573 排序算法算法数据结构
    0、算法概述0.1算法分类十种常见排序算法可以分为两大类：1、冒泡排序（BubbleSort）冒泡排序是一种简单的排序算法。它重复地走访过要排序的数列，一次比较两个元素，如果它们的顺序错误就把它们交换过来。走访数列的工作是重复地进行直到没有再需要交换，也就是说该数列已经排序完成。这个算法的名字由来是因为越小的元素会经由交换慢慢“浮”到数列的顶端。1.1算法描述内执行时所需存储空间的度量，它也是数据
  • 记录更换电脑硬盘并克隆数据 鱼干～ 电脑
    1.傲梅安装在c盘2.删除旧机械硬盘里无用的软件以及数据3.删除新固态硬盘里的无用数据，并备份数据到其他电脑硬盘或存储设备4.打开傲梅==》克隆硬盘==>选择源旧机械硬盘》目标新固态硬盘》弹窗提示点击是==》设置里选中“让分区适应整个硬盘大小”》点击保存》提交里点击执行即可5.执行完毕后关机，拆掉旧机械硬盘，换上新固态硬盘6.开机后，在计算机管理–》存储==》磁盘管理==》更改新固态硬盘的驱动器号
  • 体育数据系统是怎么开发的 sanx18 信息可视化
    体育数据系统的开发通常包括多个环节，涉及数据采集、处理、存储和展示等方面。下面是开发一个体育数据系统的主要步骤：1.需求分析与规划确定目标：明确系统的目标，比如实时比赛数据跟踪、球员统计、比赛分析等。确定用户群体：不同的用户群体（如教练、球员、分析师、媒体等）可能有不同的需求。功能规划：确定系统需要的功能，如数据采集、可视化展示、数据报表生成、实时更新等。2.数据采集与接口设计数据来源：体育数据可
  • 网络安全加密python代码 黑客Ash web安全安全
    点击文末小卡片，免费获取网络安全全套资料，资料在手，涨薪更快网络信息安全中遇到的各种攻击是防不胜防的，采取适当的防护措施就能有效地保护网络信息的安全,包括防火墙、入侵检测系统、漏洞扫描技术以及加密技术等多种防护措施。而信息安全的本质就是要保护信息本身和信息系统在存储、传输中的完整性和保密性,保障不被攻击和篡改,上述的主动攻击、被动攻击和病毒袭击都会造成信息的破坏和泄密,我们以信息安全中的基础理论出
  • python 商城 性能,python商城项目总结 Yvetzy python商城性能
    importhashlib#实例化md5对象md5=hashlib.md5()#md5.update()方法的参数必须是字节型数据md5.update(bytes(request.POST['password'],encoding="UTF-8"))#以16进制格式存储md5.hexdigest()'''这里有个坑必须注意：md5.update()方法会将每次加密的字符进行拼接，所以每次加密前都要
  • 用Python写一个商城系统 潮水岩
    如果要用Python写一个商城系统，可以先定义需要实现的功能，再按照功能模块分别进行开发。下面是一个简单的开发流程：数据模型设计：需要定义商品、订单、用户等数据模型，并且将它们存储在数据库中。用户模块：用户可以注册、登录、查看个人信息、修改密码等。商品模块：商家可以发布商品、管理商品信息、查看商品列表等；用户可以查看商品详情、加入购物车等。订单模块：用户可以下单、查看订单详情、取消订单、评价订单等
  • python调用kafka smile__su pythonpythonkafka
    先启动hadoop，zookeeper，kafka启动命令hadoop启动命令sbin/start-all.shzookeeper启动命令./bin/zkServer.shstart每台机器都要启动kafka启动命令bin/kafka-server-start.shconfig/server.properties每台机器都要启动进行以下操作的前提是将hadoop，zookeeper，kafka安装
  • 非关系型数据库和关系型数据库的区别 纠结哥_Shrek 数据库nosql
    非关系型数据库（NoSQL）和关系型数据库（SQL）的主要区别体现在以下几个方面：数据模型：关系型数据库（SQL）：数据以表格形式存储，数据行和列组成，每个表都有固定的模式（Schema）。常见的关系型数据库有MySQL、PostgreSQL、Oracle等。非关系型数据库（NoSQL）：数据没有固定的模式，存储方式更加灵活。可以是键值对、文档、列族、图等形式。常见的非关系型数据库有MongoDB
  • 使用 Microsoft OneDrive 加载文档的指南 shuoac microsoftonedrivepython
    技术背景介绍MicrosoftOneDrive（以前称为SkyDrive）是由微软运营的文件托管服务。通过OneDrive，你可以在云端存储和共享文档、照片、视频等数据。本文将介绍如何从OneDrive加载文档，目前支持的文件格式包括docx、doc和pdf。核心原理解析为了能够从OneDrive加载文档，需要进行以下几个步骤：注册应用程序以获取客户端ID和密钥。获取OneDrive的DriveI
  • 矩阵求逆（JAVA）初等行变换 qiuwanchi 矩阵求逆（JAVA）
    package gaodai.matrix; import gaodai.determinant.DeterminantCalculation; import java.util.ArrayList; import java.util.List; import java.util.Scanner; /** * 矩阵求逆(初等行变换) * @author 邱万迟 *
  • JDK timer antlove javajdkschedulecodetimer
    1.java.util.Timer.schedule(TimerTask task, long delay)：多长时间（毫秒）后执行任务 2.java.util.Timer.schedule(TimerTask task, Date time)：设定某个时间执行任务 3.java.util.Timer.schedule(TimerTask task, long delay,longperiod
  • JVM调优总结 -Xms -Xmx -Xmn -Xss coder_xpf jvm应用服务器
    堆大小设置JVM 中最大堆大小有三方面限制：相关操作系统的数据模型（32-bt还是64-bit）限制；系统的可用虚拟内存限制；系统的可用物理内存限制。32位系统下，一般限制在1.5G~2G；64为操作系统对内存无限制。我在Windows Server 2003 系统，3.5G物理内存，JDK5.0下测试，最大可设置为1478m。 典型设置： java -Xmx
  • JDBC连接数据库 Array_06 jdbc
    package Util; import java.sql.Connection; import java.sql.DriverManager; import java.sql.ResultSet; import java.sql.SQLException; import java.sql.Statement; public class JDBCUtil { //完
  • Unsupported major.minor version 51.0（jdk版本错误） oloz java
    java.lang.UnsupportedClassVersionError: cn/support/cache/CacheType : Unsupported major.minor version 51.0 (unable to load class cn.support.cache.CacheType) at org.apache.catalina.loader.WebappClassL
  • 用多个线程处理1个List集合 362217990 多线程threadlist集合
      昨天发了一个提问，启动5个线程将一个List中的内容，然后将5个线程的内容拼接起来，由于时间比较急迫，自己就写了一个Demo，希望对菜鸟有参考意义。。 import java.util.ArrayList; import java.util.List; import java.util.concurrent.CountDownLatch; public c
  • JSP简单访问数据库 香水浓 sqlmysqljsp
    学习使用javaBean，代码很烂，仅为留个脚印 public class DBHelper { private String driverName; private String url; private String user; private String password; private Connection connection; privat
  • Flex4中使用组件添加柱状图、饼状图等图表 AdyZhang Flex
    1.添加一个最简单的柱状图 ? 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 <?xml version= "1.0"&n
  • Android 5.0 - ProgressBar 进度条无法展示到按钮的前面 aijuans android
    在低于SDK < 21 的版本中，ProgressBar 可以展示到按钮前面，并且为之在按钮的中间，但是切换到android 5.0后进度条ProgressBar 展示顺序变化了，按钮再前面，ProgressBar 在后面了我的xml配置文件如下：   [html]  view plain copy   <RelativeLa
  • 查询汇总的sql baalwolf sql
    select   list.listname, list.createtime,listcount from dream_list as list ,   (select listid,count(listid) as listcount  from dream_list_user  group by listid  order by count(
  • Linux du命令和df命令区别 BigBird2012 linux
            1，两者区别             du，disk usage,是通过搜索文件来计算每个文件的大小然后累加，du能看到的文件只是一些当前存在的，没有被删除的。他计算的大小就是当前他认为存在的所有文件大小的累加和。        
  • AngularJS中的$apply，用还是不用？ bijian1013 JavaScriptAngularJS$apply
            在AngularJS开发中，何时应该调用$scope.$apply()，何时不应该调用。下面我们透彻地解释这个问题。         但是首先，让我们把$apply转换成一种简化的形式。         scope.$apply就像一个懒惰的工人。它需要按照命
  • [Zookeeper学习笔记十]Zookeeper源代码分析之ClientCnxn数据序列化和反序列化 bit1129 zookeeper
    ClientCnxn是Zookeeper客户端和Zookeeper服务器端进行通信和事件通知处理的主要类，它内部包含两个类，1. SendThread 2. EventThread， SendThread负责客户端和服务器端的数据通信，也包括事件信息的传输，EventThread主要在客户端回调注册的Watchers进行通知处理   ClientCnxn构造方法   &
  • 【Java命令一】jmap bit1129 Java命令
    jmap命令的用法：   [hadoop@hadoop sbin]$ jmap Usage: jmap [option] <pid> (to connect to running process) jmap [option] <executable <core> (to connect to a
  • Apache 服务器安全防护及实战 ronin47
    此文转自IBM. Apache 服务简介 Web 服务器也称为 WWW 服务器或 HTTP 服务器 (HTTP Server)，它是 Internet 上最常见也是使用最频繁的服务器之一，Web 服务器能够为用户提供网页浏览、论坛访问等等服务。 由于用户在通过 Web 浏览器访问信息资源的过程中，无须再关心一些技术性的细节，而且界面非常友好，因而 Web 在 Internet 上一推出就得到
  • unity 3d实例化位置出现布置？ brotherlamp unity教程unityunity资料unity视频unity自学
    问：unity 3d实例化位置出现布置？ 答：实例化的同时就可以指定被实例化的物体的位置,即 position  Instantiate (original : Object, position : Vector3, rotation : Quaternion) : Object 这样你不需要再用Transform.Position了,   如果你省略了第二个参数(
  • 《重构，改善现有代码的设计》第八章 Duplicate Observed Data bylijinnan java重构
    import java.awt.Color; import java.awt.Container; import java.awt.FlowLayout; import java.awt.Label; import java.awt.TextField; import java.awt.event.FocusAdapter; import java.awt.event.FocusE
  • struts2更改struts.xml配置目录 chiangfai struts.xml
    struts2默认是读取classes目录下的配置文件，要更改配置文件目录，比如放在WEB-INF下，路径应该写成../struts.xml(非/WEB-INF/struts.xml) web.xml文件修改如下：   <filter> <filter-name>struts2</filter-name> <filter-class&g
  • redis做缓存时的一点优化 chenchao051 redishadooppipeline
            最近集群上有个job，其中需要短时间内频繁访问缓存，大概7亿多次。我这边的缓存是使用redis来做的，问题就来了。       首先，redis中存的是普通kv，没有考虑使用hash等解结构，那么以为着这个job需要访问7亿多次redis，导致效率低，且出现很多redi
  • mysql导出数据不输出标题行 daizj mysql数据导出去掉第一行去掉标题
    当想使用数据库中的某些数据，想将其导入到文件中，而想去掉第一行的标题是可以加上-N参数 如通过下面命令导出数据： mysql -uuserName -ppasswd -hhost -Pport -Ddatabase -e " select * from tableName"  > exportResult.txt 结果为： studentid
  • phpexcel导出excel表简单入门示例 dcj3sjt126com PHPExcelphpexcel
    先下载PHPEXCEL类文件，放在class目录下面，然后新建一个index.php文件，内容如下 <?php error_reporting(E_ALL); ini_set('display_errors', TRUE); ini_set('display_startup_errors', TRUE);   if (PHP_SAPI == 'cli') die('
  • 爱情格言 dcj3sjt126com 格言
     1) I love you not because of who you are, but because of who I am when I am with you. 　　 我爱你，不是因为你是一个怎样的人，而是因为我喜欢与你在一起时的感觉。 　　2) No man or woman is worth your tears, and the one who is, won‘t
  • 转 Activity 详解——Activity文档翻译 e200702084 androidUIsqlite配置管理网络应用
    activity 展现在用户面前的经常是全屏窗口，你也可以将 activity 作为浮动窗口来使用（使用设置了 windowIsFloating 的主题），或者嵌入到其他的 activity （使用 ActivityGroup ）中。 当用户离开 activity 时你可以在 onPause() 进行相应的操作 。更重要的是，用户做的任何改变都应该在该点上提交 ( 经常提交到 ContentPro
  • win7安装MongoDB服务 geeksun mongodb
    1.  下载MongoDB的windows版本：mongodb-win32-x86_64-2008plus-ssl-3.0.4.zip，Linux版本也在这里下载，下载地址： http://www.mongodb.org/downloads   2.  解压MongoDB在D:\server\mongodb, 在D:\server\mongodb下创建d
  • Javascript魔法方法:__defineGetter__,__defineSetter__ hongtoushizi js
    转载自： http://www.blackglory.me/javascript-magic-method-definegetter-definesetter/ 在javascript的类中,可以用defineGetter和defineSetter_控制成员变量的Get和Set行为 例如,在一个图书类中,我们自动为Book加上书名符号: function Book(name){
  • 错误的日期格式可能导致走nginx proxy cache时不能进行304响应 jinnianshilongnian cache
    昨天在整合某些系统的nginx配置时，出现了当使用nginx cache时无法返回304响应的情况，出问题的响应头： Content-Type:text/html; charset=gb2312 Date:Mon, 05 Jan 2015 01:58:05 GMT Expires:Mon , 05 Jan 15 02:03:00 GMT Last-Modified:Mon, 05
  • 数据源架构模式之行数据入口 home198979 PHP架构行数据入口
    注：看不懂的请勿踩，此文章非针对java，java爱好者可直接略过。   一、概念 行数据入口（Row Data Gateway）：充当数据源中单条记录入口的对象，每行一个实例。   二、简单实现行数据入口 为了方便理解，还是先简单实现： <?php /** * 行数据入口类 */ class OrderGateway { /*定义元数
  • Linux各个目录的作用及内容 pda158 linux脚本
    1）根目录“/” 　　根目录位于目录结构的最顶层，用斜线（/）表示，类似于 Windows 操作系统的“C:\“，包含Fedora操作系统中所有的目录和文件。 　　2）/bin 　　/bin 　　目录又称为二进制目录，包含了那些供系统管理员和普通用户使用的重要 linux命令的二进制映像。该目录存放的内容包括各种可执行文件，还有某些可执行文件的符号连接。常用的命令有：cp、d
  • ubuntu12.04上编译openjdk7 ol_beta HotSpotjvmjdkOpenJDK
    获取源码 从openjdk代码仓库获取(比较慢) 安装mercurial Mercurial是一个版本管理工具。 sudo apt-get install mercurial 将以下内容添加到$HOME/.hgrc文件中，如果没有则自己创建一个： [extensions] forest=/home/lichengwu/hgforest-crew/forest.py fe
  • 将数据库字段转换成设计文档所需的字段 vipbooks 设计模式工作正则表达式
            哈哈，出差这么久终于回来了，回家的感觉真好！         PowerDesigner的物理数据库一出来，设计文档中要改的字段就多得不计其数，如果要把PowerDesigner中的字段一个个Copy到设计文档中，那将会是一件非常痛苦的事情。
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他