Apache-Qibao
Apache-Qibao

大数据生态圈集群搭建汇总--Hadoop & Hive & Spark & Kafka & HBase & Sqoop & Flume

集群搭建

  • 集群规划汇总
  • Linux 环境准备
  • Hadoop Ha 集群搭建
  • Yarn 搭建
  • Hive 搭建
  • Spark 搭建
    • Spark Standalone 模式
    • Spark Yarn 模式
  • Kafka 搭建
  • Hbase 搭建
  • Sqoop 搭建
  • Flume 搭建

本文将持续更新…

集群规划汇总

角色 node01 node02 node03 node04 client
Hadoop-NameNode √(主) √(备)
Hadoop-DataNode √ √ √
JournalNode √ √ √
zookeeper √ √ √
ZookeeperFailoverController √ √
Hadoop-Client √
Yarn-ResourceManager √(主) √(备)
Yarn-NodeManager √ √ √
Yarn-Client √
Hive-Server √
Hive-Metastore(mysql) √
Hive-client √

Linux 环境准备

  博客地址: (一)Linux环境搭建

Hadoop Ha 集群搭建

  博客地址: (二)高可用完全分布式搭建

Yarn 搭建

  博客地址: (三)Yarn资源调度器搭建

Hive 搭建

  博客地址: (四)Hive搭建的三种模式

Spark 搭建

Spark Standalone 模式

  博客地址:

Spark Yarn 模式

  博客地址:

Kafka 搭建

  博客地址:

Hbase 搭建

  博客地址:

Sqoop 搭建

  博客地址:

Flume 搭建

  博客地址:

你可能感兴趣的:(大数据生态圈集群搭建)

  • 面试运维没工作经验怎么办？_没有运维经验去面试运维岗位 慕烟疏雨 面试运维职场和发展网络安全web安全网络程序员
    面试运维没工作经验怎么办大家都知道面试，都是需要工作经验，刚转行或者刚毕业哪里有什么经验呢？面试时候基本都是被拒之门外怎么办：今天我分享下我的经验：面试简历方面：一定要对自己的简历很熟悉，简历写得技能一定能说出一二，因为面试官很多问题都是挑的你的简历你写得问的，比如你写了熟练mysql主从同步原理集群搭建，一般肯定会问你，主从同步原理呀，如果你写了都说不出来，面试官咋样，肯定回家等通知了如果面试官
  • Rabbitmq从入门到精通 XJzz3 消息中间件rabbitmq
    文章目录1.RabbitMQ简介1.2组件介绍1.1消息队列的选择1.2Docker安装rabbitmq1.4消息应答机制2.1交换机类型2.1direct2.2fanout2.3topic：2.4header3RabbitMQ集群搭建3.1docker搭建rabbitmq集群4死信队列4.1ttl消息过期：生产者添加延迟生产4.2队列最大长度4.35.延迟队列6.发布确认机制6.1发布确认原理1
  • ZooKeeper的初识（Zookeeper基本知识，ZooKeeper shell，ZooKeeper数据模型 ，ZooKeeper Watcher 监听机制，ZooKeeper选举机制） kismetG AzkabanZookeeper基本知识ZooKeepershellZooKeeper数据模型ZooKeeperWatcher监听机制ZooKeeper选举机制
    Zookeeper基本知识Zookeeper集群搭建Zookeeper集群搭建指的是ZooKeeper分布式模式安装。通常由2n+1台servers组成。这是因为为了保证Leader选举（基于Paxos算法的实现）能过得到多数的支持，所以ZooKeeper集群的数量一般为奇数。Zookeeper运行需要java环境，所以需要提前安装jdk。对于安装leader+follower模式的集群，大致过程
  • Kubernetes Secret的创建与使用 Hadoop_Liang K8Skubernetes容器云原生
    前提条件拥有Kubernetes集群环境，可参考：Kubernetes集群搭建理解Kubernetes部署知识，可参考：使用Kubernetes部署第一个应用、Deloyment控制器Secret简介KubernetesSecret是一种用于存储敏感信息（如密码、令牌、密钥等）的对象。它可以让你将敏感数据以加密的方式存储在Kubernetes集群中，避免在配置文件或容器镜像中以明文形式暴露这些信息
  • rabbit@node2‘ thinks it‘s clustered with node ‘rabbit@node1‘, but ‘rabbit@node1‘ disagrees yangguosheng rabbitmqrabbitmqclusterforget节点集群
    两个rabbitmq节点rabbit@node1,rabbit@node2。集群搭建完成后，下线rabbit@node2,node2上执行rabbitmqctlstop停止该节点上的服务。node1上执行rabbitmqctlforget_cluster_noderabbit@node2。之后尝试启动rabbit@node2时，报错rabbit@node2'thinksit'sclusteredw
  • ZooKeeper集群部署实验 出现Error contacting service. It is probably not running. IT_linux zookeeperlinux分布式
    原因:三个节点,仅启动了一个节点的zookeeper,最少启动两个节点的zookeeper。前提:基础环境配置完成,ZooKeeper集群搭建完成1.启动ZooKeeper服务(切换到/root/zookeeper-3.4.14/bin目录下,我的zookeeper-3.4.14上传到了/root/目录下)切换目录[root@z1bin]#cd[root@z1~]#cd/root/zookeepe
  • GaussDB 学习实战指南：从部署到高并发优化的全流程解析 Jan123. gaussdb学习
    引言GaussDB作为华为推出的高性能分布式数据库，凭借其分布式架构、高可用性、云原生支持等特性，成为企业级应用的核心选择。本文将以实战操作为核心，覆盖集群部署、数据分片、性能调优、容灾备份、云上迁移五大场景，通过真实案例与代码示例，助你快速掌握GaussDB的实战技能，解决企业级应用中的复杂问题！一、GaussDB分布式集群部署实战1.本地多节点集群搭建（以openGauss为例）环境准备硬件要
  • 2.部署kafka:9092 AustinCien kafkazookeeperelk
    官方文档：http://kafka.apache.org/documentation.html(虽然kafka中集成了zookeeper,但还是建议使用独立的zk集群)Kafka3台集群搭建环境：操作系统:centos7防火墙：全关3台zookeeper集群内的机器，1台logstash软件版本:zookeeper-3.4.12.tar.gz软件版本kafka_2.12-2.1.0.tgz安装软件
  • K8S集群搭建(kubeadm+calico) kubernetes
    准备阶段环境显卡：4060ti系统：ubuntu22.041.安装docker官网安装步骤：#AddDocker'sofficialGPGkey:sudoapt-getupdatesudoapt-getinstallca-certificatescurlsudoinstall-m0755-d/etc/apt/keyringssudocurl-fsSLhttps://download.docker.
  • RabbitMQ集群搭建：使用HAProxy和Keepalived实现RabbitMQ的高可用负载均衡 EvktJava rabbitmq负载均衡ruby
    在本文中，我们将探讨如何使用HAProxy和Keepalived来搭建RabbitMQ的高可用负载均衡集群。我们还将介绍如何将SpringBoot与RabbitMQ集成，以便在应用程序中使用消息队列。搭建RabbitMQ集群首先，我们需要搭建一个RabbitMQ集群。在集群中，我们将有多个节点来处理消息队列的请求。每个节点都是独立的，但它们之间会相互通信以保持数据的同步。为了简化安装过程，我们将使
  • jmeter 与大数据生态圈中的服务进行集成 小赖同学啊 jmeter专栏jmeter大数据
    以下为你详细介绍JMeter与大数据生态圈中几种常见服务（HadoopHDFS、Spark、Kafka、Elasticsearch）集成的方法：与HadoopHDFS集成实现思路HDFS是Hadoop的分布式文件系统，JMeter可模拟客户端对HDFS进行文件读写操作，通常借助HDFS的JavaAPI编写自定义JMeter采样器。步骤添加依赖：将Hadoop的客户端JAR包添加到JMeter的li
  • RocketMq学习笔记 花开不识君 java中间件rocketmq
    RocketMq学习笔记本文记录作者基于RocketMq4.9x版本对RocketMq部分功能特性的学习，并尝试从源码角度分析其实现原理。相关文章RocketMq5.0proxy的引入:https://juejin.cn/post/7293788137662758946RocketMqDocker集群搭建:https://www.cnblogs.com/xiao987334176/p/167718
  • clickhouse集群搭建 fusugongzi clickhouse服务器linux
    准备三台机器，192.168.20.7，192.168.20.8，192.168.20.10用于搭建clickhouse集群。本次搭建的集群，为三副本的，即一份数据会在三台机器上分别存储，搭建集群只是为了容灾。1.在192.168.20.7上操作在clickhouseconfig.d目录下新建cluster.xml，内容如下91811/data/clickhouse/coordination/lo
  • nats集群搭建 fusugongzi 网络服务器运维
    本次使用三台机器搭建nats集群，ip分别为192.168.20.7、192.168.20.8、192.168.20.10，预先在三台机器上装好nats，版本为0.0.35。1.在192.168.20.7机器上操作，配置server.conf#为节点设置唯一的名称server_name:node1port:4222#供客户端连接的监听端口net:0.0.0.0#监听的网络地址http_port:8
  • LVS-DR集群搭建 afei00123 Linux
    目录1.LVS-DR实验拓扑2.实验环境3.配置LVS3.1IP配置3.2生成ens37:1配置文件3.3配置LVS-DR规则4.配置RealServer4.1配置IP，生成lo:1文件4.2安装httpd服务，编写测试页面4.3关闭ARP转发5.测试6.LVS的多种调度模式1.LVS-DR实验拓扑afeiLVS-DR的特点：（1）NAT模式效率太低；（2）LVS-DR基于2层的数据报文的转发，要
  • 如何安装Hadoop 薇晶晶 hadoop大数据分布式
    Hadoop入门(一)——CentOS7下载+VM上安装（手动分区）Hadoop入门(二)——VMware虚拟网络设置+Windows10的IP地址配置+CentOS静态IP设置Hadoop入门(三)——XSHELL7远程访问工具+XFTP7文件传输Hadoop入门(四)——模板虚拟机环境准备Hadoop入门(五)——Hadoop集群搭建-克隆三台虚拟机Hadoop入门(六)——JDK安装Hado
  • mongodb分片集群搭建 不会写诗的程序猿 mongodb数据库大数据
    环境准备操作系统：centos6.5mongodb版本：v3.6.23三台阿里云服务器：10.168.2.138、10.168.4.204、10.168.4.205搭建目标两个分片复制集（ShardedReplicaSet）分片集群1:（10.168.2.138:27011、10.168.4.204:27011、10.168.4.205:27011）分片集群2:(10.168.2.138:2701
  • Hbase深入浅出 天才之上 数据存储Hbase大数据存储
    目录HBase在大数据生态圈中的位置HBase与传统关系数据库的区别HBase相关的模块以及HBase表格的特性HBase的使用建议Phoenix的使用总结HBase在大数据生态圈中的位置提到大数据的存储，大多数人首先联想到的是Hadoop和Hadoop中的HDFS模块。大家熟知的Spark、以及Hadoop的MapReduce，可以理解为一种计算框架。而HDFS，我们可以认为是为计算框架服务的存
  • MongoDB分片集群搭建及扩容 老虎大人
    准备工作在CentOS7上安装MongoDB分片集群6Servers代表：6台服务器上都要操作.环境准备On6Servers给虚拟机设置静态IPvi/etc/sysconfig/network-scripts/ifcfg-enp0s3修改以下#BOOTPROTO=“dhcp”BOOTPROTO=“static”IPADDR=“.xx.xx.xx.xx”NETMASK=“255.255.255.0”
  • ubuntu安装k8s qq_41369135 ubuntukuberneteslinux
    centos：centos：K8Sv1.28.2集群搭建-docker版-一毛丶丶-博客园centos：Kubernetes详细安装教程_kubernetes安装-CSDN博客准备工作：1、主机名解析：确保每台机器的主机名能够被解析（可以通过/etc/hosts或DNS）。#三台机子分别执行sudohostnamectlset-hostnamek8s-mastersudohostnamectlse
  • Elasticsearch-API命令行相关操作手册 少儿频道 elasticsearch中间件elasticsearch运维
    系列文章目录第一章es集群搭建文章目录系列文章目录前言esApi操作总结前言通过第一章学习es集群搭建流程及es基本概念后，在本章内容中，我们主要对es的基本命令行操作进行一次基本学习,来源于工作中的整理。esApi操作1.查看没有配置密码的es集群节点curl-XGEThttp://ip:9200/_cat/nodes?v2.查看配置了密码的es集群节点(关于es集群配置认证密码将在下章讲)cu
  • MySQL 运维篇 -- 主从集群搭建 L小Ray想有腮 MySQLmysql运维数据库
    文章目录主从复制主从复制原理主从故障处理延时从库主从GTID复制主从GR复制*****搭建组复制观察组复制主从复制主从同步过程（1）主丛复制基于binlog来实现的（2）主库发生新的操作，都会记录binlog（3）从库取得主库的binlog进行回放（4）主从复制是异步的准备主从的初始MySQL环境（YUM安装）[root@master~]#hostnamemaster[root@master~]#
  • ClickHouse集群搭建（CENTOS7环境） huaxia2002 大数据常用框架入门
    ClickHouse集群搭建（CENTOS7环境）1.rpm包下载下载的rpm包版本-rw-r--r--1rootroot1342545月2817:07clickhouse-client-20.3.9.70-2.noarch.rpm-rw-r--r--1rootroot1169243615月2817:07clickhouse-common-static-20.3.9.70-2.x86_64.rpm
  • 从0到1带大家搭建spring cloud alibaba 微服务大型应用框架（九）文件服务篇（1）：minio 单机与集群搭建 峡谷电光马仔 springcloudminioalibaba分布式文件
    为什么需分布式文件服务单机时代初创时期由于时间紧迫，在各种资源有限的情况下，通常就直接在项目目录下建立静态文件夹，用于用户存放项目中的文件资源。如果按不同类型再细分，可以在项目目录下再建立不同的子目录来区分。例如：resources\static\file、resources\static\image等。优点：这样做比较便利，项目直接引用就行，实现起来也简单，无需任何复杂技术，保存数据库记录和访问
  • Sealos的k8s高可用集群搭建 da pai ge kubernetes容器云原生
    Sealos介绍](https://sealos.io/zh-Hans/docs/Intro)Sealos是一个Go语言开发的简单干净且轻量的Kubernetes集群部署工具，能很好的支持在生产环境中部署高可用的Kubernetes集群。Sealos特性与优势支持离线安装，工具与部署资源包分离，方便不同版本间快速升级。证书有效期默认延期至99年。工具使用非常简单。支持使用自定义配置文件，可灵活完成
  • k8s第一章：kubeadm集群搭建 琴剑诗酒 kubernetes容器云原生
    开源容器应用自动化部署技术KubernetesKubernetes这个单词来自于希腊语，含义是舵手或领航员；生产环境级别的容器编排编排是什么意思:1.按照一定的目的依次排列；2.调配、安排；Kubernetes，也称为K8S，其中8是代表中间“ubernete”的8个字符，是Google在2014年开源的一个容器编排引擎，用于自动化容器化应用程序的部署、规划、扩展和管理，它将组成应用程序的容器分组
  • ELK系列（二）Kafka集群3.4.0搭建 诉光海 ELKelkjava服务器kafka
    ELK系列传送门ELK系列（一）ElasticSearch8.9.2集群搭建ELK系列（二）Kafka集群3.4.0搭建ELK数据流规划ELK接入nginx-acces日志数据流规划数据流向filebeat------->kafka---->logstash---->ES-------->kibana收集mq处理日志存储、搜索展示、分析||elastalert2---钉钉告警ES集群搭建已完成可见
  • Elasticsearch 7 集群搭建问题排查：常见故障解决方案与优化技巧 程序员的开发手册 运维教程Elasticsearchelasticsearch集群搭建问题排查常见故障解决方案
    引言Elasticsearch作为一种强大的分布式搜索引擎，已被广泛应用于各种场景，特别是在日志聚合、数据分析等领域中。然而，在实际部署中，尤其是集群搭建阶段，许多用户都会遇到配置问题，导致集群无法成功建立。在本文中，我们将通过一个实际的案例，详细分析和排查Elasticsearch集群搭建中的常见故障，帮助你快速解决问题，顺利完成集群的搭建。背景介绍在我们的案例中，用户在尝试搭建一个简单的Ela
  • 安装mysql的MGR集群 秋天枫叶35 安装中间件mysql数据库MGR集群运维linux
    说明1、mysql数据库主从宕机，会影响到正常业务访问，并且要手动进行切换。2、MHA高可用搭建复杂，代码已停止更新。3、MGR集群搭建方便，master故障会自动进行切换，不影响业务正常访问。一、环境准备1、主机说明IP地址主机名端口操作系统数据库版本172.16.1.20db013306centos7.95.7.40172.16.1.21db023306centos7.95.7.40172.1
  • 大数据生态圈基础组件安装步骤 鹏说大数据 大数据生态圈大数据hadoop
    摘要：大数据生态圈基础组件安装步骤关键词：大数据、基础组件、运维、安装步骤整体说明大数据生态圈有很多组件，而且需要多台机器才能良好的运行，以下从机器准备、环境准备、组件安装顺序的去完成大数据组件的安装。一、机器准备1.1、配置要求类别最小配置推荐配置说明操作系统Linux(如CentOS,Ubuntu)Linux(如CentOS7+,Ubuntu18.04+)支持多种操作系统，但建议使用稳定版本的
  • Java开发中，spring mvc 的线程怎么调用？ 小麦麦子 springmvc
    今天逛知乎，看到最近很多人都在问spring mvc 的线程http://www.maiziedu.com/course/java/ 的启动问题，觉得挺有意思的，那哥们儿问的也听仔细，下面的回答也很详尽，分享出来，希望遇对遇到类似问题的Java开发程序猿有所帮助。 问题：     在用spring mvc架构的网站上，设一线程在虚拟机启动时运行，线程里有一全局
  • maven依赖范围 bitcarter maven
    1.test 测试的时候才会依赖，编译和打包不依赖，如junit不被打包 2.compile 只有编译和打包时才会依赖 3.provided 编译和测试的时候依赖，打包不依赖，如：tomcat的一些公用jar包 4.runtime 运行时依赖，编译不依赖 5.默认compile 依赖范围compile是支持传递的，test不支持传递 1.传递的意思是项目A，引用
  • Jaxb org.xml.sax.saxparseexception : premature end of file darrenzhu xmlprematureJAXB
    如果在使用JAXB把xml文件unmarshal成vo(XSD自动生成的vo)时碰到如下错误： org.xml.sax.saxparseexception : premature end of file 很有可能时你直接读取文件为inputstream，然后将inputstream作为构建unmarshal需要的source参数。InputSource inputSource = new In
  • CSS Specificity 周凡杨 html权重Specificitycss
      有时候对于页面元素设置了样式，可为什么页面的显示没有匹配上呢？ because specificity CSS 的选择符是有权重的，当不同的选择符的样式设置有冲突时，浏览器会采用权重高的选择符设置的样式。     规则：   HTML标签的权重是1 Class 的权重是10 Id 的权重是100
  • java与servlet g21121 servlet
    servlet 搞java web开发的人一定不会陌生，而且大家还会时常用到它。 下面是java官方网站上对servlet的介绍： java官网对于servlet的解释 写道 Java Servlet Technology Overview Servlets are the Java platform technology of choice for extending and enha
  • eclipse中安装maven插件 510888780 eclipsemaven
    1.首先去官网下载 Maven： http://www.apache.org/dyn/closer.cgi/maven/binaries/apache-maven-3.2.3-bin.tar.gz 下载完成之后将其解压， 我将解压后的文件夹：apache-maven-3.2.3， 并将它放在 D:\tools目录下， 即 maven 最终的路径是：D:\tools\apache-mave
  • jpa@OneToOne关联关系 布衣凌宇 jpa
    Nruser里的pruserid关联到Pruser的主键id，实现对一个表的增删改，另一个表的数据随之增删改。 Nruser实体类 //***************************************************************** @Entity @Table(name="nruser") @DynamicInsert @Dynam
  • 我的spring学习笔记11-Spring中关于声明式事务的配置 aijuans spring事务配置
    这两天学到事务管理这一块，结合到之前的terasoluna框架，觉得书本上讲的还是简单阿。我就把我从书本上学到的再结合实际的项目以及网上看到的一些内容，对声明式事务管理做个整理吧。我看得Spring in Action第二版中只提到了用TransactionProxyFactoryBean和<tx:advice/>,定义注释驱动这三种，我承认后两种的内容很好，很强大。但是实际的项目当中
  • java 动态代理简单实现 antlove javahandlerproxydynamicservice
    dynamicproxy.service.HelloService package dynamicproxy.service; public interface HelloService { public void sayHello(); }   dynamicproxy.service.impl.HelloServiceImpl package dynamicp
  • JDBC连接数据库 百合不是茶 JDBC编程JAVA操作oracle数据库
             如果我们要想连接oracle公司的数据库，就要首先下载oralce公司的驱动程序，将这个驱动程序的jar包导入到我们工程中;   JDBC链接数据库的代码和固定写法;     1,加载oracle数据库的驱动;     &nb
  • 单例模式中的多线程分析 bijian1013 javathread多线程java多线程
    谈到单例模式，我们立马会想到饿汉式和懒汉式加载，所谓饿汉式就是在创建类时就创建好了实例，懒汉式在获取实例时才去创建实例，即延迟加载。 饿汉式： package com.bijian.study; public class Singleton { private Singleton() { } // 注意这是private 只供内部调用 private static
  • javascript读取和修改原型特别需要注意原型的读写不具有对等性 bijian1013 JavaScriptprototype
            对于从原型对象继承而来的成员，其读和写具有内在的不对等性。比如有一个对象A，假设它的原型对象是B，B的原型对象是null。如果我们需要读取A对象的name属性值，那么JS会优先在A中查找，如果找到了name属性那么就返回；如果A中没有name属性，那么就到原型B中查找name，如果找到了就返回；如果原型B中也没有
  • 【持久化框架MyBatis3六】MyBatis3集成第三方DataSource bit1129 dataSource
    MyBatis内置了数据源的支持，如：   <environments default="development"> <environment id="development"> <transactionManager type="JDBC" /> <data
  • 我程序中用到的urldecode和base64decode,MD5 bitcarter cMD5base64decodeurldecode
    这里是base64decode和urldecode，Md5在附件中。因为我是在后台所以需要解码： string Base64Decode(const char* Data,int DataByte,int& OutByte) { //解码表 const char DecodeTable[] = { 0, 0, 0, 0, 0, 0
  • 腾讯资深运维专家周小军：QQ与微信架构的惊天秘密 ronin47
    社交领域一直是互联网创业的大热门，从PC到移动端，从OICQ、MSN到QQ。到了移动互联网时代，社交领域应用开始彻底爆发，直奔黄金期。腾讯在过去几年里，社交平台更是火到爆，QQ和微信坐拥几亿的粉丝，QQ空间和朋友圈各种刷屏，写心得，晒照片，秀视频，那么谁来为企鹅保驾护航呢？支撑QQ和微信海量数据背后的架构又有哪些惊天内幕呢？本期大讲堂的内容来自今年2月份ChinaUnix对腾讯社交网络运营服务中心
  • java-69-旋转数组的最小元素。把一个数组最开始的若干个元素搬到数组的末尾，我们称之为数组的旋转。输入一个排好序的数组的一个旋转，输出旋转数组的最小元素 bylijinnan java
    public class MinOfShiftedArray { /** * Q69 旋转数组的最小元素 * 把一个数组最开始的若干个元素搬到数组的末尾，我们称之为数组的旋转。输入一个排好序的数组的一个旋转，输出旋转数组的最小元素。 * 例如数组{3, 4, 5, 1, 2}为{1, 2, 3, 4, 5}的一个旋转，该数组的最小值为1。 */ publ
  • 看博客，应该是有方向的 Cb123456 反省看博客
    看博客，应该是有方向的:  我现在就复习以前的，在补补以前不会的，现在还不会的，同时完善完善项目，也看看别人的博客.  我刚突然想到的:  1.应该看计算机组成原理，数据结构，一些算法，还有关于android,java的。  2.对于我，也快大四了，看一些职业规划的，以及一些学习的经验，看看别人的工作总结的.    为什么要写
  • [开源与商业]做开源项目的人生活上一定要朴素,尽量减少对官方和商业体系的依赖 comsci 开源项目
         为什么这样说呢？  因为科学和技术的发展有时候需要一个平缓和长期的积累过程，但是行政和商业体系本身充满各种不稳定性和不确定性，如果你希望长期从事某个科研项目，但是却又必须依赖于某种行政和商业体系，那其中的过程必定充满各种风险。。。       所以，为避免这种不确定性风险，我
  • 一个 sql优化 （[精华] 一个查询优化的分析调整全过程！很值得一看 ） cwqcwqmax9 sql
    见   http://www.itpub.net/forum.php?mod=viewthread&tid=239011 Web翻页优化实例 提交时间: 2004-6-18 15:37:49      回复    发消息  环境： Linux ve
  • Hibernat and Ibatis dashuaifu Hibernateibatis
    Hibernate  VS  iBATIS 简介 Hibernate 是当前最流行的O/R mapping框架，当前版本是3.05。它出身于sf.net，现在已经成为Jboss的一部分了 iBATIS 是另外一种优秀的O/R mapping框架，当前版本是2.0。目前属于apache的一个子项目了。 相对Hibernate“O/R”而言，iBATIS 是一种“Sql Mappi
  • 备份MYSQL脚本 dcj3sjt126com mysql
    #!/bin/sh # this shell to backup mysql #[email protected] (QQ:1413161683 DuChengJiu) _dbDir=/var/lib/mysql/ _today=`date +%w` _bakDir=/usr/backup/$_today [ ! -d $_bakDir ] && mkdir -p
  • iOS第三方开源库的吐槽和备忘 dcj3sjt126com ios
    转自 ibireme的博客   做iOS开发总会接触到一些第三方库，这里整理一下，做一些吐槽。   目前比较活跃的社区仍旧是Github，除此以外也有一些不错的库散落在Google Code、SourceForge等地方。由于Github社区太过主流，这里主要介绍一下Github里面流行的iOS库。   首先整理了一份 Github上排名靠
  • html wlwmanifest.xml eoems htmlxml
    所谓优化wp_head()就是把从wp_head中移除不需要元素，同时也可以加快速度。 步骤： 加入到function.php remove_action('wp_head', 'wp_generator'); //wp-generator移除wordpress的版本号，本身blog的版本号没什么意义，但是如果让恶意玩家看到，可能会用官网公布的漏洞攻击blog remov
  • 浅谈Java定时器发展 hacksin java并发timer定时器
    java在jdk1.3中推出了定时器类Timer,而后在jdk1.5后由Dou Lea从新开发出了支持多线程的ScheduleThreadPoolExecutor，从后者的表现来看，可以考虑完全替代Timer了。 Timer与ScheduleThreadPoolExecutor对比： 1.    Timer始于jdk1.3,其原理是利用一个TimerTask数组当作队列
  • 移动端页面侧边导航滑入效果 ini jqueryWebhtml5cssjavascirpt
    效果体验：http://hovertree.com/texiao/mobile/2.htm可以使用移动设备浏览器查看效果。效果使用到jquery-2.1.4.min.js，该版本的jQuery库是用于支持HTML5的浏览器上，不再兼容IE8以前的浏览器，现在移动端浏览器一般都支持HTML5，所以使用该jQuery没问题。HTML文件代码： <!DOCTYPE html> <h
  • AspectJ+Javasist记录日志 kane_xie aspectjjavasist
    在项目中碰到这样一个需求，对一个服务类的每一个方法，在方法开始和结束的时候分别记录一条日志，内容包括方法名，参数名+参数值以及方法执行的时间。   @Override public String get(String key) { // long start = System.currentTimeMillis(); // System.out.println("Be
  • redis学习笔记 MJC410621 redisNoSQL
    1)nosql数据库主要由以下特点：非关系型的、分布式的、开源的、水平可扩展的。 1，处理超大量的数据 2，运行在便宜的PC服务器集群上， 3，击碎了性能瓶颈。 1)对数据高并发读写。 2)对海量数据的高效率存储和访问。 3)对数据的高扩展性和高可用性。 redis支持的类型： Sring 类型 set name lijie get name lijie set na
  • 使用redis实现分布式锁 qifeifei
    在多节点的系统中，如何实现分布式锁机制，其中用redis来实现是很好的方法之一，我们先来看一下jedis包中，有个类名BinaryJedis,它有个方法如下：   public Long setnx(final byte[] key, final byte[] value) { checkIsInMulti(); client.setnx(key, value); ret
  • BI并非万能，中层业务管理报表要另辟蹊径 张老师的菜 大数据BI商业智能信息化
           BI是商业智能的缩写，是可以帮助企业做出明智的业务经营决策的工具，其数据来源于各个业务系统，如ERP、CRM、SCM、进销存、HER、OA等。        BI系统不同于传统的管理信息系统，他号称是一个整体应用的解决方案，是融入管理思想的强大系统：有着系统整体的设计思想，支持对所有
  • 安装rvm后出现rvm not a function 或者ruby -v后提示没安装ruby的问题 wudixiaotie function
    1.在~/.bashrc最后加入 [[ -s "$HOME/.rvm/scripts/rvm" ]] && source "$HOME/.rvm/scripts/rvm"  2.重新启动terminal输入：   rvm use ruby-2.2.1 --default  把当前安装的ruby版本设为默
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他