Slaytanic
Slaytanic

视频：easyhadoop聚会hive和phpHiveAdmin部分

2012-04-14，在北航主南203，第二次easyhadoop开发者聚会

核心主题:Hadoop高可用和性能调优和Hadoop相关软件发布. 网站:www.easyhadoop.com EasyHadoop 交流群:93086930

1.Hadoop 国内外应用,带EasyHadoop v2.0 介绍 [暴风-xiaojun] 
2.Hadoop系统监控和Hive负载均衡,带phpHiveAdmin 介绍 [暴风-Slaytanic]
3.ganglia监控Hadoop实战 [gamewave-东杰] 
4.Hive+Mapreduce 编程性能调优,带HappyETL v0.1介绍 [暴风-凌峰]
5.FriDay 快速报表创建 [暴风-同一种调调] 
6.LRE v2.0.2958 简单介绍 [暴风-竹叶青]

老婆给录的视频，看个大概。声音有点小，本来原定时间半小时，没搂住，讲了一个小时。家里人给录的，上传起来就比较方便。

我是第二个讲，蓝色的部分，不过从内容上说我的题目是最低端的，后面每个人讲的内容都比我深入，我算是个抛砖引玉的，只是对我公司数据组目前用到的部分系统软件做一个粗略的介绍。真正的重头戏是后面三个红色的演讲题目。当天是有42区的人专门拍摄视频，更专业，所有人的视频会统一上传到视频网站上吧，放好了会给出视频链接。

来的朋友们提问都很专业，给出的建议更是拓展了思路，非常好的聚会。中间休息的时候跟好几个人闲聊，相谈甚欢。

有一个问题给我留下比较深刻的印象，是说，haproxy代理hive，如果haproxy挂了怎么办？这个其实没什么太好的办法，只能说是在现有条件下，尽可能做到高可用，毕竟haproxy要比hive稳定太多了。谁也不能保证haproxy不会挂，就如同谁也不能保证F5不会挂一样。只是在尽可能的情况下提高可用性，没有人敢保证绝对的事情。

还有就是ppt文件的下载


本文出自 “实践检验真理” 博客，谢绝转载！

你可能感兴趣的:(hive,云计算,phphiveadmin)

  • etcd：从应用场景到实现原理的全方位解读(转) 忆几 linuxetcd云计算
    随着CoreOS和Kubernetes等项目在开源社区日益火热，它们项目中都用到的etcd组件作为一个高可用、强一致性的服务发现存储仓库，渐渐为开发人员所关注。在云计算时代，如何让服务快速透明地接入到计算集群中，如何让共享配置信息快速被集群中的所有机器发现，更为重要的是，如何构建这样一套高可用、安全、易于部署以及响应快速的服务集群，已经成为了迫切需要解决的问题。etcd为解决这类问题带来了福音，本
  • 大数据必学免费、开源分布式数据库——Apache Hive 遇码 大数据数据仓库开源hivehadoopsql数据库ApacheHive
    Hive是大数据开发、分析领域无法绕开的一个话题。我将分认识Hive、快速部署、快速入门等几个模块为同学们详细地介绍Hive，期望可以为刚刚接触大数据领域的同学们建立一个初步的认知。Hive是什么Hive，又称ApacheHive，由Facebook开源用于解决海量结构化日志的数据统计工具。Hive是基于ApacheHadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查
  • 阿里开源的免费数据集成工具——DataX 遇码 大数据开源datax数据集成大数据seatunnelkettleflinkcdc
    企业里真实的数据流转是什么样子的呢？左侧描述了一个企业真实的样子，我们总是需要把数据从一个地方搬到另一个地方，最后就是搬来搬去搬成了一张张解不开的网。右侧则表达了使用DataX为中心实现数据的同步。什么是DataXDataX是一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功
  • AWS云服务配置全指南：从入门到精通，一文掌握AWS核心工具 ivwdcwso 运维与云原生aws云计算EC2云安全CloudFormationIAM
    随着云计算的普及，AWS作为全球最大的云服务提供商，其强大的功能和丰富的工具集让很多开发者和企业趋之若鹜。本文将带你系统了解AWS的基础配置及其核心工具，助你快速上手这一强大的云平台。一、AWS账户配置基础1.1创建AWS账户首先，我们需要创建一个AWS账户：访问AWS官网点击"创建AWS账户"填写邮箱地址和账户名提供有效的支付方式（AWS提供12个月的免费套餐）完成身份验证1.2设置IAM用户和
  • GaussDB 内存结构详解 笑远 gaussdb数据库
    GaussDB内存结构详解GaussDB是华为推出的高性能、可扩展的关系型数据库管理系统，广泛应用于企业级应用、大数据处理和云计算场景。内存管理在数据库性能和稳定性中扮演着至关重要的角色。本文将深入探讨GaussDB的内存结构，包括其主要组件、内存分配机制、缓存管理以及内存优化策略，帮助您全面理解并优化GaussDB的内存使用。目录GaussDB内存架构概述内存组成部分共享内存（SharedMem
  • 主流云平台（AWS、华为云、阿里云、Google Cloud等）的**大数据及人工智能技术栈**及其核心组件的深度解析 无级程序员 云计算平台大数据aws华为云阿里云云原生
    云计算系列文章：1.GCP（Cloud-nativestack）的云原生技术栈介绍2.主流云厂商的云原生技术栈（Cloud-nativestack）及其核心组件对比3.主流云平台（AWS、华为云、阿里云、GoogleCloud等）的大数据及人工智能技术栈及其核心组件的深度解析目前项目要用到大数据及AI，于是在网上研究了一下各大平台的技术栈及其核心组件，现分享一下，包括AWS、华为云、阿里云、Goo
  • Sqoop-试题 minaMoonGirl sqoophadoophive
    一、试题部分使用Sqoop导入工具，要求只追加导入检查列中时间晚于或等于last-value的记录，则incremental模式应该设置为____？A.mergeB.lastmodifiedC.last-valueD.appendsqoop导出采用调用模式时，以下说法正确的是？A.使用--call参数调用存储过程B.存储过程需要提前在hive中创建C.存储过程需要提前在hdfs中创建D.使用--c
  • whole-archive与gc-sections 蓁蓁啊 OneOSlinuxc语言单片机嵌入式硬件stm32
    在嵌入式系统开发中，--whole-archive和--gc-sections是链接器（ld）的两个关键选项，它们的组合使用对最终二进制文件的构成有决定性影响。下面从原理和实际示例详细说明：一、基础原理1.--whole-archive作用机制：强制链接器处理静态库（.a文件）时，包含库中所有目标文件（.o文件）覆盖默认的"仅包含被引用目标文件"的行为作用范围：从出现位置开始，直到遇到--no-w
  • 销售易与腾讯战略合作再升级，共同开拓SaaS赛道增长新机遇 saassaas平台
    2月14日，中国CRM领军者销售易宣布与腾讯战略合作升级，双方将围绕产品、技术、生态等维度加大协同力度，共同开拓SaaS赛道增长新路径、新机遇。为了进一步整合和发挥双方优势资源能力，腾讯集团副总裁、政企业务总裁李强将兼任销售易董事长，销售易创始人史彦泽继续担任CEO。李强于2021年加入腾讯，此前曾担任SAP全球高级副总裁、中国区总经理，拥有20多年的企业管理经验，对云计算、商业软件以及创新商业模
  • 面向对象设计模式的基本概念、分类、作用方式、优缺点——系统地学习面向对象设计模式，提升软件质量 AI天才研究院 Python实战Java实战自然语言处理人工智能语言模型编程实践开发语言架构设计
    作者：禅与计算机程序设计艺术1.简介随着互联网、移动互联网、物联网等新兴技术的普及，越来越多的应用被部署在云端，并受到用户需求的驱动。云计算平台带来的高弹性、可伸缩性、按需付费等优势使得云端服务的开发和运维变得更加复杂。传统软件开发模式下，程序员需要花费大量的时间和精力来解决软件的结构化和可维护性问题，而面向对象的设计模式则可以很好地帮助程序员解决这些问题。面向对象设计模式是一种抽象的、形式化的解
  • java：关于 Java 技术 Katie。 Java实战项目java开发语言
    Java技术详解一、前言Java作为一种跨平台、面向对象的编程语言，自1995年由SunMicrosystems（后被Oracle收购）推出以来，便以其简单易学、稳定安全和高性能等优点风靡全球。经过二十余年的不断发展，Java已经成为企业级应用开发、移动互联网、分布式系统、大数据以及云计算等多个领域的主流技术之一。本文将对Java技术进行全面而深入的介绍，从语言基本语法到高级特性，从JVM架构到企
  • nodejs 压缩文件 墨雪遗痕 axiosJavaScriptvue.jsjavascriptnodejs
    这个事情，是为了能自动部署的就是项目打包后，自动压缩文件，然后去向一个后台提供的接口上传这个压缩文件。从而实现自动部署constpath=require('path')constfs=require('fs')constarchiver=require('archiver')//这个就是用于压缩的包constaxios=require('axios')//axios需要引入constFormDat
  • UI前端与数字孪生：打造智慧城市的双引擎 共享ui设计和前端开发人才 智慧城市人工智能
    hello宝子们...我们是艾斯视觉擅长ui设计和前端数字孪生、大数据、三维建模、三维动画10年+经验!希望我的分享能帮助到您!如需帮助可以评论关注私信我们一起探讨!致敬感谢感恩!随着信息技术的飞速发展，智慧城市的概念逐渐从理论走向实践。智慧城市旨在通过运用物联网、大数据、云计算等先进技术，实现城市的高效管理、资源的优化配置和居民生活质量的提升。在这个过程中，UI前端与数字孪生技术成为了不可或缺的
  • 理解本真的REST架构风格 熊猫小牛牛 系统架构技术架构rest
    转自：http://blog.csdn.net/j080624/article/details/56025356引子在移动互联网、云计算迅猛发展的今天，作为一名Web开发者，如果您还没听说过“REST”这个buzzword，显然已经落伍了。夸张点说，甚至“出了门都不好意思跟别人打招呼”。尽管如此，对于REST这个泊来品的理解，大多数人（包括一些资深的架构师）仍然停留在“盲人摸象”的阶段。常常听到各
  • 科拓全智能停车收费系统T_SellFrom.aspx存在SQL注入漏洞(DVB-2025-9011) Byp0ss403 漏洞复现集合SQL注入web安全
    免责声明仅供网络安全研究与教育目的使用。任何人不得将本文提供的信息用于非法目的或未经授权的系统测试。作者不对任何由于使用本文信息而导致的直接或间接损害承担责任。如涉及侵权，请及时与我们联系，我们将尽快处理并删除相关内容。一：产品介绍科拓全智能停车收费系统是一款集车牌识别、电子支付、车位引导等功能于一体的智能化停车管理平台，通过物联网技术和云计算实现无人值守停车管理，支持微信/支付宝等移动支付方式，
  • 使用esri的gis-tools-for-hadoop工具包，在hive中实现空间计算 从地图看世界 GIS大数据hadoophiver语言
    以基站工参表实现空间关系判断（点在多边形内）为例，使用ESRI的gis-tools-for-hadoop工具包，在hive中实现数据空间计算的几个主要步骤：上传空间地理实体数据到hadoop集群；hive中创建地理实体表；与基站工参表做空间判断（点在多边形内）。一、HiveHive是基于Hadoop的数据仓库，采用MPP架构（大规模并行处理），存储结构化数据，提供sql查询功能，sql语句转换为M
  • HiveSQL优化 小球-大数据 hive大数据sql数据仓库数据库开发
    2-1分桶采样当表的数据量比较庞大的时候,在编写SQL语句后,需要首先测试SQL是否可以正常的执行,需要在表中执行查询操作,由于表数据量比较庞大,在测试一条SQL的时候整个运行的时间比较久,为了提升测试效率,可以整个表抽样出一部分的数据,进行测试校验数据的可行性(质量校验)100条sum()join进行统计分析的时候,并不需要统计出具体的指标,可能统计的都是一些相对性指标,比如说一些比率(合格率)
  • hive sql 正则 提取括号中内容 Rideo-rax hivesqlhadoop数据仓库大数据
    我整理的一些关于【数据】的项目学习资料（附讲解～～）和大家一起分享、学习一下：https://d.51cto.com/eDOcp1使用HiveSQL正则提取括号中的内容在数据分析和处理的过程中，尤其是在大数据平台Hive中，我们经常需要处理一些复杂的数据需求，比如提取某些括号中的内容。本文将逐步教会你如何在HiveSQL中使用正则表达式来实现这一目标。流程概述为了实现提取括号内内容的目标，我们可以
  • 剔除 HIVE中select除了某些字段之外的剩余所有字段 chimchim66 sqlhadoopsql
    只需要设置参数sethive.support.quoted.identifiers=None;指定要剔除哪个字段select(剔除的字段)?+.+fromtable示例：选择tableName表中除了name、id、pwd之外的所有字段：sethive.support.quoted.identifiers=None;select(name|id|pwd)?+.+fromtableName;选择ta
  • Hive UDF开发实战：构建高性能JSON生成器 莫叫石榴姐 收获不止一点hivejsonhadoop数据仓库大数据sql
    目录一、背景与需求场景二、开发环境准备2.1基础工具栈2.2Maven依赖配置三、核心代码实现3.1UDF类骨架3.2高级类型处理四、部署与使用4.1打包与注册4.2使用示例五、性能优化技巧六、功能扩展方向七、生产环境注意事项八、性能对比测试九、总结与展望往期精彩一、背景与需求场景在大数据生态中，Hive作为主流的数据仓库工具，在处理结构化数据时表现出色。但当我们需要将Hive查询结果与其他JSO
  • 边缘计算与物联网的结合 AI天才研究院 AI大模型企业级应用开发实战AI大模型应用入门实战与进阶DeepSeekR1&大数据AI人工智能大模型计算科学神经计算深度学习神经网络大数据人工智能大型语言模型AIAGILLMJavaPython架构设计AgentRPA
    1.背景介绍在现代科技的发展中，物联网（IoT）和边缘计算是两个重要的概念。物联网是一种普遍的网络概念，它连接了各种物理设备，包括电子设备、软件、传感器、执行器和网络，使它们能够收集和交换数据。而边缘计算则是一种分布式计算范式，它将计算任务、数据和服务靠近数据源的地方，也就是网络的边缘。过去几年，物联网设备的数量和使用率都在快速增长。然而，随着设备数量的增加，数据处理的需求也在增加。传统的云计算模
  • 数据湖和Apache Iceberg，Apache Hudi，Delta Lake 西土城计划 apachebigdata大数据
    1什么是数据湖？数据湖这个词目前已经流行开来，逐步被数据相关的从业者接受，可能还有很多人不太清楚它和Hadoop，Hive，Spark这些大数据系统的区别，简单说数据湖是个业务概念，主要是为了区别传统数仓这个概念的（传统数仓的定义：datawarehouse，是用于报告和数据分析的系统，被认为是商业智能的核心组件）。为什么说是“传统数仓”，因为Hadoop于2006年诞生至今已有10多年了，在这期
  • 五大.NET开源框架，助你快速构建高效应用，告别996！ 墨夶 C#学习资料1.net开源
    在当今快节奏的软件开发环境中，选择正确的工具可以显著提高团队的工作效率。对于使用.NET技术栈的开发者而言，拥有一个强大且易于使用的快速开发框架意味着能够更快地将想法转化为实际产品，同时减少重复劳动。本文将详细介绍五个备受推崇的.NET开源框架，它们不仅提供了丰富的功能特性，还支持现代化的前后端分离架构，帮助企业和个人开发者轻松应对复杂的业务需求。一、随着云计算、微服务等新兴技术趋势的发展，传统的
  • Spring Cloud Stream：打造强大的微服务事件驱动架构 Java爱好狂. java开发语言
    随着云计算、微服务和大数据技术的快速发展，构建可扩展、高性能和弹性的应用程序变得越来越重要。为了满足这些要求，许多开发人员转向了事件驱动架构，它允许应用程序通过基于事件的方式相互通信，从而提高了系统的响应速度和伸缩性。在这个背景下，SpringCloudStream应运而生，它是一个用于构建基于事件驱动的微服务应用程序的框架，可以与现有的消息中间件（如ApacheKafka和RabbitMQ）无缝
  • 2022年全国职业院校技能大赛（高职组）“云计算”赛项赛卷②公有云 旺仔Sec #云计算职业院校技能大赛竞赛试题云计算公有云
    2022年全国职业院校技能大赛（高职组）“云计算”赛项赛卷2第三场次：公有云（30分）环境说明：某信息技术科技公司实施数字化转型与应用上云，要对公司内部项目搭建基于云原生的Devops相关服务。选择国内公有云提供商，为客户提供K8S、云网络、云硬盘、云防火墙、负载均衡等服务，可创建Web服务，共享文件存储服务，数据库服务，数据库集群等服务。根据上述公有云平台的特性，完成公有云中的各项运维工作。任务
  • 2020年全国职业院校技能大赛改革试点赛高职组“云计算”竞赛赛卷第二场次题目：容器云平台部署与运维 春生黎至1005 云计算全国职业技能竞赛样题云计算kubernetes
    2020年全国职业院校技能大赛改革试点赛高职组“云计算”竞赛赛卷第二场次题目：容器云平台部署与运维说明：本任务提供有2台服务器master和node，都安装了centos7.5操作系统，在/opt/centos目录下有CentOS-7-x86_64-DVD-1804系统光盘文件所有文件，在/opt/containerk8s目录下有本次容器云运维所需的所有文件。某公司技术部产品开发上线周期长，客户的
  • 2020年全国职业院校技能大赛改革试点赛高职组“云计算”竞赛赛卷第三场次题目：公有云部署与运维 春生黎至1005 云计算全国职业技能竞赛样题云计算运维
    2020年全国职业院校技能大赛改革试点赛高职组“云计算”竞赛赛卷第三场次题目：公有云部署与运维云梦是一家科技公司，在公司内为产品展示搭建了面向公众的WordPress。公司技术管理员将WordPress架设在一台互联网的虚拟主机服务器中，域名为wpXX.yunmeng.com，服务器公网IP为114.228.187.XX。随着公司WordPress访问量的不断增加，考虑到成本和维护的原因，公司决定
  • 谷歌云：快速实现业务需求的云平台 I~Lucky 服务器
    谷歌云（GoogleCloud）是全球领先的云计算平台之一，凭借其强大的计算能力、丰富的功能和先进的技术，为企业和个人提供了广泛的应用场景和解决方案。本文将详细介绍谷歌云的核心功能、应用场景以及其先进性，帮助读者快速了解谷歌云。一、谷歌云的核心功能（一）计算与存储计算服务：谷歌云提供了多种计算服务，包括虚拟机实例（ComputeEngine）、容器（KubernetesEngine）和无服务器计算
  • 数据库总结 wzz87 数据库
    由于近期实习涉及到阿里云大数据开发套件的使用，主要涉及到odps、ads、rds、ots相关数据库的操作，所以针对性的做一些总结，并将阿里云中产品与实际产品对应分析。其中ots没有使用过，这里为了对比分析，容易理解也有列出来。阿里云中的Maxcompute（原odps）其实就是hive，扮演数据仓库的角色，适合存储轨迹类历史数据，适合存储的数据量大，适合海量数据的处理，适合对数据进行离线分析，数据
  • Rust语言的无服务器架构 赵蓂岚 包罗万象golang开发语言后端
    Rust语言的无服务器架构：未来的技术选择引言随着云计算和微服务架构的迅猛发展，无服务器（Serverless）计算逐渐成为了一种受欢迎的架构模式。无服务器架构允许开发者专注于业务逻辑，而不必关注底层服务器的管理。在这个背景下，Rust语言通过其独特的特性，正在迅速成为无服务器计算领域的一个理想选择。本文将深入探讨Rust语言的无服务器架构，包括其优点、适用场景和实现方式，并提供一些实际案例和最佳
  • 集合框架 天子之骄 java数据结构集合框架
       集合框架 集合框架可以理解为一个容器，该容器主要指映射(map)、集合(set)、数组(array)和列表(list)等抽象数据结构。 从本质上来说，Java集合框架的主要组成是用来操作对象的接口。不同接口描述不同的数据类型。   简单介绍：   Collection接口是最基本的接口，它定义了List和Set，List又定义了LinkLi
  • Table Driven（表驱动）方法实例 bijian1013 javaenumTable Driven表驱动
    实例一： /** * 驾驶人年龄段 * 保险行业，会对驾驶人的年龄做年龄段的区分判断 * 驾驶人年龄段：01-[18,25);02-[25,30);03-[30-35);04-[35,40);05-[40,45);06-[45,50);07-[50-55);08-[55,+∞) */ public class AgePeriodTest { //if...el
  • Jquery 总结 cuishikuan javajqueryAjaxWebjquery方法
    1.$.trim方法用于移除字符串头部和尾部多余的空格。如：$.trim('   Hello   ') // Hello2.$.contains方法返回一个布尔值，表示某个DOM元素（第二个参数）是否为另一个DOM元素（第一个参数）的下级元素。如：$.contains(document.documentElement, document.body); 3.$
  • 面向对象概念的提出 麦田的设计者 java面向对象面向过程
            面向对象中，一切都是由对象展开的，组织代码，封装数据。   在台湾面向对象被翻译为了面向物件编程，这充分说明了，这种编程强调实体。       下面就结合编程语言的发展史，聊一聊面向过程和面向对象。      c语言由贝尔实
  • linux网口绑定 被触发 linux
    刚在一台IBM Xserver服务器上装了RedHat Linux Enterprise AS 4，为了提高网络的可靠性配置双网卡绑定。 一、环境描述 我的RedHat Linux Enterprise AS 4安装双口的Intel千兆网卡，通过ifconfig -a命令看到eth0和eth1两张网卡。 二、双网卡绑定步骤： 2.1 修改/etc/sysconfig/network
  • XML基础语法 肆无忌惮_ xml
    一、什么是XML？ XML全称是Extensible Markup Language，可扩展标记语言。很类似HTML。XML的目的是传输数据而非显示数据。XML的标签没有被预定义，你需要自行定义标签。XML被设计为具有自我描述性。是W3C的推荐标准。   二、为什么学习XML？ 用来解决程序间数据传输的格式问题 做配置文件 充当小型数据库   三、XML与HTM
  • 为网页添加自己喜欢的字体 知了ing 字体 秒表 css
    @font-face { font-family: miaobiao;//定义字体名字 font-style: normal; font-weight: 400; src: url('font/DS-DIGI-e.eot');//字体文件 } 使用： <label style="font-size:18px;font-famil
  • redis范围查询应用-查找IP所在城市 矮蛋蛋 redis
    原文地址： http://www.tuicool.com/articles/BrURbqV 需求 根据IP找到对应的城市 原来的解决方案 oracle表（ip_country）： 查询IP对应的城市： 1.把a.b.c.d这样格式的IP转为一个数字，例如为把210.21.224.34转为3524648994 2. select city from ip_
  • 输入两个整数， 计算百分比 alleni123 java
    public static String getPercent(int x, int total){ double result=(x*1.0)/(total*1.0); System.out.println(result); DecimalFormat df1=new DecimalFormat("0.0000%");
  • 百合——————>怎么学习计算机语言 百合不是茶 java 移动开发
        对于一个从没有接触过计算机语言的人来说，一上来就学面向对象，就算是心里上面接受的了，灵魂我觉得也应该是跟不上的，学不好是很正常的现象，计算机语言老师讲的再多，你在课堂上面跟着老师听的再多，我觉得你应该还是学不会的，最主要的原因是你根本没有想过该怎么来学习计算机编程语言，记得大一的时候金山网络公司在湖大招聘我们学校一个才来大学几天的被金山网络录取，一个刚到大学的就能够去和
  • linux下tomcat开机自启动 bijian1013 tomcat
    方法一： 修改Tomcat/bin/startup.sh 为: export JAVA_HOME=/home/java1.6.0_27 export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jar:. export PATH=$JAVA_HOME/bin:$PATH export CATALINA_H
  • spring aop实例 bijian1013 javaspringAOP
    1.AdviceMethods.java package com.bijian.study.spring.aop.schema; public class AdviceMethods { public void preGreeting() { System.out.println("--how are you!--"); } } 2.beans.x
  • [Gson八]GsonBuilder序列化和反序列化选项enableComplexMapKeySerialization bit1129 serialization
    enableComplexMapKeySerialization配置项的含义  Gson在序列化Map时，默认情况下，是调用Key的toString方法得到它的JSON字符串的Key，对于简单类型和字符串类型，这没有问题，但是对于复杂数据对象，如果对象没有覆写toString方法，那么默认的toString方法将得到这个对象的Hash地址。   GsonBuilder用于
  • 【Spark九十一】Spark Streaming整合Kafka一些值得关注的问题 bit1129 Stream
    包括Spark Streaming在内的实时计算数据可靠性指的是三种级别： 1. At most once，数据最多只能接受一次，有可能接收不到 2. At least once, 数据至少接受一次，有可能重复接收 3. Exactly once  数据保证被处理并且只被处理一次，   具体的多读几遍http://spark.apache.org/docs/lates
  • shell脚本批量检测端口是否被占用脚本 ronin47
    #!/bin/bash cat ports |while read line do#nc -z -w 10 $line nc -z -w 2 $line 58422>/dev/null2>&1if[ $?-eq 0]then echo $line:ok else echo $line:fail fi done 这里的ports 既可以是文件
  • java-2.设计包含min函数的栈 bylijinnan java
    具体思路参见：http://zhedahht.blog.163.com/blog/static/25411174200712895228171/ import java.util.ArrayList; import java.util.List; public class MinStack { //maybe we can use origin array rathe
  • Netty源码学习-ChannelHandler bylijinnan javanetty
    一般来说，“有状态”的ChannelHandler不应该是“共享”的，“无状态”的ChannelHandler则可“共享” 例如ObjectEncoder是“共享”的, 但 ObjectDecoder 不是 因为每一次调用decode方法时，可能数据未接收完全（incomplete）， 它与上一次decode时接收到的数据“累计”起来才有可能是完整的数据，是“有状态”的 p
  • java生成随机数 cngolon java
    方法一： /** * 生成随机数 * @author cngolon@126.com * @return */ public synchronized static String getChargeSequenceNum(String pre){ StringBuffer sequenceNum = new StringBuffer(); Date dateTime = new D
  • POI读写海量数据 ctrain 海量数据
    import java.io.FileOutputStream; import java.io.OutputStream; import org.apache.poi.xssf.streaming.SXSSFRow; import org.apache.poi.xssf.streaming.SXSSFSheet; import org.apache.poi.xssf.streaming
  • mysql 日期格式化date_format详细使用 daizj mysqldate_format日期格式转换日期格式化
    日期转换函数的详细使用说明  DATE_FORMAT(date,format) Formats the date value according to the format string. The following specifiers may be used in the format string. The&n
  • 一个程序员分享8年的开发经验 dcj3sjt126com 程序员
      在中国有很多人都认为IT行为是吃青春饭的，如果过了30岁就很难有机会再发展下去!其实现实并不是这样子的，在下从事.NET及JAVA方面的开发的也有8年的时间了，在这里在下想凭借自己的亲身经历，与大家一起探讨一下。 明确入行的目的 很多人干IT这一行都冲着“收入高”这一点的，因为只要学会一点HTML, DIV+CSS，要做一个页面开发人员并不是一件难事，而且做一个页面开发人员更容
  • android欢迎界面淡入淡出效果 dcj3sjt126com android
    很多Android应用一开始都会有一个欢迎界面，淡入淡出效果也是用得非常多的，下面来实现一下。 主要代码如下： package com.myaibang.activity; import android.app.Activity;import android.content.Intent;import android.os.Bundle;import android.os.CountDown
  • linux 复习笔记之常见压缩命令 eksliang tar解压linux系统常见压缩命令linux压缩命令tar压缩
    转载请出自出处:http://eksliang.iteye.com/blog/2109693 linux中常见压缩文件的拓展名 *.gz gzip程序压缩的文件 *.bz2 bzip程序压缩的文件 *.tar tar程序打包的数据，没有经过压缩 *.tar.gz tar程序打包后，并经过gzip程序压缩 *.tar.bz2 tar程序打包后，并经过bzip程序压缩 *.zi
  • Android 应用程序发送shell命令 gqdy365 android
    项目中需要直接在APP中通过发送shell指令来控制lcd灯，其实按理说应该是方案公司在调好lcd灯驱动之后直接通过service送接口上来给APP，APP调用就可以控制了，这是正规流程，但我们项目的方案商用的mtk方案，方案公司又没人会改，只调好了驱动，让应用程序自己实现灯的控制，这不蛋疼嘛！！！！ 发就发吧！ 一、关于shell指令： 我们知道，shell指令是Linux里面带的
  • java 无损读取文本文件 hw1287789687 读取文件无损读取读取文本文件charset
    java 如何无损读取文本文件呢？ 以下是有损的 @Deprecated public static String getFullContent(File file, String charset) { BufferedReader reader = null; if (!file.exists()) { System.out.println("getFull
  • Firebase 相关文章索引 justjavac firebase
    Awesome Firebase 最近谷歌收购Firebase的新闻又将Firebase拉入了人们的视野，于是我做了这个 github 项目。 Firebase 是一个数据同步的云服务，不同于 Dropbox 的「文件」，Firebase 同步的是「数据」，服务对象是网站开发者，帮助他们开发具有「实时」（Real-Time）特性的应用。 开发者只需引用一个 API 库文件就可以使用标准 RE
  • C++学习重点 lx.asymmetric C++笔记
    1.c++面向对象的三个特性：封装性，继承性以及多态性。   2.标识符的命名规则：由字母和下划线开头，同时由字母、数字或下划线组成；不能与系统关键字重名。   3.c++语言常量包括整型常量、浮点型常量、布尔常量、字符型常量和字符串性常量。   4.运算符按其功能开以分为六类：算术运算符、位运算符、关系运算符、逻辑运算符、赋值运算符和条件运算符。 &n
  • java bean和xml相互转换 q821424508 javabeanxmlxml和bean转换java bean和xml转换
    这几天在做微信公众号 做的过程中想找个java bean转xml的工具，找了几个用着不知道是配置不好还是怎么回事，都会有一些问题， 然后脑子一热谢了一个javabean和xml的转换的工具里，自己用着还行，虽然有一些约束吧 ， 还是贴出来记录一下      顺便你提一下下，这个转换工具支持属性为集合、数组和非基本属性的对象。   packag
  • C 语言初级 位运算 1140566087 位运算c
    第十章 位运算   1、位运算对象只能是整形或字符型数据，在VC6.0中int型数据占4个字节   2、位运算符： 运算符 作用 ~ 按位求反 << 左移 >> 右移 & 按位与 ^ 按位异或 | 按位或 他们的优先级从高到低；   3、位运算符的运算功能： a、按位取反： ~01001101 = 101
  • 14点睛Spring4.1-脚本编程 wiselyman spring4
    14.1 Scripting脚本编程 脚本语言和java这类静态的语言的主要区别是:脚本语言无需编译,源码直接可运行; 如果我们经常需要修改的某些代码,每一次我们至少要进行编译,打包,重新部署的操作,步骤相当麻烦; 如果我们的应用不允许重启,这在现实的情况中也是很常见的; 在spring中使用脚本编程给上述的应用场景提供了解决方案,即动态加载bean; spring支持脚本
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他