--table
指定要导出的mysql目标表
--export-dir
指定要导出的hdfs路径
--input-fields-terminated-by
指定输入字段分隔符
-m <数值>
执行map任务的个数,默认是4个
2.1 HDFS数据导出至Mysql
首先在 test 数据库中创建 roles_hdfs 数据表:
USE test;
CREATE TABLE `roles_hdfs` (
`ROLE_ID` bigint(20) NOT NULL ,
`CREATE_TIME` int(11) NOT NULL ,
`OWNER_NAME` varchar(128) DEFAULT NULL ,
`ROLE_NAME` varchar(128) DEFAULT NULL ,
PRIMARY KEY (`ROLE_ID`)
)
将HDFS上的数据导出到mysql的test数据库的roles_hdfs表中,执行代码如下:
sqoop export \
--connect jdbc:mysql://10.6.6.72:3309/test \
--username root \
--password root123 \
--table roles_hdfs \
--export-dir /tmp/root/111 \
--input-fields-terminated-by ',' \
-m 1
执行数据导入过程中,会触发 MapReduce 任务。任务成功之后,前往 mysql 数据库查看是否导入成功。
2.2 Hive数据导出至Mysql
首先在test数据库中创建roles_hive数据表:
CREATE TABLE `roles_hive` (
`ROLE_ID` bigint(20) NOT NULL ,
`CREATE_TIME` int(11) NOT NULL ,
`OWNER_NAME` varchar(128) DEFAULT NULL ,
`ROLE_NAME` varchar(128) DEFAULT NULL ,
PRIMARY KEY (`ROLE_ID`)
)
由于Hive数据存储在 HDFS 上,所以从根本上还是将 HDFS 上的文件导出到 mysql 的 test 数据库的 roles_hive 表中,执行代码如下:
sqoop export \
--connect jdbc:mysql://10.6.6.72:3309/test \
--username root \
--password root123 \
--table roles_hive \
--export-dir /warehouse/tablespace/managed/hive/roles_test/base_0000001 \
--input-fields-terminated-by ',' \
-m 1
2.3 HBase数据导出至Mysql
目前 Sqoop 不支持从 HBase 直接导出到关系型数据库。可以使用 Hive 周转一下。
2.3.1 创建hive外部表
create external table hive_hbase(id int,CREATE_TIME string,OWNER_NAME string,ROLE_NAME string)
stored by 'org.apache.hadoop.hive.hbase.HBaseStorageHandler'
with serdeproperties ("hbase.columns.mapping" = ":key,info:CREATE_TIME,info:OWNER_NAME,info:ROLE_NAME")
tblproperties("hbase.table.name" = "roles_test");
2.3.2 创建Hive内部表
创建适配于 Hive 外部表的内部表:
create table if not exists hive_export(id int, CREATE_TIME string, OWNER_NAME string, ROLE_NAME string)
row format delimited fields terminated by ',' stored as textfile;
hive_hbase 外部表的源是 HBase 表数据,当创建适配于 hive_hbase 外部表的 Hive 内部表时,指定行的格式为 “,” 。
2.3.3 将外部表的数据导入到内部表中
insert overwrite table hive_export
select * from hive_hbase;
备注: 如果该步骤报错,可查看 FAQ 的 3 。
2.3.4 创建Mysql表
CREATE TABLE `roles_hbase` (
`id` bigint(20) NOT NULL,
` create_time` varchar(128) NOT NULL ,
` owner_name` varchar(128) DEFAULT NULL ,
` role_name` varchar(128) DEFAULT NULL ,
PRIMARY KEY (`id`)
)
2.3.5 执行sqoop export
sqoop export \
--connect jdbc:mysql://10.6.6.72:3309/test \
--username root \
--password root123 \
--table roles_hbase \
--export-dir /warehouse/tablespace/managed/hive/hive_export/base_0000003 \
--input-fields-terminated-by ',' \
-m 1
查看 mysql 中的 roles_hbase 表,数据成功被导入。
备注:在创建表的时候,一定要注意表字段的类型,如果指定表类型不一致,有可能会报错。
3. 总结
使用 Sqoop import / export 命令,可以实现将关系型数据库中的数据与 Hadoop 中的数据进行相互转化,其中一些转化的细节,可以指定参数实现。在执行过程中,sqoop shell 操作会转化为 MapReduce 任务来实现数据的抽取。
更多的sqoop操作,详情请参见:
http://sqoop.apache.org/docs/1.4.7/SqoopUserGuide.html
二、FAQ
1. Sqoop将Mysql数据导入到Hive中,出现类似卡住的现象
问题描述:
如下图所示:
问题分析:
在 Hive 3 的版本中,进入 hive 命令行需要执行输入用户名和密码。猜测流程被卡住的原因正是缺少用户名和密码的输入。
解决办法:
编辑所在主机的beeline-site.xml文件,执行如下命令:
vim /etc/hive/conf/beeline-site.xml
在 beeline.hs2.jdbc.url.container 配置值末尾增加登陆 hive 的用户名和密码,比如:user=hive;password=hive,如下图所示:
保存修改后,无需重启Hive服务,直接生效。此时则可以再次执行Sqoop相关命令进行尝试。
参考链接:https://community.hortonworks.com/questions/214980/sqoop-import-hung-hive-import-hdp-300.html
2. ERROR tool.ImportTool: Import failed: java.io.IOException: Hive exited with status 2
问题描述:
执行 Sqoop 命令将 Mysql 数据导入 Hive 过程中,出现错误,错误信息如下图所示:
问题分析:
程序在进入Hive以后报错,怀疑Sqoop将数据插入目标表中报错,有可能为用户权限问题。
解决办法:
将执行Sqoop shell的用户切换为hive用户,执行如下命令:
su - hive
3. 查询hive外部表数据并将查询结果插入到hive内部表失败
问题描述:
查询hive外部表数据并将查询结果插入到hive内部表失败,出现KeeperErrorCode = NoNode for /hbase/meta-region-server的错误,如下图所示:
问题分析:
经过分析报错,发现提示找不到/hbase/meta-region-server这个zookeeper节点。HBase的zookeeper.znode.parent属性值为/hbase-unsecure,自然找不到/hbase/meta-region-server节点而报错。
解决方法:
整体思路就是添加 zookeeper.znode.parent 到 Hive 配置中。
su – hive
hive -hiveconf zookeeper.znode.parent=/hbase-unsecure
打开管理系统的Hive配置页面,点击 “高级配置 > 自定义hive-site”,添加zookeeper.znode.parent属性,添加后如下图所示:
修改后保存配置,并重启 Hive 服务。
你可能感兴趣的:(数据库,hive,mysql,hadoop,java)
JavaScript 构造函数及内置构造函数的详解
小白菜学前端
JavaScript javascript 开发语言 前端
在JavaScript中,构造函数是一种特殊的函数,用于初始化对象。当使用new关键字调用构造函数时,它会创建一个新的对象实例,并将构造函数内部的this关键字绑定到这个新对象上。构造函数通常用于定义对象的属性和方法,以及创建对象的实例。1.构造函数的定义和调用构造函数通常以大写字母开头,以便与普通函数区分。它们可以包含属性和方法,这些属性和方法通过this关键字添加到新创建的对象上。调用构造函数
JavaScript 对象object this 构造函数
澄清石灰水t
JavaScript #JS基础 javascript
一、基本数据类型的不足:基本数据类型都是单一的值"hello"123true,值与值之间没有任何联系。exp:用基本数据类型创建一个人的信息(namegenderage)varname="邹邹";vargender="女";varage=18;虽然用基本数据类型创建出了人的相关信息,但是所创建的所有变量都是独立的,不能成为一个整体。二、什么是对象对象是一种复合数据类型,在对象中可以保存多个不同数据
技术速递|测试和 .NET Aspire 入门
微软Reactor
.net 自动化
作者:AaronPowell-PrincipalCloudAdvocate排版:AlanWang自动化测试是软件开发的一个重要组成部分,有助于确保在早期发现漏洞并防止回归问题。在这篇博文中,我们将探讨如何开始在.NETAspire中进行测试,以便我们能够测试分布式应用程序中的各种场景。测试分布式应用程序分布式应用程序本质上很复杂,您需要确保数据库、缓存等组件可用且处于正确状态。然后您的应用程序可能
java开发工程师面试问题,java面试题大汇总小山博客
A程序员导师
Java 经验分享 架构 java
开头学习如逆水行舟,尤其是IT行业有着日新月异的节奏。而且现在这个浮躁而又拜金的社会,我相信很多人做技术并非出于热爱,只是被互联网的高薪吸引,毕竟技术岗位非常枯燥,不仅要面对奇奇怪怪的需求,还要不停的充实自己避免被淘汰。所以,我们更要抓紧每一次可以学习和进步的机会。没有撤退可言!即使是面试跳槽,那也是一个学习的过程。只有全面的复习,才能让我们更好的充实自己,武装自己,为自己的面试之路不再坎坷!今天
流媒体娱乐服务平台在AWS上使用Presto作为大数据的交互式查询引擎的具体流程和代码
weixin_30777913
aws 大数据 python 音视频
一家流媒体娱乐服务平台拥有庞大的用户群体和海量的数据。为了高效处理和分析这些数据,它选择了Presto作为其在AWSEMR上的大数据查询引擎。在AWSEMR上使用Presto取得了显著的成果和收获。这些成果不仅提升了数据查询效率,降低了运维成本,还促进了业务的创新与发展。实施过程:Presto集群部署:在AWSEMR上部署了Presto集群,该集群与HiveMetastore和AmazonS3集成
Golang 应用的 Docker 部署方式介绍及使用详解
特立独行的猫a
Go语言实践笔记 golang docker 开发语言
本文将介绍如何使用Docker部署一个基于Go语言的后台服务应用godco,并介绍如何配置MongoDB数据库容器的连接,确保应用能够成功启动并连接到容器方式部署的mongoDB数据库。前提条件1.已安装Docker/Podman2.已安装MongoDB数据库容器(参见博文:使用Docker(Podman)部署MongoDB数据库及使用详解)3.已安装Golang环境1.准备工作Docker可以简
JavaScript数组操作:多种方法移除特定元素
友人.227
前端 javascript 开发语言
在JavaScript开发中,数组操作是常见的任务之一,尤其是移除数组中特定的元素。不同的场景可能需要不同的方法来实现这一目标。本文将详细介绍几种常见的方法,帮助你在实际开发中根据需求选择最合适的方式。1.使用filter方法filter方法是JavaScript中最常用的数组操作方法之一。它会创建一个新数组,包含所有满足条件的元素。如果你希望移除特定的元素,可以通过filter方法返回一个不包含
ORACLE数据库的OGG日志
苦苦挣扎的小码农
数据库 oracle
若要使用OGG,ORACLE必须开启归档模式,可以理解为设置ORACLE的REDOLOG落地,这样才能让OGG拿到所需的日志信息.1.查询数据库是否处于归档模式,如果处于归档模式,则返回结果ARCHIVELOGSQL>selectlog_modefromv$database;2.如果不处于归档模式,则要开启归档$>sqlplus/nologSQL>conn/assysdbaSQL>shutdown
使用doris过程中总结的与mysql中语法差异
数据游戏
数仓 mysql 数据库 database
1.mysql中的varchar()长度与doris中长度不一致,导致导入失败2.doris中where后面时间与字符串比较需转化类型#当create_time为datetime类型,mysql中使用concat()函数可直接比较,doris则不行,需进行类型转化wheredate_format(create_time,'%Y-%m-%d%H:%i:%s')0
Doris使用手册以及与Mysql差异整理
Jet-W
mysql 数据库 doris 大数据 后端
目录数据类型Doris数据类型数值类型日期类型字符串类型半结构类型聚合类型IP类型MySQL到Doris类型映射数据模型Doris的数据模型Aggregate模型示例一:导入数据聚合建表插入数据查看表示例二:保留明细数据示例三:导入数据与已有数据聚合Uniq模型建表插入数据查询表使用注意Duplicate模型建表插入数据查看表数据模型的选择建议与mysql差异语法DDLCreate-TableDo
Python进阶之-上下文管理器
小佟
python上下文管理器 python 数据库 服务器
本文介绍了Python中的上下文管理器,包括其基本概念、组成、标准库中的应用、自定义上下文管理器的实现以及contextlib模块的使用。重点强调了上下文管理器在资源管理、异常处理和代码整洁性方面的优势。✨前言:什么是上下文管理器?在Python中,上下文管理器是支持with语句的对象,用于为代码块提供设置及清理代码。上下文管理器广泛应用于资源管理场景,例如文件操作、网络连接、数据库会话等,其目的
MySQL常见优化手段
唐僧不爱八戒
mysql 数据库
1.配置优化1.1缓存设置查询缓存:查询缓存可以显著减少对同一查询的重复执行次数。SETGLOBALquery_cache_size=268435456;--设置查询缓存大小为256MBSETGLOBALquery_cache_type=ON;--启用查询缓存例如,执行SELECT*FROMusersWHEREid=1;后,再次执行相同查询将直接从缓存中读取结果。表缓存:表缓存大小决定了可以同时打
第六篇:事务与并发控制
猿享天开
数据库 数据库
第六篇:事务与并发控制目标读者:本篇文章适合中级数据库学习者,特别是那些希望理解数据库事务管理与并发控制机制的开发者或数据库管理员。通过掌握事务的原理与控制方法,你将能够设计高效且可靠的数据库应用,确保在多用户并发访问时数据的一致性和完整性。内容概述:本文将深入讲解数据库事务及其管理,重点包括:数据库事务的概念与四大特性(ACID)事务的实现与管理(开始、提交、回滚)锁机制(共享锁、排他锁、行级锁
DorisSQL与MySQL函数与语法对照差异篇
小晨说数据
字符串 mysql java 数据库 sql
1.日期函数时区.mysql -> convert_tz(dt,from_tz,to_tz)doris -> CONVERT_TZ(DATETIME dt, VARCHAR from_tz, VARCHAR to_tz)获取当前的日期,以DATE类型返回.mysql -> CURDATE()doris -> CURDATE()获得当前的时间,返回datatime类型.mysql -> NOW()d
Lua语言的网络编程
沈韶珺
包罗万象 golang 开发语言 后端
Lua语言的网络编程引言在现代软件开发中,网络编程是一个非常重要的领域。不同于其他编程语言,Lua语言以其简洁、灵活和高效著称,被广泛应用于游戏开发、嵌入式系统以及各种脚本环境中。尽管Lua在网络编程方面的库和框架并不如Java、Python等语言丰富,但其轻量级的特性和易于嵌入的特性使得Lua成为许多网络应用的理想选择。本篇文章将讨论Lua语言在网络编程中的应用,介绍如何使用Lua进行网络编程的
【Spring:Java开发的灵活框架】
沈韶珺
java spring 后端
Spring:Java开发的灵活框架Spring是一个开源的Java企业应用开发框架,它自2003年首次发布以来,迅速成为了最受欢迎的企业级开发框架之一。Spring通过简化JavaEE(Java企业版)的复杂性,提高了开发效率,帮助开发者更好地管理应用程序的生命周期,控制复杂性。Spring框架的设计理念是松耦合、模块化、可扩展性强,并为开发者提供了大量的功能和工具,帮助他们在复杂的企业应用中快
Groovy语言的编程范式
沈韶珺
包罗万象 golang 开发语言 后端
Groovy语言的编程范式引言Groovy是一种基于JVM(JavaVirtualMachine)的动态语言,它不仅兼容Java,还提供了丰富的功能和简洁的语法,使得编程更加高效和灵活。Groovy语言结合了面向对象编程、函数式编程、并发编程等多种范式,为开发者提供了多样化的编程体验。在这篇文章中,我们将深入探讨Groovy语言的编程范式及其在实际开发中的应用。一、Groovy语言简介1.1Gro
最新最全Java面试题合集(程序员必备)
Java八股文面试
java 开发语言 职场和发展 面试 jvm spring boot
Java中高级面试题部分答案解析List和Set比较,各自的子类比较对比一:Arraylist与LinkedList的比较1、ArrayList是实现了基于动态数组的数据结构,因为地址连续,一旦数据存储好了,查询操作效率会比较高(在内存里是连着放的)。2、因为地址连续,ArrayList要移动数据,所以插入和删除操作效率比较低。3、LinkedList基于链表的数据结构,地址是任意的,所以在开辟内
2025mysql经典面试题合集!
Java八股文面试
mysql 面试 职场 myspl面试 myspl面试题
1.解释MySQL中的JOIN操作。JOIN操作用于结合两个或多个数据库表的行。类型包括INNERJOIN(只返回两表匹配的行)、LEFTJOIN(返回左表的所有行及右表匹配的行)、RIGHTJOIN(返回右表的所有行及左表匹配的行)等。2.如何优化MySQL查询?优化MySQL查询的方法包括:使用合适的索引、避免在WHERE子句中使用函数、选择合适的数据类型、使用LIMIT语句减少数据量、避免全
Doris中架构和mysql语法的差异
苦苦挣扎的小码农
架构
Doris的架构只设FE,BE两种角色,两个进程,不依赖于外部组件,方便部署和运维,FE和BE都可线性扩展。FE(Frontend):存储、维护集群元数据;负责接收、解析查询请求,规划查询计划,调度查询执行,返回查询结果。主要有三个角色:(1)Leader和Follower:主要是用来达到元数据的高可用,保证单节点宕机的情况下,元数据能够实时地在线恢复,而不影响整个服务。(2)Observer:用
java.util.concurrent.CompletionException: java.lang.ArrayIndexOutOfBoundsException异常的原因分析及解决方
人至中年666
异常分析 多线程 java 多线程
生产环境抛出的ArrayIndexOutOfBoundsException异常,涉及到容器在多线程情况下添加元素问题。1.错误日志java.util.concurrent.CompletionException:java.lang.ArrayIndexOutOfBoundsExceptionatjava.util.concurrent.CompletableFuture.encodeThrowab
Vue和Vue-Element-Admin(十):HTML和CSS快速学习笔记
A叶子叶
# Vue与Web开发 vue.js html css
目录html标签分类网页布局盒子模型浮动定位css标签选择flex布局transform转换Vue开发tipsless和scssVScode常用插件后端语言框架很多,Java适合企业级应用(规范且稳定),Go适合高并发场景(比如云上产品),Python框架(bottle,tornado,django)简单且快速,也天然适合数据分析场景,PHP适合快速建站,前端变化小,所见即所得,因此抽空记录下学习
java.util.concurrent.CompletionException: java.lang.IllegalMonitorStateException: attempt to unlock
啥时能挣6000块
工作中错误发现 java 多线程
今天工作的时候出现了一个错误java.util.concurrent.CompletionException:java.lang.IllegalMonitorStateException:attempttounlocklock,notlockedbycurrentthreadbynodeid这个报错的原因,找了一下,发现是线程A的锁,但是线程B去尝试释放锁,导致出现了这个报错。正常的释放锁的时候我
NoClassDefFoundError和ClassNotFoundException区别以及解决办法
变强无需秃头
java笔记
NoClassDefFoundError错误发生的原因NoClassDefFoundError错误的发生,是因为Java虚拟机在编译时能找到合适的类,而在运行时不能找到合适的类导致的错误。例如在运行时我们想调用某个类的方法或者访问这个类的静态成员的时候,发现这个类不可用,此时Java虚拟机就会抛出NoClassDefFoundError错误。与ClassNotFoundException的不同在于
Java之旅--设计模式
新拖拉机
Java 设计模式 Java之旅 设计模式 java与模式 设计模式思想
设计模式,先看名字,设计,模式,目的是为了设计,为了设计给出一些定义出来的,总结出来的,抽象出来的办法,叫做模式。设计是什么?软件构建中的设计,承前(需求分析、产品定义、架构选择),启后或者伴随(编码、测试),包含结构、包、类、子程序,而模式讲的就是这些东西。设计模式是一种思想这次关于设计模式的分享不是纯技术,是思想。思想的东西,很难讲,需要听众具备恰当的理解层次,而这种层次的进化,远比一种技术或
Java 小游戏开发(飞机大战)
听雨★
java intellij idea
一,模块介绍1.游戏初始化与资源加载模块:图片资源加载:在ShootGame类的静态代码块中,运用ImageIO.read方法从指定资源路径加载游戏所需的各类图片资源,包括精美的游戏背景图、不同样式的飞机图片(英雄飞机、敌机等)、子弹图片等。若在加载过程中出现IOException异常,表明资源加载失败,此时通过JOptionPane弹出详细的错误提示对话框,告知用户“游戏资源加载失败,请检查资源
Java基于Web美食网站设计(源码+mysql+文档)
灵军程序设计
java 前端 美食
本系统(程序+源码)带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景:随着互联网的普及和发展,人们的生活方式发生了巨大的变化。在这个信息爆炸的时代,人们越来越依赖于网络来获取各种信息,包括美食。美食作为人类生活中不可或缺的一部分,吸引了大量的关注和讨论。然而,传统的美食信息传播方式已经无法满足现代人的需求,人们渴望能够更方便、快捷地获取到各种美食信息
JavaScript系列(54)--性能优化技术详解
ᅟᅠ 一进制
JavaScript javascript 性能优化 开发语言
JavaScript性能优化技术详解⚡今天,让我们继续深入研究JavaScript的性能优化技术。掌握这些技术对于构建高性能的JavaScript应用至关重要。性能优化基础概念小知识:JavaScript性能优化涉及多个方面,包括代码执行效率、内存使用、DOM操作、网络请求等。通过合理的优化策略,可以显著提升应用的响应速度和用户体验。性能分析工具实现//1.性能计时器classPerformanc
Javascript基础
2301_79306982
javascript 开发语言 ecmascript
1.ID的限制:ID必须唯一:在同一个HTML文档中,每个id属性的值必须是唯一的。id的设计初衷就是为页面上的每个元素提供一个独特的标识符,便于JavaScript精确操作。如果ID重复会发生什么?当有多个元素使用相同的id时,document.getElementById()只会返回第一个匹配的元素,后面的会被忽略。示例:DuplicateIDJavaScript:varduplicateEl
Java之旅之设计模式和架构
xi_jun
java学习之路 java 设计模式 架构
设计模式设计模式是针对软件设计中常见问题的通用、可重用的解决方案。大致可分为三大类:1.创建型模式:关注对象的创建过程。单例模式:确保一个类只有一个实例,并提供一个访问它的全局点。工厂方法模式:定义一个接口用于创建对象,但让子类决定实例化的类。抽象工厂模式:提供一个接口,用于创建相关或依赖对象的家族,而不需要明确指定具体类。建造者模式:将一个复杂对象的构建与其表示分离,使得同样的构建过程可以创建不
多线程编程之存钱与取钱
周凡杨
java thread 多线程 存钱 取钱
生活费问题是这样的:学生每月都需要生活费,家长一次预存一段时间的生活费,家长和学生使用统一的一个帐号,在学生每次取帐号中一部分钱,直到帐号中没钱时 通知家长存钱,而家长看到帐户还有钱则不存钱,直到帐户没钱时才存钱。
问题分析:首先问题中有三个实体,学生、家长、银行账户,所以设计程序时就要设计三个类。其中银行账户只有一个,学生和家长操作的是同一个银行账户,学生的行为是
java中数组与List相互转换的方法
征客丶
JavaScript java jsonp
1.List转换成为数组。(这里的List是实体是ArrayList)
调用ArrayList的toArray方法。
toArray
public T[] toArray(T[] a)返回一个按照正确的顺序包含此列表中所有元素的数组;返回数组的运行时类型就是指定数组的运行时类型。如果列表能放入指定的数组,则返回放入此列表元素的数组。否则,将根据指定数组的运行时类型和此列表的大小分
Shell 流程控制
daizj
流程控制 if else while case shell
Shell 流程控制
和Java、PHP等语言不一样,sh的流程控制不可为空,如(以下为PHP流程控制写法):
<?php
if(isset($_GET["q"])){
search(q);}else{// 不做任何事情}
在sh/bash里可不能这么写,如果else分支没有语句执行,就不要写这个else,就像这样 if else if
if 语句语
Linux服务器新手操作之二
周凡杨
Linux 简单 操作
1.利用关键字搜寻Man Pages man -k keyword 其中-k 是选项,keyword是要搜寻的关键字 如果现在想使用whoami命令,但是只记住了前3个字符who,就可以使用 man -k who来搜寻关键字who的man命令 [haself@HA5-DZ26 ~]$ man -k
socket聊天室之服务器搭建
朱辉辉33
socket
因为我们做的是聊天室,所以会有多个客户端,每个客户端我们用一个线程去实现,通过搭建一个服务器来实现从每个客户端来读取信息和发送信息。
我们先写客户端的线程。
public class ChatSocket extends Thread{
Socket socket;
public ChatSocket(Socket socket){
this.sock
利用finereport建设保险公司决策分析系统的思路和方法
老A不折腾
finereport 金融保险 分析系统 报表系统 项目开发
决策分析系统呈现的是数据页面,也就是俗称的报表,报表与报表间、数据与数据间都按照一定的逻辑设定,是业务人员查看、分析数据的平台,更是辅助领导们运营决策的平台。底层数据决定上层分析,所以建设决策分析系统一般包括数据层处理(数据仓库建设)。
项目背景介绍
通常,保险公司信息化程度很高,基本上都有业务处理系统(像集团业务处理系统、老业务处理系统、个人代理人系统等)、数据服务系统(通过
始终要页面在ifream的最顶层
林鹤霄
index.jsp中有ifream,但是session消失后要让login.jsp始终显示到ifream的最顶层。。。始终没搞定,后来反复琢磨之后,得到了解决办法,在这儿给大家分享下。。
index.jsp--->主要是加了颜色的那一句
<html>
<iframe name="top" ></iframe>
<ifram
MySQL binlog恢复数据
aigo
mysql
1,先确保my.ini已经配置了binlog:
# binlog
log_bin = D:/mysql-5.6.21-winx64/log/binlog/mysql-bin.log
log_bin_index = D:/mysql-5.6.21-winx64/log/binlog/mysql-bin.index
log_error = D:/mysql-5.6.21-win
OCX打成CBA包并实现自动安装与自动升级
alxw4616
ocx cab
近来手上有个项目,需要使用ocx控件
(ocx是什么?
http://baike.baidu.com/view/393671.htm)
在生产过程中我遇到了如下问题.
1. 如何让 ocx 自动安装?
a) 如何签名?
b) 如何打包?
c) 如何安装到指定目录?
2.
Hashmap队列和PriorityQueue队列的应用
百合不是茶
Hashmap队列 PriorityQueue队列
HashMap队列已经是学过了的,但是最近在用的时候不是很熟悉,刚刚重新看以一次,
HashMap是K,v键 ,值
put()添加元素
//下面试HashMap去掉重复的
package com.hashMapandPriorityQueue;
import java.util.H
JDK1.5 returnvalue实例
bijian1013
java thread java多线程 returnvalue
Callable接口:
返回结果并且可能抛出异常的任务。实现者定义了一个不带任何参数的叫做 call 的方法。
Callable 接口类似于 Runnable,两者都是为那些其实例可能被另一个线程执行的类设计的。但是 Runnable 不会返回结果,并且无法抛出经过检查的异常。
ExecutorService接口方
angularjs指令中动态编译的方法(适用于有异步请求的情况) 内嵌指令无效
bijian1013
JavaScript AngularJS
在directive的link中有一个$http请求,当请求完成后根据返回的值动态做element.append('......');这个操作,能显示没问题,可问题是我动态组的HTML里面有ng-click,发现显示出来的内容根本不执行ng-click绑定的方法!
 
【Java范型二】Java范型详解之extend限定范型参数的类型
bit1129
extend
在第一篇中,定义范型类时,使用如下的方式:
public class Generics<M, S, N> {
//M,S,N是范型参数
}
这种方式定义的范型类有两个基本的问题:
1. 范型参数定义的实例字段,如private M m = null;由于M的类型在运行时才能确定,那么我们在类的方法中,无法使用m,这跟定义pri
【HBase十三】HBase知识点总结
bit1129
hbase
1. 数据从MemStore flush到磁盘的触发条件有哪些?
a.显式调用flush,比如flush 'mytable'
b.MemStore中的数据容量超过flush的指定容量,hbase.hregion.memstore.flush.size,默认值是64M 2. Region的构成是怎么样?
1个Region由若干个Store组成
服务器被DDOS攻击防御的SHELL脚本
ronin47
mkdir /root/bin
vi /root/bin/dropip.sh
#!/bin/bash/bin/netstat -na|grep ESTABLISHED|awk ‘{print $5}’|awk -F:‘{print $1}’|sort|uniq -c|sort -rn|head -10|grep -v -E ’192.168|127.0′|awk ‘{if($2!=null&a
java程序员生存手册-craps 游戏-一个简单的游戏
bylijinnan
java
import java.util.Random;
public class CrapsGame {
/**
*
*一个简单的赌*博游戏,游戏规则如下:
*玩家掷两个骰子,点数为1到6,如果第一次点数和为7或11,则玩家胜,
*如果点数和为2、3或12,则玩家输,
*如果和为其它点数,则记录第一次的点数和,然后继续掷骰,直至点数和等于第一次掷出的点
TOMCAT启动提示NB: JAVA_HOME should point to a JDK not a JRE解决
开窍的石头
JAVA_HOME
当tomcat是解压的时候,用eclipse启动正常,点击startup.bat的时候启动报错;
报错如下:
The JAVA_HOME environment variable is not defined correctly
This environment variable is needed to run this program
NB: JAVA_HOME shou
[操作系统内核]操作系统与互联网
comsci
操作系统
我首先申明:我这里所说的问题并不是针对哪个厂商的,仅仅是描述我对操作系统技术的一些看法
操作系统是一种与硬件层关系非常密切的系统软件,按理说,这种系统软件应该是由设计CPU和硬件板卡的厂商开发的,和软件公司没有直接的关系,也就是说,操作系统应该由做硬件的厂商来设计和开发
富文本框ckeditor_4.4.7 文本框的简单使用 支持IE11
cuityang
富文本框
<html xmlns="http://www.w3.org/1999/xhtml">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=UTF-8" />
<title>知识库内容编辑</tit
Property null not found
darrenzhu
datagrid Flex Advanced propery null
When you got error message like "Property null not found ***", try to fix it by the following way:
1)if you are using AdvancedDatagrid, make sure you only update the data in the data prov
MySQl数据库字符串替换函数使用
dcj3sjt126com
mysql 函数 替换
需求:需要将数据表中一个字段的值里面的所有的 . 替换成 _
原来的数据是 site.title site.keywords ....
替换后要为 site_title site_keywords
使用的SQL语句如下:
updat
mac上终端起动MySQL的方法
dcj3sjt126com
mysql mac
首先去官网下载: http://www.mysql.com/downloads/
我下载了5.6.11的dmg然后安装,安装完成之后..如果要用终端去玩SQL.那么一开始要输入很长的:/usr/local/mysql/bin/mysql
这不方便啊,好想像windows下的cmd里面一样输入mysql -uroot -p1这样...上网查了下..可以实现滴.
打开终端,输入:
1
Gson使用一(Gson)
eksliang
json gson
转载请出自出处:http://eksliang.iteye.com/blog/2175401 一.概述
从结构上看Json,所有的数据(data)最终都可以分解成三种类型:
第一种类型是标量(scalar),也就是一个单独的字符串(string)或数字(numbers),比如"ickes"这个字符串。
第二种类型是序列(sequence),又叫做数组(array)
android点滴4
gundumw100
android
Android 47个小知识
http://www.open-open.com/lib/view/open1422676091314.html
Android实用代码七段(一)
http://www.cnblogs.com/over140/archive/2012/09/26/2611999.html
http://www.cnblogs.com/over140/arch
JavaWeb之JSP基本语法
ihuning
javaweb
目录
JSP模版元素
JSP表达式
JSP脚本片断
EL表达式
JSP注释
特殊字符序列的转义处理
如何查找JSP页面中的错误
JSP模版元素
JSP页面中的静态HTML内容称之为JSP模版元素,在静态的HTML内容之中可以嵌套JSP
App Extension编程指南(iOS8/OS X v10.10)中文版
啸笑天
ext
当iOS 8.0和OS X v10.10发布后,一个全新的概念出现在我们眼前,那就是应用扩展。顾名思义,应用扩展允许开发者扩展应用的自定义功能和内容,能够让用户在使用其他app时使用该项功能。你可以开发一个应用扩展来执行某些特定的任务,用户使用该扩展后就可以在多个上下文环境中执行该任务。比如说,你提供了一个能让用户把内容分
SQLServer实现无限级树结构
macroli
oracle sql SQL Server
表结构如下:
数据库id path titlesort 排序 1 0 首页 0 2 0,1 新闻 1 3 0,2 JAVA 2 4 0,3 JSP 3 5 0,2,3 业界动态 2 6 0,2,3 国内新闻 1
创建一个存储过程来实现,如果要在页面上使用可以设置一个返回变量将至传过去
create procedure test
as
begin
decla
Css居中div,Css居中img,Css居中文本,Css垂直居中div
qiaolevip
众观千象 学习永无止境 每天进步一点点 css
/**********Css居中Div**********/
div.center {
width: 100px;
margin: 0 auto;
}
/**********Css居中img**********/
img.center {
display: block;
margin-left: auto;
margin-right: auto;
}
Oracle 常用操作(实用)
吃猫的鱼
oracle
SQL>select text from all_source where owner=user and name=upper('&plsql_name');
SQL>select * from user_ind_columns where index_name=upper('&index_name'); 将表记录恢复到指定时间段以前
iOS中使用RSA对数据进行加密解密
witcheryne
ios rsa iPhone objective c
RSA算法是一种非对称加密算法,常被用于加密数据传输.如果配合上数字摘要算法, 也可以用于文件签名.
本文将讨论如何在iOS中使用RSA传输加密数据. 本文环境
mac os
openssl-1.0.1j, openssl需要使用1.x版本, 推荐使用[homebrew](http://brew.sh/)安装.
Java 8
RSA基本原理
RS