Warehouse）

Building the data warehouse 1st Chapter summary

Thedatawarehouserequiresanarchitecturethatbeginsbylookingatthewholeandthenworksdowntotheparticulars.Certainly,detailsareimportantthroughoutthedatawarehouse.Butdetailsareimportantonlywhenviewedinabroad
瞧瞧秘密不说话·2020-08-25 03:09

ORACLE利用模板创建数据库

1.准备文件：模板文件，该文件可在ORACLE安装好的路径中获得$ORACLE_HOME/assistants/dbca/templates/下有模板文件Data_warehouse.dbc、General_purpose.dbc
yangchen8497·2020-08-25 00:06

黑猴子的家：Sqoop HIVE/HDFS到RDBMS

node1:3306/company\--usernameroot\--password000000\--tablestaff\--num-mappers1\--export-dir/user/hive/warehouse
黑猴子的家·2020-08-24 21:48

在hue的hive中创建表出现错误:Error while processing statement: FAILED: Execution Error, return code 1 from org.

点击执行报错解决方案:hadoopfs-chmodo+w/user/hive/warehouse修改之后刷新即可看到新建的表
cmj_971218·2020-08-24 18:52

Hive学习笔记 --- return code 1 from org.apache.hadoop.hive

ExecutionError,returncode1fromorg.apache.hadoop.hive.ql.exec.MoveTask'发现问题是没法将数据导入table后的文件移动位置，然后导入到/apps/hive/warehouse
杨鑫newlfe·2020-08-24 16:24

数据仓库Build The Data Warehouse（William H.Inmon）学习笔记目录

Inmon是经典的范式建模大师，该系列笔记出自正在读的书《数据仓库BuildTheDataWarehouse》---WilliamH.Inmon内容包含书内的范式建模干货和知识、随手记录了一些结合实际经验的笔记心得；如果有相关的数据仓库建模问题可以私聊我讨论，互相学习！---文章持续更新中！---第一章数据仓库BuildTheDataWarehouse（WilliamH.Inmon）学习笔记---
杨鑫newlfe·2020-08-24 16:53

数据仓库Build The Data Warehouse（William H.Inmon）学习笔记 --- 第一章、决策支持系统的发展

20世纪60年代中期，主文件和磁带存储带来的问题更新数据时需要保持数据的一致性；程序维护的复杂性；开发新程序的复杂性；支持所有主文件需要增加大量硬件；20世纪70年代，在线事务处理（OnlineTransactionProcessing,OLTP）使得访问数据可以更快地进行；自然演化式体系结构的问题数据可信性；数据无时间基准；数据算法上的差异；抽取的多层次问题；外部数据问题；无公共起始数据源；生产
杨鑫newlfe·2020-08-24 16:53

The Data Warehouse ETL Toolkit学习笔记-数据仓库的任务

数据仓库的任务是发布企业的数据资产，用于支持更加有效的决策制定。数据仓库成功的起点和终点是其最终用户，主要成功的标准是数据仓库是否为企业的最重要的决策制定过程提供了帮助。ETL系统必须完成的任务是以可用的方式把数据交给最终用户应用系统。数据仓库最重要且基础的组件就是后台和前台。（一）数据仓库数据仓库是一个将源数据抽取、清洗、规格化、提交到维度数据存储的系统，为决策的制定提供查询和分析功能的支撑与实
gonewithwind818·2020-08-24 14:35

数据仓库Build The Data Warehouse（William H.Inmon）学习笔记 --- 第七章、高级管理人员信息系统和数据仓库

零、简述先说说DSS和EIS区别DSS更加偏向于大众类的分析系统；EIS更像是高层/CEO驾驶舱这种分析系统；EIS-高级管理人员信息系统—是计算的最有效形式之一。通过EIS，高级管理分析员可以精确指出问题并发现对于管理至关重要的趋势。在某种意义上说，EIS代表着计算机最复杂的使用之一。EIS处理是出于帮助高级管理人员制定决策的目的而设计的。EIS变成了高级管理人员的观察公司运营的窗口。EIS处理
杨鑫newlfe·2020-08-24 12:21

记录mysql5.5升5.7的group by报错事件

A.IDAS"warehouseGroupId",A.standard_quotationAS"standardQuotation",C.service_provider_nameAS"serviceProviderName",B.warehouse_group_codeAS"warehouseGroupCode
xu84557120·2020-08-24 04:48

hive select问题：SemanticException Unable to determine if hdfs://localhost:9000/user/hive/warehouse/...

192.168.65.128:9000导致hiveselect的时候出现以下错误：SemanticExceptionUnabletodetermineifhdfs://localhost:9000/user/hive/warehouse
hexg1016·2020-08-23 22:23

黑猴子的家：Sqoop 命令&参数：job

createmyjob\--import-all-tables\--connectjdbc:mysql://node1:3306/company\--usernameroot\--password000000\--warehouse-dir
黑猴子的家·2020-08-23 20:54

jsp页面中select下拉控件设置默认值。

的方式设置默认值为查询出来的tradeAgreement对象的balanceWay值2.struts里select和option都是动态取到的所属库：document.getElementById("warehouse_id
lxl_family·2020-08-23 17:21

课程设计第四次实验报告

实验项目功能描述（1）双人输出问题（2）异步输入函数（3）双人反弹球三．项目模块介绍四．实现界面展示五．代码托管链接https://gitee.com/hutao0529/small_garbage_warehouse
weixin_30614109·2020-08-23 14:14

springmvc+spring4.2+hibernate5整合记录

一.配置文件涉及的jar包有点多，这里我就选择了用maven的方式帮我管理jar4.0.0com.zhizhuospring-hibernate-warehouse1.0-SNAPSHOTwarspring-hibernate-warehouseMavenWebapphttp
淡淡忧伤的程序员·2020-08-23 11:12

嵌套删除的sql语句

*FROM(SELECTs.epcFROMt_stocksWHEREs.epcIN(SELECTc.epcFROMt_stock_unbindcWHEREc.warehouse_id='14'))f)
hemingkung·2020-08-23 04:08

加载hdfs的parquet文件到hive的分区表注意事项

parquet文件到hive的分区表中时，数据加载不进去问题场景描述1、使用spark将文件以parquet格式写入到HDFS中的指定路径下hdfs://myserver:8020/user/hive/warehouse
xingchengdahai_999·2020-08-23 03:54

Hive 3.1.1环境搭建与Spark集成

-bin.tar.gz-C/opt/client/二:在HDFS上创建tmp和hive仓库目录(存在就不需要创建)hdfsdfs-mkdir/tmphdfsdfs-mkdir-p/user/hive/warehouse
佩奇配骑·2020-08-22 19:00

Maven镜像地址大全，Maven镜像地址配置示例.。修改maven镜像地址以及maven仓库的修改

中也就是“C:\Users\VULCAN”）我的maven放的路径是D:\eclipse\maven\apache-maven-3.6.3maven仓库地址是D:\eclipse\maven\maven_Warehouse
ayearinglife·2020-08-22 12:53

Hive数据模型的几种表 和 窗口函数 和 排序方法

Hive默认情况下回将这些表的数据存储在由配置项hive.metastore.warehouse.dir所定义的目录（比如/user/hive/warehouse）的子目录下。
CWS_chen·2020-08-22 11:26

BZOJ 1516 [POI2006]Mag-Warehouse 切比雪夫距离转曼哈顿距离

题意:给定一个网格图，其上有一堆坏点(整点，同一位置多个)，求一个整点，使得该整点到所有的坏点的切比雪夫距离之和最小。求这个整点位置。无SPJ解析:看完题懵了，我只会曼哈顿距离啊怎么办。然后就无聊查了下给定的那个计算公式，哇塞这居然叫切比雪夫距离。噫怎么有个链接是谈切比雪夫转化曼哈顿距离的。噫看完后我就会这道题辣！对于原坐标系中两点间的Chebyshev距离，是将坐标轴顺(逆)时针旋转45度并将所
wzq_QwQ·2020-08-22 04:03

菜鸟：模拟栈和队列的push和pop

publicclassLinkedListDemo2{publicstaticvoidmain(String[]args){//栈的基本操作测试/*MyWareHousewarehouse=newMyWareHouse();warehouse.push
梦想的饕餮·2020-08-21 07:20

hdfs常用命令

----待更新例如查看ods库大小：hadoopfs-du-s-h/user/hive/warehouse/ods.db如果要查看其他文件夹则改成该文件夹路径。去掉-h选项则按Byte单位显示。
weixing_2006·2020-08-20 20:48

hdfs跨集群传输数据

nameservice2集群传入nameservice1集群)这里传输的时候目录要以/结尾，不行就在/添加*hadoopdistcp-skipcrccheckhdfs://nameservice2/user/hive/warehouse
weixing_2006·2020-08-20 20:47

js两个数组合并且去重且数量相加

function(){var_self=this;vardata=[];for(vari=0;i0){console.log(_self.msglist[i].medic_sum)varobj={};obj.warehouse_id
杨葱儿·2020-08-20 20:06

hive表同步到es

前期操作参看的hdfs://cluster/user/hive/warehouse/dm_userimage.db/f_baseinfo_online_t有几点注意，1.插入后查询会出现类型转换异常，es
青鱼M24·2020-08-20 19:13

Azure SQL Data Warehouse

AzureSQLDataWarehouse&AWSRedshiftAmazonRedshiftAmazonRedshift是一种快速、完全托管的PB级数据仓库，可方便您使用现有的商业智能工具以一种经济的方式轻松分析您的所有数据。从最低0.25USD每小时（不承担任何义务）直到每年每TB1,000USD（PB级），成本不到传统解决方案的十分之一。客户通常进行3倍压缩，也就是将其成本降低到每年每TB（
weixin_33795093·2020-08-20 19:39

hive 安装及操作

安装元素数据存储选择默认使用derby数据库，不能够多个用户同时使用，多用于测试使用MySQL数据库存储元数据，多用于生产环境HDFS数据仓库目录创建数据仓库目录hadoopfs-mkdir-p/user/hive/warehouse
BlackChen·2020-08-19 17:29

HDFS清理坏块

org.apache.hadoop.hdfs.BlockMissingException:Couldnotobtainblock:BP-1921057509-192.168.57.129-1517160177567:blk_1073741930_1106file=/user/hive/warehouse
明明德撩码·2020-08-19 06:53

Hive 学习笔记①

external修饰的是外部表[externaltable]；②内部表由hive管理,外部表由hdfs管理；③内部表数据存储在hive.metastore.warehose.dir[默认user/hive/warehouse
LL_QQ63·2020-08-18 13:39

hive中Could not get block locations.

HiveRuntimeErrorwhileclosingoperators:java.io.IOException:Couldnotgetblocklocations.Sourcefile“/user/hive/warehouse
shesarainbow·2020-08-18 13:46

记录配置HDFS HA后，hive抛错Wrong FS

Hive查询会出现如下异常：点击(此处)折叠或打开FAILED:SemanticExceptionUnabletodetermineifhdfs://hadoop-01:8020/user/hive/warehouse
weixin_34292287·2020-08-18 12:00

/warehouse expected: hdfs://mycluster

现象：FAILED:SemanticExceptionUnabletodetermineifhdfs://s233/user/hive/warehouse/mydb.db/ext_calllogs_in_hbaseisencrypted
LIUDAN'S WORLD·2020-08-18 12:17

Hive: TApplicationException: Internal error processing get_partition_names 错误的解决方法

举个例子：如果没有使用常规的dropdatabase/table去删除一个数据库或是表，而是直接在hdfs上删除了相应的文件夹或文件，比如：/user/hive/warehouse/xxxxx.db,然后当你重新试图使用建库脚本建库时
bluishglc·2020-08-18 10:44

Hive的msck repair修复分区

表test_tbl，存储路径为/user/hive/warehouse/test_tbl，分区字段为pt，正常添加分区是这样的：altertableaddifnotexistpa
清平の乐·2020-08-18 10:47

hive在执行查询sql时出现java.lang.IllegalArgumentException: Wrong FS: hdfs://node1:9000/user/hive/warehouse/.

hive在执行查询sql时出现java.lang.IllegalArgumentException:WrongFS:hdfs://node1:9000/user/hive/warehouse/test1
微信用户_43167990·2020-08-18 10:03

记录配置HDFS HA后，hive抛错Wrong FS

Hive查询会出现如下异常：点击(此处)折叠或打开FAILED:SemanticExceptionUnabletodetermineifhdfs://hadoop-01:8020/user/hive/warehouse
crazy_stone0002·2020-08-17 05:09

Hadoo系列之Hive安装和使用（三）

hive的安装tar-zxvfapache-hive-3.1.2-bin.tar.gz#解压mvhive#修改文件名chown-Rhadoop:hadoophive#修改文件权限mkdir-phive/warehouse
梦Dreamer·2020-08-17 02:54

hadoop 2.4.0 使用distcp有关问题解决

hadoopdistcphftp://nn.xxx.xx.com:50070/user/nlp/warehouse/t_m_user_key_action/user/nlp/warehouse/dw1出现
修鹏李·2020-08-16 19:49

ORACLE SQL语句中的“SWITCH语句”函数DECODE

下面这个例子介绍ORACLESQLFunctions对DECODE函数的用法，引自官方文档SELECTproduct_id,DECODE(warehouse_id,1,'Southlake',2,'SanFrancisco
wxj_snow·2020-08-15 20:47

hive中metastore三种存储方式

统一配置如下hive.metastore.warehouse.dir/user/hive/warehousehive.metastore.local
jimmyxyalj·2020-08-14 22:00

hive中的几个参数：元数据配置、仓库位置、打印表字段相关参数

hive仓库位置由以下参数决定，默认位置/user/hive/warehouse：hive.metastore.warehouse.dir/user/hive/warehousehive中元数据配置：javax.jdo.option.ConnectionURLjdbc
weixin_34137799·2020-08-14 20:18

Spark学习-SparkSQL--04-SparkSQL CLI 单节点运行与yarn集群运行

spark-sql--masterspark://bigdata01.hzjs.co:7077--executor-memory40g--total-executor-cores50--confspark.sql.warehouse.dir
九师兄·2020-08-14 18:35

sqoop一点一滴之数据导出命令

sqoopexport–connectjdbc:mysql://192.168.102.103/test–usernameroot–passwordroot–tabletest–export-dir/user/hive/warehouse
huo_rj·2020-08-14 17:20

HDFS清理坏块

org.apache.hadoop.hdfs.BlockMissingException:Couldnotobtainblock:BP-1921057509-192.168.57.129-1517160177567:blk_1073741930_1106file=/user/hive/warehouse
weixin_34355715·2020-08-14 15:28

删了HDFS又能怎样？记一次删库不跑路事件

事发背景上个月的某一天，由于集群空间不足，公司有一位技术经理级别的大数据leader在通过跳板机在某个线上集群执行手动清理命令，疯狂地执行hadoopfs-rmr-skipTrash/user/hive/warehouse
喜剧之皇·2020-08-14 14:44

MaxCompute 学习计划(三)

使用Eclipse/InteliJIDEA配置开发环境，可以修改warehouse里的数据然后观察任务的运行结果的
weixin_33816946·2020-08-14 11:58

WMB Compute 节点访问数据库

在WMB中访问数据库有多种方式，可以用节点映射如：Database,Filter,Warehouse,Mapping节点等；也可以使用esql语句操作数据库数据。
weixin_30319153·2020-08-14 11:44

sqoop 导出 hive分区表 数据到 mysql

connectjdbc:mysql://localhost:3306/test--usernameroot--password123456--tabletablename--export-dir/user/hive/warehouse
刀砍磁感线·2020-08-14 11:01

bzoj 2802: [Poi2012]Warehouse Store 题解

【原题】2802:[Poi2012]WarehouseStoreTimeLimit:10SecMemoryLimit:64MBSecSpecialJudgeSubmit:94Solved:54Description有一家专卖一种商品的店，考虑连续的n天。第i天上午会进货Ai件商品，中午的时候会有顾客需要购买Bi件商品，可以选择满足顾客的要求，或是无视掉他。如果要满足顾客的需求，就必须要有足够的库存
阿蒋·2020-08-14 08:41
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他