OushuDB

OushuDB 用户指南类型转换之操作符

image下面讲解了如何在一次操作符调用中确定所使用的究竟是哪个操作符。请注意这个过程间接受被调用操作符的优先级影响。详阅\u0013WEDRIVE_FILE{\"fileName\":\"操作符优先级\",\"fileType\":\"Link\",\"fileExt\":\"AutoL
北漂一号·2024-01-29 01:12

OushuDB 用户指南类型转换之概述

OushuDB有一个可扩展的数据类型系统，该系统比其它SQL实现更具通用性和灵活性。
北漂一号·2023-12-31 03:38

OushuDB 管理指南 备份恢复（中）

1、使用pg_dump和pg_restorepg_dump和pg_restore是一种串行备份和恢复方式，对大数据库来说从运行时间和空间来看都不适合。所以只适用于非常小的数据库备份。使用pg_dump和pg_restore的备份和恢复方式可以使用如下命令：$pg_dump-Ft-fmydb.tarmydb下面的命令可以创建一个压缩的备份。$pg_dump-Fc-Z3-fmydb.dumpmydb下
北漂一号·2023-12-28 22:43

OushuDB 数据库基本用法（中）

1、概述一个OushuDB集群管理着多个数据库（database），每个数据库又包含多个模式（schema）,一个模式包含多个对象（表，视图，函数等），所以这些对象之间的层级结构为：database->
北漂一号·2023-12-23 11:16

OushuDB 管理指南之资源管理（中）

MTY4ODg1MTEzNzAyMzAyMA_498422_MsIP59ZdCMDdPm0E_1639648579.png1、资源管理配置用户可以通过以下两个参数(hawq-site.xml中)配置资源管理器可以分配的资源数量。●hawq_rm_memory_limit_perseg:配置每个节点可以使用的内存大小，缺省值为64GB●hawq_rm_nvcore_limit_perseg:配置每个
北漂一号·2023-11-26 16:38

OushuDB 用户指南之编程接口

因为OushuDB和PostgreSQL兼容，所以可以使用PostgreSQL的驱动和编程接口来访问OushuDB。
北漂一号·2023-11-25 12:36

偶数科技发布实时湖仓数据平台Skylab 5.3版本

Skylab包含七大产品，分别为云原生分布式数据库OushuDB、数据分析与应用平台Kepler、数据资产管理平台Orbit、自动化机器学习平台LittleBoy、数据工厂Wasp、数据开发与调度平台Flow
偶数科技·2023-10-21 22:02

国产数据库OushuDB适配中国统一操作系统UOS

2020年5月29日，偶数科技旗下产品OushuDB完成了和国产操作系统——统一操作系统UOS的适配。
OushuDB·2023-09-29 18:03

OushuDB 安装与升级之安装 HDFS

安装HDFS由于hadoop依赖于特定版本的snappy，请先卸载snappy确保安装的顺利进行：hawqssh-fhostfile-e'yumremove-ysnappy'HAWQ的HDFS采用HA的方式进行安装配置。安装Hadoop可执行文件。hawqssh-fhostfile-e'yuminstall-yhadoophadoop-hdfs'配置NameNode目录，需要配置的节点有两个，ou
北漂一号·2023-09-14 14:46

偶数社区投稿丨OushuDB学习实践系列（一）：开一家超市

本系列内容，也将由技术点出发，从数据库的使用、实践开始，逐步增加对整体的认知，由点及面，真正理解OushuDB、数据湖仓一体在技术上的变革，以及对行业的影响。
偶数科技·2023-08-02 16:46

OushuDB × 东方证券：数据仓库信创国产化最佳实践

前言：东方证券是一家综合类证券公司，成立于1998年，总部设在上海。经过20多年的发展，东方证券现有分支机构177家、管理3200亿资产，服务上亿客户。与一个大型金融机构相匹配的，正是东方证券当前管理的海量数据。一、案例背景2013年起，东方证券陆续引入数据仓库平台、大数据应用平台、资讯中心大数据平台，以实现对业务运行提供数据支撑，由这三个数据平台组成的数据平台体系是东方证券金融科技战略规划的重要
偶数科技·2023-08-02 16:46

偶数科技发布实时湖仓数据平台Skylab 5.3版本

Skylab包含七大产品，分别为云原生分布式数据库OushuDB、数据分析与应用平台Kepler、数据资产管理平台Orbit、自动化机器学习平台LittleBoy、数据工厂Wasp、数据开发与调度平台Flow
偶数科技·2023-08-02 16:44

OushuDB 快速入手

快速入手本节将通过RPM安装物理机版本的一个Centos/Redhat7.x单节点集群。假设我们安装的服务器hostname为oushu（可以通过命令：hostname直接获取，请将文中所有出现的oushu替换为实际的hostname）。此次部署大约需要您30分钟时间。安装准备首先使用root登录。查看有无avx指令：cat/proc/cpuinfo|grepavx安装oushuyum源：#Red
北漂一号·2023-07-30 13:48

偶数科技与思迈特软件达成产品兼容性互认证

近日，北京偶数科技有限公司和思迈特有限公司针对双方产品的功能、性能和兼容性共同进行了严格测试，偶数「新一代云原生数据仓库OushuDB」与「思迈特商业智能与数据分析软件Smartbi系列产品」共同稳定运行
·2023-06-16 17:48

WhaleStudio 完成与偶数科技云原生分布式数据库 OushuDB 的产品兼容性认证

近日，白鲸开源「WhaleStudiov2.0」已通过与北京偶数科技产品云原生分布式数据库OushuDBv5.0的相互兼容性测试，并获得授权证书。白鲸开源与偶数科技的联合测试结果显示，经过产品的功能、兼容性测试，WhaleStudiov2.0在云原生分布式数据库OushuDBv5.0上整体运行稳定，满足功能及兼容性测试要求。WhaleStudio是白鲸开源科技根据全球领先的DataOps理念打造的
·2023-06-16 17:08

OushuDB 小课堂丨优化数据质量以应对经济动荡

持续的经济波动和全球经济衰退迫使企业领导人做出艰难的决定。一些正在裁员并缩减运营开销以变得更加敏捷，而另一些则实施了成本节约措施，例如削减技术支出，以提高财务灵活性。这些举措可能会在混乱时期为公司提供短期的喘息机会，但一旦经济环境好转，它们就会迫使它们重建。组织正在利用经济衰退来支持其业务领域，以提供长期价值，并允许他们在市场稳定后加速发展。为此，现在是企业决策者投资于他们最大的资产——数据的最佳
·2023-04-20 16:20

OushuDB 小课堂丨商业智能简史

1865年，RichardMillarDevens在“商业和商业轶事百科全书”中提出了“商业智能”(BI)一词。”他用它来描述银行家亨利弗内斯爵士如何通过在竞争前收集信息并根据信息采取行动而从中获利。最近，在1958年，一位名叫汉斯·彼得·卢恩(HansPeterLuhn)的IBM计算机科学家撰写了一篇文章，描述了通过使用技术收集商业智能(BI)的潜力。正如今天所理解的那样，商业智能使用技术来收集
·2023-04-20 16:20

OushuDB 小课堂丨非结构化数据管理的关键：交流您的数据

共享有关组织中非结构化数据所发生情况的信息比看起来要困难得多。沟通不畅几乎会对组织的各个方面产生负面影响，从IT、存储团队和应用程序开发人员一直到业务和其他最终用户。然而，准确、全面地了解您的非结构化数据对于安全、高效、经济且成功地开展业务至关重要。在长达40年的时间里，如何通过文件协议访问非结构化数据，而没有明确的方式来传达有关数据的重要细节？虽然存储团队负责管理平台并且是数据管理员对于众多利益
·2023-04-20 16:48

OushuDB-准备导出的表

假设我们有一个内部表expenses如下:CREATETABLEmyexpenses(nametext,datedate,amountfloat4,categorytext,desc1text);INSERTINTOmyexpensesVALUES('john','2017-01-20',100.00,'travel','nothing'),('tom','2016-12-01',300,'tax
·2023-04-20 16:17

OushuDB-启动gpfdist文件服务器

在本例中，我们在一个节点上启动了两个gpfdist实例，分别使用/data1/load-files和/data2/load-files目录来存放源文件。两个gpfdist实例分别侦听在8081和8082端口。日志分别存放在/home/hawq/log1和/home/hawq/log2中。gpfdist就像是一个文件服务器。其中-d选项指定的是目录是该文件服务器的根目录。gpfdist-d/data
·2023-04-20 16:17

客户端认证-认证方式

信任认证trust这个方法允许任何可以与OushuDB数据库服务器连接的用户以他们期望的任意OushuDB数据库用户身份进行连接，而不需要口令或任何其他认证。
·2023-04-20 16:16

oushudb-数据库的备份和恢复

这一节，我们一起来学习如何数据库的备份和恢复，即导入和导出OushuDB数据。
·2023-04-20 16:16

OushuDB 小课堂丨孤立数据迫在眉睫的威胁：废弃文件如何毁掉您的业务

员工离职的人数创下历史新高——无论是自愿的还是非自愿的。每年发生的员工流失量因行业和国家/地区而异。然而，裁员似乎已成为商界的普遍现象，科技行业最近受到的打击尤为严重。裁员.fyi，一个自2020年3月以来一直在监测科技裁员情况的网站，收集的数据表明，自今年年初以来，已有482家科技公司裁员了约128,202名员工。但是，员工也会自愿离职。根据美国劳工统计局的职位空缺和劳动力流动调查(JOLTS)
·2023-04-20 16:43

OushuDB 小课堂丨高级分析用例

更多内容请关注OushuBD小课堂到2023年，转向高级分析的组织将能够更好地利用各自行业中的新机遇。随着自动化数据分析的使用，公司越来越多地转向分析系统和高级分析用例，以实现战略转型和数字战略。高级分析系统正在逐步升级许多公司，创造商业价值，并研究公司如何更好地使用他们的数据产品。随着世界朝着更加数据驱动的经济发展，将越来越多的挑战带到数据科学前沿的需求将仍然是一个日益重要的优先事项。到2023
·2023-04-20 16:43

OushuDB 小课堂丨商业智能简史

1865年，RichardMillarDevens在“商业和商业轶事百科全书”中提出了“商业智能”(BI)一词。”他用它来描述银行家亨利弗内斯爵士如何通过在竞争前收集信息并根据信息采取行动而从中获利。最近，在1958年，一位名叫汉斯·彼得·卢恩(HansPeterLuhn)的IBM计算机科学家撰写了一篇文章，描述了通过使用技术收集商业智能(BI)的潜力。正如今天所理解的那样，商业智能使用技术来收集
·2023-04-20 16:43

OushuDB 小课堂丨4 个常见的数据集成挑战

更多内容请关注OushuDB小课堂将数据成功集成到单一平台的能力可能是一个挑战。良好集成的数据使相关人员可以轻松访问和使用它。整合不良的数据会产生问题。
·2023-04-20 16:42

OushuDB云原生数据库有哪些核心技术

虚拟化、分布式文件系统、分布式数据库、资源管理技术、能耗管理技术、信息安全等。虚拟化是云计算最重要的核心技术之一，它为云计算服务提供基础架构层面的支撑，是ICT服务快速走向云计算的最主要驱动力。很多人对云计算和虚拟化的认识都存在误区，认为云计算就是虚拟化。但实际上虚拟化只是云计算的重要组成部分，但不能代表全部的云计算。虚拟化的最大好处是增强系统的弹性和灵活性，降低成本、改进服务、提高资源利用效率。
偶数科技·2023-04-01 19:20

Teradata 宣布退出中国，OushuDB 成为更好选择

近日，根据多家国内媒体报道，国外老牌数据库公司Teradata宣布将退出在中国的直接运营，进入中国公司关闭程序。老牌数据库公司Teradata曾是全球大数据分析和数仓领域的头部供应商，在中国运营26年(1997-2023)，巅峰期占据中国大半壁数据仓库市场，如今仓皇退出让人唏嘘。以Teradata为代表的外资数据库厂商在中国面临的困境主要来自于三个方面：一是我国对数据安全的重视和自主可控要求的提高
偶数科技·2023-04-01 19:19

偶数科技入选 IDC 中国分布式数据库报告，获 Innovator 殊荣

偶数科技凭借其新一代云原生数据库OushuDB和实时湖仓一体创新能力获得了IDCInnovator中国分布式数据库创新者殊荣。
偶数科技·2023-04-01 19:49

OushuDB HDFS存储原理（一）

Hadoop分布式文件系统HDFS的设计目标是管理数以千计的服务器、数以万计的磁盘，将这么大规模的服务器计算资源当作一个单一的存储系统进行管理，对应用程序提供数以PB计的存储容量，让应用程序像使用普通文件系统一样存储大规模的文件数据。如何设计这样一个分布式文件系统？我们可以通过RAID磁盘阵列存储来比较了解下，RAID将数据分片后在多块磁盘上并发进行读写访问，从而提高了存储容量、加快了访问速度，并
偶数科技·2023-04-01 19:49

OushuDB HDFS原理（二）

1.数据存储故障容错磁盘介质在存储过程中受环境或者老化影响，其存储的数据可能会出现错乱。HDFS的应对措施是，对于存储在DataNode上的数据块，计算并存储校验和（CheckSum）。在读取数据的时候，重新计算读取出来的数据的校验和，如果校验不正确就抛出异常，应用程序捕获异常后就到其他DataNode上读取备份数据。2.磁盘故障容错如果DataNode监测到本机的某块磁盘损坏，就将该块磁盘上存储
偶数科技·2023-04-01 19:49

偶数科技获 ITPUB 2022 年度技术卓越奖

近日IT行业知名媒体ITPUB公布了2022年度数据库技术榜单，偶数科技凭借自主研发的新一代云原生分布式数据库OushuDB再次斩获年度技术卓越奖奖项。
偶数科技·2023-04-01 19:18

| OushuDB

基本概念对象存储，也称为“面向对象的存储”，英文是Object-basedStorage。它综合了网络附加存储(NAS)和存储局域网(SAN)的优点，同时具有SAN的高速直接访问和NAS的分布式数据共享等优势，提供了具有高性能、高可靠性、跨平台以及安全的数据共享的存储体系结构。对象存储允许将计算基础架构与存储需求分离。可以在对所有数据进行存储的同时无需监控存储，因此方便扩展并向云中的集群添加节点。
偶数科技·2023-04-01 19:17

基于Kafka+SparkStreaming+OushuDB搭建批流一体大数据分析架构

实时消息KafkaKafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。主要应用场景是：日志收集系统和消息系统。Kafka主要设计目标如下：以时间复杂度为O(1)的方式
tiaotiao·2023-04-01 02:25

OushuDB 小课堂丨2023 年数据科学趋势

数据和分析正在帮助改变商业世界，随着我们进入2023年，现在正是预测如何使用数据的最佳时机，为新的一年的顶级数据和分析趋势做好准备。当今推动市场的一些与数据相关的主要趋势包括数据科学、数据分析和人工智能(AI)的进步，它们正在共同改变全球的业务。为什么要关注数据科学趋势？每年大约这个时候，行业观察家、商业领袖、商业经营者和数据科学爱好者都期待着在未来12个月内酝酿、出现并主导商业环境的一组新的数据
·2023-02-22 15:08

OushuDB 小课堂丨2023 年数据科学趋势

数据和分析正在帮助改变商业世界，随着我们进入2023年，现在正是预测如何使用数据的最佳时机，为新的一年的顶级数据和分析趋势做好准备。当今推动市场的一些与数据相关的主要趋势包括数据科学、数据分析和人工智能(AI)的进步，它们正在共同改变全球的业务。为什么要关注数据科学趋势？每年大约这个时候，行业观察家、商业领袖、商业经营者和数据科学爱好者都期待着在未来12个月内酝酿、出现并主导商业环境的一组新的数据
·2023-02-22 15:05

OushuDB小课堂丨没有可信核心数据，数据网格就是数据网格

为应对不断增长的数据挑战而寻求快速响应和可持续解决方案的组织越来越依赖数据网格等架构方法来快速高效地提供信息。数据网格和其他虚拟数据方法连接、统一信息，并使其在众多领域可用数据孤岛和仓库，以便将其有效地交到分析师和其他用户手中，从而带来更好的决策、增加数据集的所有权和分布式协作，以及其他积极成果。然而，高质量、可信的数据是许多数据网格架构中经常被忽视的组成部分。简单地将数据移动到云端并使其更易于访
·2023-02-22 15:34

OushuDB 小课堂丨如何评估现代数据管道的数据质量准备情况

对于具有增长意识的组织而言，有效应对市场条件、竞争压力和客户期望的能力取决于一项关键资产：数据。但仅仅拥有海量数据是不够的。真正数据驱动的关键是能够访问准确、完整和可靠的数据。事实上，Gartner最近发现，组织认为数据质量差是造成平均每年损失1500万美元–一个可以削弱大多数公司的数字。不幸的是，确保和维护数据质量可能非常困难。组织的数据架构选择加剧了这种情况。遗留架构通常缺乏扩展能力来支持不断
·2023-02-22 15:02

OushuDB 小课堂丨 2023 年数据治理趋势：服务模式的成熟

公司越来越希望成熟他们的数据治理，围绕其的正式数据管理能力价值即服务，在2023年。这样，组织可以快速灵活地应对不确定的业务环境。而数据咨询公司的创始人兼首席执行官KelleO'Neal第一旧金山合作伙伴，在2022年1月首次确定了对数据治理即服务的需求，复杂而庞大的数据市场使得这种方法在2023年势在必行。在当前的数据治理中尝试，许多高管采用自上而下的寡头方法来应对对公司的挫败感数据质量，从各种
·2023-02-22 15:01

OushuDB小课堂 丨建立数据分析策略以了解您的供应链

我们都听说过并看到了运费上涨的现实。2021年，美国通过公路和铁路运输货物的国内运费上涨从2020年起23%.然而，真正的问题是，即使您负担得起这种增加，产品和产能也可能无法获得。需求显然存在，但满足该需求的运输方面的供应可能不存在。鉴于成本和需求的增加，现在是构建数据分析策略的最重要时刻，该策略可以帮助您找到了解产品何时到货的方法，以及不知道的真实成本。从了解全局开始“信息就是力量”这句老话再正
·2023-02-22 15:01

OushuDB-定义外部表

可以使用下面的命令创建WRITABLE外部表。其中需要把etlhost-1替换为gpfdist所在机器的主机名。本机的可以使用localhost。这里我们会把数据导出到两个文件中去，一个是sales1.out，一个是sales2.outCREATEWRITABLEEXTERNALTABLEexpense_out(LIKEmyexpenses)LOCATION('gpfdist://etlhost-
·2023-02-06 16:41

OushuDB-准备导出的表

假设我们有一个内部表expenses如下:CREATETABLEmyexpenses(nametext,datedate,amountfloat4,categorytext,desc1text);INSERTINTOmyexpensesVALUES('john','2017-01-20',100.00,'travel','nothing'),('tom','2016-12-01',300,'tax
·2023-02-06 16:09

OushuDB-定义外部表

可以使用下面的命令创建WRITABLE外部表。其中需要把etlhost-1替换为gpfdist所在机器的主机名。本机的可以使用localhost。这里我们会把数据导出到两个文件中去，一个是sales1.out，一个是sales2.outCREATEWRITABLEEXTERNALTABLEexpense_out(LIKEmyexpenses)LOCATION('gpfdist://etlhost-
·2023-02-06 16:09

OushuDB-加载数据

下面这条语句可以很简单的加载ext_expenses表中的数据到expenses表中。CREATETABLEexpensesASSELECT*FROMext_expenses;用户也可以通过把建表语句以及加载数据分开:CREATETABLEexpenses(nametext,datedate,amountfloat4,categorytext,desc1text);INSERTINTOexpens
·2023-02-06 16:08

OushuDB-通过gpfdist外部表导出数据

接下来我们通过一个简单的例子来说明如何使用gpfdist外部表来导出数据，使用gpfdist外部表导出数据一般有以下四个步骤。启动gpfdist文件服务器准备导出的表定义外部表导出数据
·2023-02-06 16:08

OushuDB-定义外部表

可以使用下面的命令创建外部表。其中需要把etlhost-1替换为gpfdist所在机器的主机名。本机的可以使用localhost。可以直接查询该外部表:gpfdist-d/data1/load-files-p8081-l/data1/log1gpfdist-d/data2/load-files-p8082-l/data2/log2john|2017-01-20|100.00|travel|noth
·2023-02-06 16:07

OushuDB-把需要加载的数据文件放到gpfdist数据目录

本例中我们创建两个文本文件expense1和expense2。在expense1中添加如下数据:john|2017-01-20|100.00|travel|nothingtom|2016-12-01|300|taxi|nothing在expense2中添加如下数据:marry|2017-01-21|1000.00|travel|nothingkurt|2016-12-02|800|taxi|not
·2023-02-06 16:07

客户端认证-认证方式

信任认证trust这个方法允许任何可以与OushuDB数据库服务器连接的用户以他们期望的任意OushuDB数据库用户身份进行连接，而不需要口令或任何其他认证。
·2023-02-06 16:36

oushudb-客户端认证-示例

最后我们通过几个简单的示例来回顾一下。ldap[s]://servername[:port]/basedn[;prefix[;suffix]]允许本地系统上的所有用户，通过Unix套接字，连接所有数据库。TYPEDATABASEUSERADDRESSlocalallall允许本地系统上的所有用户，但是使用本地环回TCP/IP，连接所有数据库。TYPEDATABASEUSERhostallall同上
·2023-02-06 16:36

数据库的备份和恢复

这一节，我们一起来学习如何数据库的备份和恢复，即导入和导出OushuDB数据。
·2023-02-06 16:36
上一页 1 2 3 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他