E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
大数据数仓
星环科技×恒生电子,联合打造反洗钱解决方案
将
大数据
技术应用于反洗钱领域,可借助
大数据
平台高效整合、分析海量客户身份信息和交易数据,保障反洗钱系统有效开展客户风险等级评定、可疑交易筛查、黑名单监测等工作,为反洗钱工作赋能。
·
2025-01-18 05:12
人工智能
Transwarp Data Studio 4.0 :适应AI新时代实现三大能力提升
星环科技
大数据
开发工具TranswarpDataStudio,在此过程中发挥着承上启下的关键作用。
·
2025-01-18 05:12
人工智能
智能数据时代:如何优化
数仓
模型的复用性
在
数仓
岗位面试中,相信很多同学都频繁被问到“模型复用性”相关面试题。这个也是很多企业
数仓
建设中非常关注的问题,因为在企业
数仓
建设中
数仓
模型的复用性,更是有着多方面的关键意义。
Python编程杰哥
·
2025-01-18 00:44
llama
人工智能
easyui
前端
设计模式
数智化转型 | 星环科技Defensor 助力某银行数据分类分级
某银行作为数字化转型的先行者,面临着一项艰巨的任务:如何高效、准确地对分布在多个业务系统、业务库与
数仓
数湖中的约80万个字段进行数据分类和分级。
·
2025-01-18 00:56
数据库
推荐文章:libpopcnt——高效位计数的神器
高效位计数的神器libpopcntFastC/C++bitpopulationcountlibrary项目地址:https://gitcode.com/gh_mirrors/li/libpopcnt在数字处理和
大数据
分析的世界里
胡蓓怡
·
2025-01-17 23:31
什么是数据仓库?
数据仓库是
大数据
体系的重要组成部分,主要用于对大量历史数据的存储、处理和分析。简单来说,数据仓库是一个为数据分析和业务决策服务的系统,通过整合来自不同来源的数据,形成面向主题的、可查询的
狮歌~资深攻城狮
·
2025-01-17 22:57
数据仓库
如何实现集群部署
集群部署广泛应用于各种场景,如Web服务、数据库、
大数据
处理等。以下是关于集群部署的详细解释:1.基本概念集群(Cluster):一组相互连接的计算机,它们协同工作以提供单一的计算资源。
DaXiongJoker
·
2025-01-17 21:49
持续部署
nginx
java
MongoDB深度解析与实践案例
MongoDB深度解析与实践案例在当今
大数据
与云计算盛行的时代,NoSQL数据库以其灵活的数据模型、水平扩展能力和高性能,成为处理海量数据的重要工具之一。
我的运维人生
·
2025-01-17 21:47
mongodb
数据库
运维开发
技术共享
MongoDB深度解析与实践案例
MongoDB深度解析与实践案例在当今
大数据
与云计算蓬勃发展的时代,NoSQL数据库以其灵活的数据模型、水平扩展能力和高性能,成为处理海量数据的重要工具。
我的运维人生
·
2025-01-17 21:17
mongodb
数据库
运维开发
技术共享
2024年最新Python:Page Object设计模式_python page object,BTAJ大厂最新面试题汇集
知识体系:含编程语言、算法、
大数据
生态圈组件(Mysql、Hive、Spark、Flink)、数据仓库、Python、前端等等。网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是
m0_60707708
·
2025-01-17 20:36
程序员
python
设计模式
开发语言
PolarDB for MySQL 三大核心之一POLARFS 今天扒开它--- 嘛是火星人
开头还是介绍一下群,如果感兴趣PolarDB,MongoDB,MySQL,PostgreSQL,Redis,OceanBase,SqlServer等有问题,有需求都可以加群群内有各
大数据
库行业大咖,可以解决你的问题
Austindatabases
·
2025-01-17 20:35
mysql
数据库
Linux内核性能调优:让系统飞起来的秘籍
在当今数字化时代,Linux系统凭借其强大的稳定性、开放性和灵活性,广泛应用于服务器、云计算、
大数据
等诸多领域。然而,随着业务量的不断增长和应用场景的日益复杂,Linux内核的性能面临着巨大挑战。
·
2025-01-17 20:22
AI Agent:一场智能革命的开始
一、AIAgent的发展现状:技术突破与广泛应用近年来,随着
大数据
、云计算和机器学习等技术的飞速发展,AIAgent的技术水平得
TechubNews
·
2025-01-17 20:02
人工智能
案例分享|快速了解实时湖仓集一体技术如何助力企业降本增效
该农商行基于星环科技实时湖仓集一体平台,替代了Teradata
数仓
、Oracle数据平台和Hadoop数据湖三个平台,一体化架构同时满足数据湖海量汇集、复杂
数仓
模型
·
2025-01-17 20:42
mysql
三个案例,快速了解星环科技如何助力医疗数字化转型
星环科技助力某三甲医院打造湖仓集一体
大数据
底座某大型综合三甲医院为解决全院各业务系统数据统一采集、存储、实时共享问题,联合星环科技打造“湖仓集”一体的技术底座
·
2025-01-17 19:06
科技医疗it
案例分享| 某港口集团企业级数据管理及分析应用体系构建
通过运用
大数据
基础平台TDH、
大数据
开发
·
2025-01-17 19:04
数据分析
采用海豚调度器+Doris开发
数仓
保姆级教程(满满是踩坑干货细节,持续更新)
目录一、采用海豚调度器+Doris开发平替CDHHdfs+Yarn+Hive+Oozie的理由。1.架构复杂性2.数据处理性能3.数据同步与更新4.资源利用率与成本6.生态系统与兼容性7.符合信创或国产化要求二、ODS层接入数据接入kafka实时数据踩坑的问题细节三、海豚调度器调度Doris进行报表开发创建带分区的表在doris进行开发调试开发海豚调度器脚本解决shell脚本使用MySQL命令行给
大模型大数据攻城狮
·
2025-01-17 19:56
海豚调度器从入门到精通
doris
海豚调度器
离线数仓
实时数仓
国产代替
信创大数据
flink数仓
【武汉东湖学院主办 | ACM出版 | 高录用 | 快检索】第六届计算机信息和
大数据
应用国际学术会议(CIBDA 2025)
大会官网:www.ic-cibda.org【参会投稿】大会时间:2025年3月14-16日大会地点:中国-武汉论文出版:会议投稿经过2-3位组委会专家严格审核后,最终所录用的论文将被ACMICPS(ACMInternationalConferenceProceedingSeries)出版论文集,并提交至ACMDigitallibrary,EICompendex,Scopus检索。目前该会议论文检索
艾思科蓝 AiScholar
·
2025-01-17 16:05
学术会议
计算机科学
计算机技术工程
大数据
信息可视化
软件工程
人工智能
分布式
深度学习
算法
数仓
数据分层(ODS DWD DWS ADS)
ODSDWDDWSDWS,俗称的数据服务层,也有叫做数据聚合层.不过按照经典数据建模理论,一般称之为前者,也就是数据服务层,为更上层的ADS层或者直接面向需求方服务.DWS建模,一般使用主题建模,维度建模等方式主题建模,顾名思义,围绕某一个业务主体进行数据建模,将相关数据抽离提取出来.如,将流量会话按照天,月进行聚合将每日新用户进行聚合将每日活跃用户进行聚合维度建模,其实也差不多,不过是根据业务需
123 黑曼巴
·
2025-01-17 16:29
大数据
数据仓库
数仓
数据分层(ODS DWD DWS ADS)换个角度看
数仓
数据分层简介1.背景
数仓
是什么,其实就是存储数据,体现历史变化的一个数据仓库.因为互联网时代到来,基于数据量的大小,分为了传统
数仓
和现代
数仓
.传统
数仓
,使用传统的关系型数据库进行数据存储,因为关系型数据库本身可以使用
闻香识代码
·
2025-01-17 16:28
大数据
数仓
数据仓库
大数据
ods
dw
“
大数据
+技校”:VR虚拟仿真实训室的发展前景
在技术教育的新时代,
大数据
与虚拟现实技术的融合正在重塑技校的教学模式。"
大数据
+技校"模式下的VR虚拟仿真实训室,为技校学生提供了一个创新的学习平台,预示着教育方式的深刻变革。
武汉唯众智创
·
2025-01-17 16:27
大数据
vr
大数据实训室
大数据实验室
大数据VR实训室
万字详解
数仓
分层设计架构 ODS-DWD-DWS-ADS
参考:万字详解
数仓
分层设计架构ODS-DWD-DWS-ADS数据分层的意义1、清晰数据结构2、数据血缘追踪3、数据复用,减少重复开发4、把复杂问题简单化5、屏蔽原始数据的(影响),屏蔽业务的影响ETL操作
_Jordan
·
2025-01-17 16:56
自己写的
数据仓库
大数据
分层存储架构:ODS、DWD、DWM与DWS详解
在
大数据
领域中,ODS、DWD、DWM和DWS代表了数据仓库的不同层次,它们共同构成了
大数据
的分层存储结构。这种结构的设计有助于提高数据查询效率,降低成本,并满足不同的业务需求。
从零开始学习人工智能
·
2025-01-17 15:51
大数据
spark
分布式
数仓
分层ODS、DWD、DWM、DWS、DIM、DM、ADS
往期推荐
数仓
入门:数据分析模型、
数仓
建模、离线实时
数仓
、Lambda、Kappa、湖仓一体-CSDN博客
数仓
常见名词解析和名词之间的关系-CSDN博客数据仓库及
数仓
架构概述-CSDN博客
大数据
HBase
青秋.
·
2025-01-17 15:17
数据仓库
大数据
数据仓库
区块链领域新进展:技术创新与应用拓展齐头并进
据中国日报1月3日消息,在国家重点研发计划的牵引下,长安链高性能融合隐私计算,在确保原始数据不被泄露的前提下,支持社保
大数据
服务信息在企业、金融机构可信安全流通和共享,助力实体经济高质量发展。
·
2025-01-17 15:13
数仓
实践:如何优雅的设计DWS层?
对于
数仓
的分层,大家最耳熟能详的就是基于OneData方法论的三层
数仓
划分,分别是:数据引入层(ODS,OperationalDataStore)、数据公共层(CDM,CommonDimenionsModel
云 祁
·
2025-01-17 14:37
#
----
数仓理论
数仓实践
大数据
数据仓库
维度建模
Java 大视界 -- Java 开发 Spark 应用:RDD 操作与数据转换
ApacheSpark是一个强大的分布式计算框架,提供了高效的数据处理能力,广泛应用于
大数据
分析与机器学习。Spark提供了多种高级API,支持批处理和流处理。
一只蜗牛儿
·
2025-01-17 12:26
java
spark
开发语言
推荐文章:揭开贝壳网房价数据的神秘面纱 —— BeikeSpider 深度探索
支持csv存储,注释丰富,链家网爬虫见我另一个项目项目地址:https://gitcode.com/gh_mirrors/be/BeikeSpider项目介绍在房地产
大数据
的时代背景下,获取
郎纪洋
·
2025-01-17 10:07
编码必看!智能代码助手帮你快速解释代码、解释函数
结合百度积累多年的编程现场
大数据
、外部优秀开源数据,可为开发者生成更符合实际研发场景的优秀代码,提升编码效率,释放“十倍”软件生产力。
·
2025-01-17 10:56
Spring Boot 和微服务:快速入门指南
大数据
技术:涵盖Hadoop(HDFS)、Hive、Spark、Fli
王子良.
·
2025-01-17 09:56
Java
经验分享
spring
boot
微服务
后端
大数据
框架之kafka详解
目录1kafka介绍1.1kalka是什么?1.2Kafka内部原理1.3为什么需要消息队列?2Kafka的消息系统语义3Kafka生产过程分析3.1写入方式3.2分区(Partition)3.3副本(Replication)3.4Producer写入流程3.5消费者组3.6消费方式扩展:纠删码技术1kafka介绍1.1kalka是什么?可以简单的将kafka看做是一种消息队列,启动生产者与消费者
xingchensuiyue
·
2025-01-17 06:30
大数据
zookeeper
kafka
kafka
内部知识库的未来展望:技术融合与用户体验的双重升级
一、技术融合:开启知识管理新篇(一)
大数据
+内部知识库:知识挖掘的深度拓展
大数据
技术的蓬勃发展为内部知识库注入了强大动力。企业积累的海量业务数据、员工行为数据等,犹如一座未经深度开采的金矿。
·
2025-01-17 05:04
Bitmap 和 布隆过滤器傻傻分不清?你这不应该啊
不过,bitmap和布隆过滤器在
大数据
量和高并发业务的使用频率不低,知识点应该掌握下,既然问了那咱们简单的梳理下它们的底层原理、应用场景以及它们之间的关联。
·
2025-01-17 04:27
实时
数仓
方实际落地如何选型和构建
实时
数仓
方实际落地如何选型和构建一、为何需要实时
数仓
架构随着数字化进程的推进,企业产生的数据越来越多,与此同时企业对数据的需求也变得越来越复杂多样。
活在风浪里~
·
2025-01-17 04:15
大数据架构
大数据体系
数据治理
数据仓库
大数据
数据挖掘
Hive 窗口函数与分析函数深度解析:开启
大数据
分析的新维度
Hive窗口函数与分析函数深度解析:开启
大数据
分析的新维度在当今
大数据
蓬勃发展的时代,Hive作为一款强大的数据仓库工具,其窗口函数和分析函数犹如一把把精巧的手术刀,助力数据分析师们精准地剖析海量数据,
自节码
·
2025-01-17 02:25
大数据
hive
数据分析
hadoop
大数据
新视界 --
大数据
大厂之 Hive 数据压缩算法对比与选择(下)(20 / 30)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-01-17 01:14
大数据新视界
#
Hive
之道
大数据
Hive
数据压缩
压缩算法对比
选择因素
案例分析
实时数据处理
数据存储优化
sql
大数据
新视界 --
大数据
大厂之 Hive 数据安全:权限管理体系的深度解读(上)(15/ 30)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-01-17 01:14
大数据新视界
#
Hive
之道
大数据
Hive
集成
大数据工具
集成模式
优化策略
未来趋势
数据一致性
大数据
新视界 --
大数据
大厂之 Impala 性能优化:融合人工智能预测的资源预分配秘籍(上)(29 / 30)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-01-17 01:43
大数据新视界
#
Impala
之道
大数据
Impala
人工智能预测
资源预分配
数据收集
模型构建
查询性能优化
大数据
新视界 --
大数据
大厂之 Impala 性能提升:高级执行计划优化实战案例(下)(18/30)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-01-17 01:13
大数据新视界
#
Impala
之道
大数据
Impala
高级执行计划优化
实战案例
金融
电商
性能提升
大数据
新视界 --
大数据
大厂之数据脱敏技术在
大数据
中的应用与挑战
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-01-17 01:13
大数据新视界
大数据
数据脱敏
发展现状
应用场景
挑战
解决方案
未来趋势
大数据
新视界 --
大数据
大厂之 Apache Beam:统一批流处理的
大数据
新贵
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-01-17 01:43
大数据新视界
大数据
Apache
Beam
批流统一
性能优化
案例展示
数据分区
容错机制
大数据
新视界 --
大数据
大厂之 Volcano:
大数据
计算任务调度的新突破
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-01-17 01:13
Volcano
之道
大数据新视界
大数据
Volcano
任务调度
效率提升
资源优化
技术融合
实践指导
大数据
新视界 --
大数据
大厂之 GraphQL 在
大数据
查询中的创新应用:优化数据获取效率
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-01-17 01:13
GraphQL
之道
大数据新视界
大数据
GraphQL
数据查询
性能优化
多数据源整合
实时数据分析
移动端应用优化
数据库
大数据
新视界 --
大数据
大厂之AI 与
大数据
的融合:开创智能未来的新篇章
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-01-17 00:42
大数据新视界
AI&人工智能
大数据
人工智能
智能环保
智能教育
智能农业
ChatGPT
智能能源
数据库
Python网络爬虫入门教程:从抓取数据到应用实现
引言在
大数据
时代,信息就是力量。各种网站每天产生着海量的数据,这些数据中蕴藏着巨大的商业价值和研究价值。
冷夜雨.
·
2025-01-17 00:39
python
区块链领域新进展:技术创新与应用拓展齐头并进
据中国日报1月3日消息,在国家重点研发计划的牵引下,长安链高性能融合隐私计算,在确保原始数据不被泄露的前提下,支持社保
大数据
服务信息在企业、金融机构可信安全流通和共享,助力实体经济高质量发展。
·
2025-01-17 00:32
大数据
新视界 -- Hive 数据仓库设计模式:星型与雪花型架构(2 - 16 - 3)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-01-16 23:03
大数据新视界
#
Hive
之道
Hive
数据仓库
星型架构
雪花型架构
对比分析
大数据应用
Hive
大数据
关于2025年智能化招聘管理系统平台发展趋势
一、智能化招聘管理系统平台的核心特征与发展趋势1.深度学习算法与
大数据
分析的应用2025年的招聘管理系统将依托深度学习算法与
大数据
分析,彻底颠
yongyoudayee
·
2025-01-16 23:32
数智招聘
初学者如何用 Python 写第一个爬虫?
大数据
技术:涵盖Hadoop(HDFS)、Hive、Spark、Fli
王子良.
·
2025-01-16 23:27
python
经验分享
python
开发语言
爬虫
MongoDB简介
MongoDB的设计理念是为了应对
大数据
量、高性能和灵活性需求。MongoDB使用集合(Collections)来组织文档(Documents),每个文档都是由键值对组成的。
张飞光
·
2025-01-16 22:24
mongodb
数据库
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他