E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
廖雪峰大数据
(十一)数据分片(Sharding)和数据分区(PARTITIONing)简述
即便是MariaDB,也有一个想要处理
大数据
的心。虽然可能跟其它的例如HBase、Hive之类的比有些差异和不足,但并不影响壮志。
紫狐挽诗
·
2024-01-04 14:36
实时计算大作业kafka+zookeeper+storm+dataV
第一章总体需求1.1.课题背景近年来,
大数据
称为热门词汇,
大数据
分析随着互联网技术的发展愈加深入电商营销之中,越来越多的电商企业利用
大数据
分析技术,利用信息化对产业发展营销方向进行确定,对电子商务行业
大数据
的特性和背后价值进行深入挖掘
别被算法PUA
·
2024-01-04 14:23
课程设计
kafka
zookeeper
storm
分布式
如何做好固定资产管理?易点易动提供智能化方案
在
大数据
和云计算的时代,在固定资产管理模式上,各企业纷纷摆脱了手工管理的模式,开始使用固定资产管理系统将固定资产进行全生命周期管理和盘点,用于实时记录和追踪固定资产的状态和动态信息,严格控制实物资产管理成本
doris6100
·
2024-01-04 13:21
固定资产
固定资产管理系统
设备管理
固定资产管理软件让企业实现固定资产的智能化管理
从office等办公软件的应用,到云计算、
大数据
、RFID等技术的成熟的提出,在它们的影响下,人们的工作和生活产生了翻天覆地的变化。
doris610
·
2024-01-04 13:20
固定资产管理软件
固定资产管理系统
大数据
的概念
定义
大数据
是指规模巨大、复杂度高、以及传统方法难以处理和分析的数据集合。这些数据集通常包含结构化、半结构化和非结构化的数据,产生于各种来源,包括传感器、社交媒体、日志文件、传统数据库等。
百锦再
·
2024-01-04 11:32
其他
大数据
闲话
大数据
背后的格局
现如今
大数据
的运用到处可见,
大数据
的推荐法、分析法、类别法等,我们无时无刻地被
大数据
所包围。而这个
大数据
在整合的过程中真的是毫无瑕疵吗?其实不然,个人觉得这
大数据
背后的格局是被限定的。
小颓颓
·
2024-01-04 11:55
4月28日
中国信息安全测评中心联合安恒信息,于2017年推出注册Web安全工程师(简称CWSE),工业控制系统安全工程师(简称ICSSE),
大数据
安全分析师和云计算安全工程师认证。
柒月是你的忧伤
·
2024-01-04 11:02
实时数据处理概述与Spark Streaming简介
实时数据处理已经成为当今
大数据
时代的一个重要领域,它使组织能够及时分析和采取行动,以应对不断变化的数据。SparkStreaming是ApacheSpark生态系统中的一个模块,专门用于实时数据处理。
晓之以理的喵~~
·
2024-01-04 11:16
Spark
spark
c#
大数据
Spark Streaming的DStream与窗口操作
实时数据处理已经成为当今
大数据
时代的一个重要领域,而SparkStreaming是ApacheSpark生态系统中的一个关键模块,用于处理实时数据流。
晓之以理的喵~~
·
2024-01-04 11:42
Spark
spark
大数据
分布式
通信网络从4G升级到5G,核心网融合至关重要
现阶段,全球正加快新型数字基础设施建设,其中包括对传感终端、5G网络、
大数据
中心、工业互联网等基础设施进行数字化、网络化、智能化改造升级。
爱浦路 IPLOOK
·
2024-01-04 11:56
5g
行业专网
5G应用
核心网
大疆无人机飞控系统的原理、组成及各传感器的作用
如今,随着芯片、人工智能、
大数据
技术的发展,无人机开始了智能化、终端化、集群化的趋势,大批自动化、机械电子、信息工程、微电子的专业人材投入到了无人机研发大潮中,
小熊coder
·
2024-01-04 11:23
嵌入式AI
无人机
Python在金融
大数据
分析中的AI应用实战
】【神级代码资源网站】【办公神器】基于Web端打造的:轻量化工具创作平台想寻找共同学习交流的小伙伴,请点击【全栈技术交流群】随着人工智能时代的到来,Python作为一种功能强大的编程语言,在金融领域的
大数据
分析中扮演着日益重要的角色
海拥✘
·
2024-01-04 10:39
python
金融
数据分析
商品推荐系统+可视化+2种协同过滤推荐算法 Django框架
大数据
毕业设计(附源码+论文)✅
毕业设计:2023-2024年计算机专业毕业设计选题汇总(建议收藏)毕业设计:2023-2024年最新最全计算机专业毕设选题推荐汇总感兴趣的可以先收藏起来,点赞、关注不迷路,大家在毕设选题,项目以及论文编写等相关问题都可以给我留言咨询,希望帮助同学们顺利毕业。1、项目介绍技术栈:python语言、MySQL数据库、Django框架、2种协同过滤推荐算法、Echarts可视化、HTML协同过滤推荐算
vx_biyesheji0001
·
2024-01-04 10:41
biyesheji0001
biyesheji0002
毕业设计
推荐算法
django
大数据
python
毕业设计
商品推荐系统
推荐系统
Python中的数据分析和数据处理
随着
大数据
时代的到来,数据分析和处理变得越来越重要。Python作为一种功能强大的编程语言,广泛应用于数据分析和处理领域。
api茶飘香
·
2024-01-04 10:39
电商api
python
数据分析
开发语言
技术学习|CDA level I 表格结构数据与表结构数据
1、在
大数据
时代背景下,我们使用的数据主要包含两个类别:一种称为结构化数据,另一种称为非结构化数据。
咻~电脑
·
2024-01-04 09:20
CDA数据分析
信息可视化
数据分析
【神行百里】pandas查询加速之行索引篇
最近进行
大数据
处理的时候,发现我以前常用的pandas查询方法太慢了,太慢了,真是太慢了,查阅资料,遂发现了一种新的加速方法,能助力我飞上天,和太阳肩并肩,所以记录下来。
风巽·剑染春水
·
2024-01-04 09:08
pandas
加速
loc方法
行索引设置
Java-网络爬虫(一)
文章目录前言一、网络爬虫1.介绍2.爬虫协议3.法律法规二、相关知识1.HttpClient2.Jsoup三、综合案例1.案例一2.案例二四、总结前言在
大数据
时代,信息采集是一项重要的工作,而互联网中的数据是海量的
多加点辣也没关系
·
2024-01-04 09:01
入门教程
日常积累
java
爬虫
开发语言
【1230践行笔记】杜杜(795字)
我自己本职做的是会计,但是如果仅仅停留在做账报税的基础工作,我相信很快就会被取代,只要
大数据
系统的建立,从源头填个单子,其他部门的相关单子就可以直接出
小草杜杜
·
2024-01-04 09:22
客户画像及标签体系
大数据
时代,客户购买行为给企业的产品和服务来了一系列的改变和重塑。其中,最大的变化在于,客户的一切行为在企业面前是可以量化和追溯的。企业内部保存了大量的原始数据和业务数据,这些都是服务客户的真实历程。
Kalyn李大平
·
2024-01-04 08:38
万端归一(One),大道至简——终端安全展现“极、简、新”
随着云计算、
大数据
、物联网等创新技术的加速落地,企业原有的网络边界被打破,各种终端设备如:笔记本电脑、台式机、平板电脑、智能手机、物联网终端等成为了新的安全边界。
亚信安全官方账号
·
2024-01-04 08:51
终端安全
安全
网络安全
安全威胁分析
科技
大数据
HCIE成神之路之特征工程——特征选择
特征选择1.1特征选择-Filter方法1.1.1实验任务1.1.1.1实验背景1.1.1.2实验目标1.1.1.3实验数据解析1.1.1.4实验思路1.1.2实验操作步骤1.2特征选择-Wrapper方法1.2.1实验任务1.2.1.1实验背景1.2.1.2实验目标1.2.1.3实验数据解析1.2.1.4实验思路1.2.2实验操作步骤1.3特征选择-Embedding方法1.3.1实验任务1.3
邵奈一
·
2024-01-04 08:57
数据挖掘
机器学习
HCIE之路
大数据
HCIE
数据挖掘
Hive用户自定义函数之UDF开发
在进行
大数据
分析或者开发的时候,难免用到Hive进行数据查询分析,Hive内置很多函数,但是会有一部分需求需要自己开发,这个时候就需要自定义函数了,Hive的自定义函数开发非常方便,今天首先讲一下UDF
枫叶梨花
·
2024-01-04 08:56
Hive知识圈
hive
hadoop
数据仓库
SuperMap & YashanDB联合解决方案发布,赋能更强大的地理智慧
携手超图软件集团(简称“超图”)重磅推出基于崖山数据库的空间数据管理解决方案,基于YashanDB空间数据库能力,与超图SuperMapGIS平台深度适配,共同为各行业提供更高效、更灵活的空间数据管理及空间
大数据
挖掘分析能力
YashanDB
·
2024-01-04 08:26
数据库
YashanDB
国产数据库
数据库
尚硅谷
大数据
技术-数据湖Hudi视频教程-笔记01
大数据
新风口:Hudi数据湖(尚硅谷&ApacheHudi联合出品)尚硅谷数据湖Hudi视频教程B站直达:https://www.bilibili.com/video/BV1ue4y1i7na百度网盘:
upward337
·
2024-01-04 08:52
#
数据湖
大数据
数据湖
hudi
Linux
maven
spark
flink
他趣邀请码大全免费共享(含他趣邀请码填写攻略)引领交友成功的秘诀!
其次,该应用程序还利用
大数据
分析用户行为,通过机器学习等技术为用户推荐更符合自己要求的对象。这些算法和技术的加持,大大提高了用户匹配成功
桃朵十三
·
2024-01-04 07:10
大数据
StarRocks(三) StarRocks数据表设计
1.列式存储1.1列式存储方式有以下几个优点:1.快速的数据查询由于数据是按照列进行存储的,所以查询某个列时只需要读取该列所在的块,而不是整行数据,从而大大提高了查询效率。2.压缩效率高由于列式存储的数据块中只有一个值的数据,所以可以使用更高效的压缩算法进行压缩,从而减少存储空间。3.易于扩展由于数据是按列存储的,所以可以很容易地添加或删除列,从而方便地扩展或缩减表的大小。在StarRocks中,
运维仙人
·
2024-01-04 07:30
大数据
大数据
starrocks
大数据
-HDFS原理
什么是HDFS?HDFS(HadoopDistributionFileSystem)是基于谷歌发布的GFS论文设计的;出了具有其他文件系统具有的特性之后,HDFS还具有:高容错性:认为硬件总是不可靠的;高吞吐量:为大量数据访问的应用提供高吞吐量的支持;大文件存储:支持存储TB或PB级的数据。HDFS作为Hadoop的基础存储设施,实现一个高容错,分布式,可线性扩展的文件系统HDFS基础系统架构hd
运维仙人
·
2024-01-04 07:00
大数据
运维
标注员—人工智能的发力者
韩国围棋冠军李世石对战Alphago人工智能越来越强大的背后是
大数据
强有力的支撑,数据从采集到清洗、删选、标注、质检这一系列繁重复杂的工作属于一个新型的职
沁儿哈哈哒
·
2024-01-04 07:55
用python抓取yarn和jstorm界面资源信息在grafana展示
背景:
大数据
系统分布式计算和存储强大功能推动了科技的进步,而在
大数据
运维过程中计算资源是时刻要关注的指标。
运维仙人
·
2024-01-04 07:29
大数据
Python
python
grafana
开发语言
大数据
StarRocks(二) StarRocks集群部署
一、生产机器资源评估1.梳理数据量,包括每天增量数据接入和全量数据接入2.数据存储时间长度(1个月/3个月/半年/1年/三年等)3.报表的SQL查询数量,SQL查询占用资源的统计,需要提前做好压测4.压测可以采用官网提供的压测工具先进行测试,根据测试数据进行资源调整,然后再要业务数据进行压测一遍最终以压测中预期结果最好的机器配置进行申请,如果公司很rich的话,直接用80c/256G的机器配置。二
运维仙人
·
2024-01-04 07:55
大数据
大数据
StarRocks
【Hadoop-HDFS-S3】HDFS 和存储对象 S3 的对比
之前的工作经历中的
大数据
集群存储都是用HDFS,当前工作接触到对象存储S3,在实践中比较两者的不同之处。1)可扩展性HDFS依赖本地的存储只能横向扩展,增
bmyyyyyy
·
2024-01-04 07:25
Hadoop
hadoop
hdfs
大数据
#存储对象
#S3
对比Pig、Hive和SQL,浅看
大数据
工具之间的差异
以下为译文有人说对于
大数据
分析来说Hadoop才是炙手可热的新技术,SQL虽然久经考验但已经有些过时了。这话说得不错,但有非常多的项目都用Hadoop作
MayerBin
·
2024-01-04 06:09
SeaTunnel同步SQLserver数据至ClickHouse
ClickHouse是一种OLAP类型的列式数据库管理系统,ClickHouse完美的实现了OLAP和列式数据库的优势,因此在
大数据
量的分析处理应用中ClickHouse表现很优秀。
万山数据@yqj1987
·
2024-01-04 06:28
clickhouse
sqlserver
钡铼工控机BL302+PLC,助力酿酒业转型升级
啤酒制造企业正在以科技和
大数据
为支撑,推动智能制造工厂的建设。通过运用物联网、
大数据
等技术手段,实现生
钡铼技术网关
·
2024-01-04 06:55
物联网
linux
掌控数字世界的幕后英雄
随着云计算、
大数据
、人工智能等技术的飞速发展,运维工程师的角色和职责也在不断演变。他们不仅需要精通网络、服务器、存储等基础设施的管理与维护,还要对数据库、应用软件和各类系统进行深度优化与监控。
数字化信息化智能化解决方案
·
2024-01-04 06:53
运维
大数据
HCIE成神之路之数据预处理(5)——偏态数据处理
偏态数据处理1.1偏态数据三种处理方案1.1.1实验背景1.1.2实验目标1.1.3实验数据解析1.1.4实验思路1.1.5实验操作步骤步骤1导入相关模块和`Data_to_Transform.csv`数据集步骤2平方根法步骤3对数转换步骤4Box-Cox转换1.1偏态数据三种处理方案1.1.1实验背景许多经典的统计方法和机器学习算法都假设数据服从正态分布,因为正态分布具有许多有用的性质。在数据预
邵奈一
·
2024-01-04 05:17
机器学习
HCIE之路
数据挖掘
大数据
HCIE
数据挖掘
副业赚钱的路子有哪些(推荐10大靠谱的赚钱路子)
如果你没有实物产品也不必忧心,互联网
大数据
时代下,一切需求都有人帮助你解决,最重要的是0成本。我
声优配音圈
·
2024-01-04 05:43
DataLoader 和 Dataset
接下来,我们就要弄明白怎么对数据进行预处理,然后加载数据,我们以前手动加载数据的方式,在数据量小的时候,并没有太大问题,但是到了
大数据
量,我们需要使用shuffle,分割成mini-batch等操作的时候
深度学习的奋斗者
·
2024-01-04 04:04
python
CloudManager
大数据
本地环境标准部署文档
一、基本信息文档目的:标准化、规范化Hadoop在本地化环境中部署所涉及的操作和流程,以便高效、高质地落地本地化环境部署的工作。二、安装介质FTP服务器:http://172.16.246.252:81/hadoopteam/cloudmanager/CDH-5.8.2-1.cdh5.8.2.p0.3-el7.parcelhttp://172.16.246.252:81/hadoopteam/cl
有语忆语
·
2024-01-04 04:29
大数据之数据仓库
项目
大数据
DolphinScheduler实际应用
前言最近公司新启动了一个项目,然后领导想用一下新技术,并且为公司提供多个
大数据
调度解决方案,我呢就根据领导要求调研了下当前的开源调度工具,最终决定采用DolphinScheduler,因此研究了一下DolphinScheduler
有语忆语
·
2024-01-04 04:29
大数据之数据仓库
大数据
某人寿保险公司基础架构云化与小机数仓下移实践
随着数据中心IT基础架构的不断演进,云计算、
大数据
、移动互联的需求日益高涨,快速敏捷、易于维护以及扩展性,逐渐成为金融机构在升级数据中心时重点考虑的方面。
志凌海纳SmartX
·
2024-01-04 03:09
超融合
云计算
数据库架构
如何构建
大数据
指标分析系统
技术的第一性原则是解决问题,不同的技术方案都能实现同样的需求,那在公司原有技术架构上,如何设计技术架构,尽量用最少的
大数据
组件解决多种应用场景问题。
i7杨
·
2024-01-04 03:37
大数据指标分析
大数据
Flink应用介绍
笔者通过总结在工作中的Flink使用经验和对Flink的特性理解,整理了一份Flink的应用介绍思考,希望能对在
大数据
领域耕耘的朋友起到参考作用。
i7杨
·
2024-01-04 03:37
Flink
flink
大数据
大数据
技术应用思考
引言:如何应用
大数据
技术,从事
大数据
工作多年,这是一个自问,也是一个讨论。
i7杨
·
2024-01-04 03:07
大数据
2024年统一
大数据
应用场景的技术
前言:中间件/
大数据
组件的出现是为了解决特定的应用场景。
i7杨
·
2024-01-04 03:07
大数据技术分析
大数据
2024年
大数据
技术分析选型
前言:以谷歌2003年发表
大数据
三驾马车论文为
大数据
元年,已经过去了20年,2024是
大数据
发展一个新的20年开始。
i7杨
·
2024-01-04 03:03
大数据技术分析
大数据
《知识大迁移》读后感
作者在美国做全国
大数据
调查,发现高收入人群,都拥有相似的知识体系,经科学实践证实,获得财富自由,你需要掌握六种关键知识:1,底层思维逻辑知识:它决定你解决问题的能力,能让你透过表象抓住事物的本质2,某种体育专业知识
卷发Y头
·
2024-01-04 02:52
GBASE南大通用数据库-GBase8a虚拟集群镜像技术
随着云计算和
大数据
技术的发展,虚拟集群环境下的数据同步和备份问题日益凸显。如何在保证数据一致性的同时,实现高效、可靠的数据管理?今天,我们为大家介绍一款强大且实用的技术——GBase8a虚拟集群镜像。
GBASE数据库
·
2024-01-04 02:23
数据库
GBASE南大通用
GBASE
从零开始了解
大数据
(六):数据仓库Hive篇
目录前言一、数据仓库基本概念二、ApacheHive入门1.ApacheHive概述2.ApacheHive架构与组件三、ApacheHive安装部署1.ApacheHive部署实战(1)Hadoop与Hive整合(2)Metastore服务启动方式四、ApacheHive客户端使用1.Hive自带客户端五、HiveSQL语言:DDL建库、建表1.HiveSQL之数据库相关操作2.HiveSQL之
橘子-青衫
·
2024-01-04 02:51
大数据
从零开始了解大数据
大数据
数据仓库
hive
hadoop
分布式
从零开始了解
大数据
(四):MapReduce篇
目录前言一、MapReduce思想1.先分再合,分而治之2.Map阶段——拆分3.Reduce阶段——合并二、MapReduce设计构思1.如何对付
大数据
处理场景2.构建抽象编程模型3.统一架构、隐藏底层细节三
橘子-青衫
·
2024-01-04 02:20
大数据
从零开始了解大数据
大数据
mapreduce
hadoop
分布式
上一页
83
84
85
86
87
88
89
90
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他