E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
04--数据开发
0基础学习大数据路线,0基础大
数据开发
加米谷大数据理论+代码+实战+实操的独有课程体系,下面是加米谷的0基础大
数据开发
课程大纲:第一阶段:Java设计与编程思想学习内容:Java设计与编程思想学习目标:Java基础、Java面向对象、Java
大数据挖掘与大数据分析
·
2023-09-25 02:20
大
数据开发
工程师之SQL面试题(一)
sql面试题(一)牛客后台会记录每个用户的试卷作答记录到exam_record表,现在有两个用户的作答记录详情如下:用户1001在2021年9月1日晚上10点11分12秒开始作答试卷9001,并在50分钟后提交,得了90分;用户1002在2021年9月4日上午7点1分2秒开始作答试卷9002,并在10分钟后退出了平台。试卷作答记录表exam_record中,表已建好,其结构如下,请用一条语句将这两
密探特洛伊
·
2023-09-24 08:00
sql
数据库
database
big
data
大
数据开发
工程师的面试题
大
数据开发
工程师的面试题通常包括:1.对大数据技术的理解;2.如何使用Hadoop构建大数据系统;3.如何使用MapReduce来处理大数据;4.如何使用Spark分析大数据;5.如何使用NoSQL数据库构建大数据系统
高天艳阳
·
2023-09-24 08:00
大数据
hadoop
mapreduce
hdfs
spark
大
数据开发
工程师面试题以及答案整理(一)
kafka的message包括哪些信息一个Kafka的Message由一个固定长度的header和一个变长的消息体body组成header部分由一个字节的magic(文件格式)和四个字节的CRC32(用于判断body消息体是否正常)构成。当magic的值为1的时候,会在magic和crc32之间多一个字节的数据:attributes(保存一些相关属性,比如是否压缩、压缩格式等等);如果magic的
陆山右
·
2023-09-24 08:59
大数据面试题
大数据面试题
大
数据开发
工程师面试题
一、选择题1、哪个程序负责HDFS数据存储?Datanode2、HDFS中的block默认保存几份?默认3份3、哪个程序通常与NameNode在一个节点启动?Jobtracker4、HDFS默认BlockSize是多少?64MB5、什么通常是集群的最主要瓶颈磁盘IO6、关于SecondaryNameNode?它的目的是帮助NameNode合并编辑日志,减少NameNode启动时间7、什么可以作为集
完美屁桃
·
2023-09-24 08:27
大数据
大数据杂谈
大
数据开发
方向偏业务侧方向-业务开发-项目经理偏技术方向-平台开发-架构师如何在面试中说服面试官根据课程项目做一些改动(变成自己熟悉的东西),形成一个新的项目,去增强面试的能力学习建议勤动手,执行范例多思考结合实际业务
February13
·
2023-09-24 08:26
大数据
2023-2024年最新大数据学习路线
文章目录2023-2024年最新大数据学习路线大
数据开发
入门*01*阶段案例实战大数据核心基础*02*阶段案例实战千亿级数仓技术*03*阶段项目实战PB级内存计算04阶段项目实战亚秒级实时计算*05*阶段项目实战大厂面试
Maynor996
·
2023-09-23 17:08
大数据
学习
开发语言
数据库
信息化发展56
数据开发
利用通过数据集成、数据挖掘和数据服务(目录服务、查询服务、浏览和下载服务、数据分发服务)、数据可视化、信息检索等技术手段,帮助数据用户从数据资源中找到所需要的数据,并将数据以一定的方式展现出来,
AbelZ_01
·
2023-09-23 11:44
软考高项4版
软考
【大
数据开发
技术】实验05-HDFS目录与文件的创建删除与查询操作
文章目录一、实验目标二、实验要求三、实验内容四、实验步骤一、实验目标熟练掌握hadoop操作指令及HDFS命令行接口掌握HDFS目录与文件的创建方法和文件写入到HDFS文件的方法掌握HDFS目录与文件的删除方法掌握查询文件状态信息和目录下所有文件的元数据信息的方法二、实验要求给出主要实验步骤成功的效果截图。要求分别在本地和集群测试,给出测试效果截图对本次实验工作进行全面的总结。完成实验内容后,实验
Want595
·
2023-09-22 15:02
《
大数据开发技术
》
大数据
hdfs
hadoop
NineData X SelectDB 联合发布会,即将上线!
本次发布会将聚焦于实时数据仓库技术和
数据开发
能力,展示SelectDB新一代实时数据仓库产品如何解决实时数据分析的行业痛点,以及「NineData如何提供高效、智能、安全的数据管理能力」。
·
2023-09-21 21:31
让开源
数据开发
平台助力提质增效!
作为开源
数据开发
平台服务商,流辰信息谨守研发初心,一直在低代码技术平台领域努力耕耘,为行业的进步和数字化发展贡献力量。
Gzlcxxjs
·
2023-09-21 20:37
开源
从源头解决大
数据开发
挑战
业务挑战与痛点随着互联网技术的发展、云计算技术的成熟、人工智能技术的兴起和数字化经济的崛起,数据已成为企业的核心资产。在金融行业中,数字化已成为了支撑各类业务场景的核心力量,包括个人理财、企业融资、股票交易、保险理赔、贷款服务、支付结算、投资咨询、资产管理等等。然而,在基于大数据分析与处理技术的业务建设中,当下的金融企业也面临许多挑战与不足:实时与查询性能不足,高并发支持挑战大:金融行业中常见的风
·
2023-09-21 16:40
数据库
大数据学习基础知识总纲
大数据需要的语言Javajava可以说是大数据最基础的编程语言,据我这些年的经验,我接触的很大一部分的大
数据开发
都是从JaveWeb开发转岗过来的(当然
yoku酱
·
2023-09-21 15:41
Infura API 获取以太坊智能合约代码 - 区块链
数据开发
实战
简介:Infura是以太坊和IPFS的API服务提供商。Infura一开始只是为ConsenSys内部项目提供稳定可靠的RPC访问,后来随着以太坊生态发展,他们意识到自己可以起到更大作用,于是开始面向开发者提供公共API服务。本文整理使用InfuraAPI获取以太坊智能合约代码。Infura是以太坊和IPFS的API服务提供商。Infura一开始只是为ConsenSys内部项目提供稳定可靠的RPC
极客红石
·
2023-09-21 15:59
决策树(下):泰坦尼克号乘客的生存预测(完整代码)
目前从事python爬虫、后端和大数据等相关工作,主要擅长领域有:爬虫、后端、大
数据开发
、数据分析等。
秋无之地
·
2023-09-21 05:46
数据分析
数据挖掘
算法
决策树
决策树(上):数据挖掘十大算法之一
目前从事python爬虫、后端和大数据等相关工作,主要擅长领域有:爬虫、后端、大
数据开发
、数据分析等。欢迎小伙伴们点赞、收藏⭐️、留言、关注,关注必回关上一篇文章已经跟大家介绍过《超详细!
秋无之地
·
2023-09-21 05:45
数据分析
python
数据分析
算法
超详细!一次学会Python数据可视化的10种技能
目前从事python爬虫、后端和大数据等相关工作,主要擅长领域有:爬虫、后端、大
数据开发
、数据分析等。
秋无之地
·
2023-09-21 05:15
数据分析
信息可视化
决策树(中):数据挖掘十大算法之一
目前从事python爬虫、后端和大数据等相关工作,主要擅长领域有:爬虫、后端、大
数据开发
、数据分析等。
秋无之地
·
2023-09-21 05:09
数据分析
数据挖掘
算法
决策树
信息化发展52
2、数据工程的主要研究内容包括数据建模、数据标准化、数据运维、
数据开发
利用和数据安全等理论和技术。数据
AbelZ_01
·
2023-09-20 23:10
软考高项4版
软考
Excel 函数学习
04--
查询利器INDEX+MATCH函数组合
2,INDEX会点名3,一个比VLOOKUP厉害百倍的组合4,INDEX和VLOOKUP的区别1INDEX函数的语法Excel世界有400多个工作表函数,INDEX原本是其中最不起眼的几个之一。INDEX的官方语法:INDEX有两种语法形式,第2种基本用不着,所以看过就当没看过。第一种:=INDEX(array,row_num,[column_num])即=INDEX(查找范围,查找范围的第几行?
会挽雕弓射天狼
·
2023-09-20 22:10
基于ISO13400 (DoIP) 实现车辆刷写
当前,Softing诊断工具链,从诊断
数据开发
到诊断
SoftingChina
·
2023-09-20 21:11
Softing
汽车诊断
ODX
车辆刷写
DoIP
ISO13400
汽车诊断
以太网
CAN
大
数据开发
常见问题
Linux磁盘百分之百的问题找到比较大的文件,然后删除大的一些日志文件sudofind/-size+100M-execls-lh{}\;&rewriteBatchedStatements=true&characterEncoding=utf-8免密yonghuALL=(root)NOPASSWD:ALL,!/usr/bin/reboot,!/sbin/reboot,!/bin/su,!/usr/b
工作变成艺术
·
2023-09-20 21:21
Hadoop
数据治理
database
mysql 查找相似数据_MySQL慢查询优化 | 联结原理
点击上方蓝色字体,选择“设为星标”回复”资源“获取更多资源大数据技术与架构点击右侧关注,大
数据开发
领域最强公众号!暴走大数据点击右侧关注,暴走大数据!
weixin_39648492
·
2023-09-20 13:04
mysql
查找相似数据
mysql显示表已存在
大
数据开发
工程师是做什么的?
大
数据开发
工程师要负责数据仓库建设、ETL开发、数据分析、数据指标统计、大数据实时计算平台及业务开发、平台建设及维护等工作内容。
我想去吃ya
·
2023-09-20 01:05
大数据
hadoop
hive
python
分布式
大
数据开发
中常用组件服务的集群管理脚本整理集合
大
数据开发
常用脚本整理集合大数据环境相关脚本bash运行模式说明创建shell脚本目录配置hostsSSH自动配置脚本文件同步、复制工具rsync基本用法文件同步脚步命令执行脚本节点循环简化大数据组件相关脚本
CodeDevMaster
·
2023-09-20 01:34
大数据
大数据
hadoop
zookeeper
flume
kafka
Docker遇到的问题汇总
Docker遇到的问题汇总进行大
数据开发
,需要虚拟一个Hadoop集群,原来都是在Win下开发的,前段时间刚换成M1pro的02021款的mbp,遇到很多很多问题,到最后也根本没有办法使用号称支持M1Mac
小菜鸡也有大佬梦
·
2023-09-19 15:35
Docker
docker
centos
linux
大数据
大
数据开发
工程师应该掌握哪些技术?
那么成为一名合格的大
数据开发
工程师,你需要掌握的技能也比较多。具体是哪些呢,你可以参看下面的这些点。
会飞的鱼go
·
2023-09-18 04:59
大
数据开发
系列(一)----Hadoop详细配置
http://www.bubuko.com/infodetail-3137033.htmlcd1、/代表根目录2、.当前目录3、..上级目录4、~当前用户的默认工作目录/../.直接返回根目录安装Linux教程:参考:https://www.cnblogs.com/frankdeng/p/9027037.htmlVMnet1对应仅主机模式VMnet8对应NAT模式以VMnet8的IP作为基础进入r
我喜欢这个感觉
·
2023-09-18 01:16
复杂SQL查询和可视化报表构建
场景介绍AnalyticDBMySQL
数据开发
流程。
阿里云云起实验室
·
2023-09-17 19:02
体验场景
可视化
数据仓库
数据库
大数据
mysql
大
数据开发
基础入门与项目实战(二)Java Web数据可视化之2.MySQL单表、约束和事务
文章目录前言1.DQL操作单表(1)DQL之排序查询(2)DQL之聚合函数(3)DQL之分组查询(4)limit关键字2.SQL约束(1)约束的介绍(2)主键约束(3)主键自增(4)非空约束(5)唯一约束(6)默认值3.数据库事务(1)事务的基本概念(2)MySQL手动提交事务(3)MySQL自动提交事务(4)MySQL事务四大特性ACID(5)MySQL事务隔离级别(6)隔离级别相关命令(7)脏
cutercorley
·
2023-09-17 19:01
大数据开发基础入门与项目实战
大数据开发
Java
Web数据可视化
MySQL单表
约束和事务
Canal:同步mysql增量数据工具,一篇详解核心知识点
老刘是一名即将找工作的研二学生,写博客一方面是总结大
数据开发
的知识点,一方面是希望能够帮助伙伴让自学从此不求人。
努力的老刘
·
2023-09-17 17:44
【大
数据开发
】2024届校招岗位汇总
公司岗位字节跳动
数据开发
工程师华晨宝马-领悦南京助理工程师-大数据华晨宝马-北京大
数据开发
工程师
德彪稳坐倒骑驴
·
2023-09-17 12:55
求职招聘
Apache Spark 在爱奇艺的应用实践
01ApacheSpark在爱奇艺的现状ApacheSpark是爱奇艺大数据平台主要使用的离线计算框架,并支持部分流计算任务,用于数据处理、数据同步、数据查询分析等场景:数据处理:在
数据开发
平台中支持开发者提交
爱奇艺技术产品团队
·
2023-09-17 09:39
apache
spark
大数据
分布式
Smart Community(1)之设计规范
通过前面大
数据开发
相关知识的学习,准备做一个项目进行练习---我给他起了一个响亮的名字:基于HadoopHA的智慧社区服务平台设计规范:做一个项目之前肯定要先规定一些开发过程中的设计规范(一)数据埋点规范
小唐同学爱学习
·
2023-09-17 02:53
bigdata
programe
设计规范
专科学历能学习大
数据开发
吗?
近来不少想转行大数据的同学在跟我的的交流中诉说到:想做IT行业,但是学历太低啦。怕花了时间和精力来学习IT相关知识,最后却找不到相应的工作,一起努力都付诸东流。对于这类学生,一般会建议他们来学习大数据,为了前沿技术,为了高薪。具体原因是什么呢,下面一起来了解一下。1.因为大数据是IT行业中比较炙热的项目,现在各个用人单位对于大数据相关的人才需求量特别的大。相关统计数据显示,未来3~5年,中国需要1
yoku酱
·
2023-09-17 01:34
DAMA-数据治理体系
数据开发
:数据的分析、设计、实施、
振宅的博客
·
2023-09-16 12:40
数据治理
大数据
数据集成:数据挖掘的准备工作之一
目前从事python爬虫、后端和大数据等相关工作,主要擅长领域有:爬虫、后端、大
数据开发
、数据分析等。
秋无之地
·
2023-09-16 06:23
数据分析
开发语言
数据分析
数据变换:数据挖掘的准备工作之一
目前从事python爬虫、后端和大数据等相关工作,主要擅长领域有:爬虫、后端、大
数据开发
、数据分析等。
秋无之地
·
2023-09-16 06:53
数据分析
数据挖掘
人工智能
学习大数据必须了解的大
数据开发
课程大纲
大
数据开发
最核心的课程就是Hadoop框架,几乎可以说Hadoop就是大
数据开发
。
大数据在说话
·
2023-09-16 04:55
大厂招人五要素
很多同学都想进入大厂或者大的甲方公司,尤其是大
数据开发
这个方向,岗位也集中在头部的这一批公司。这两年进入大厂的门槛也越来越高,那么进入这些公司有哪些条件?
王知无(import_bigdata)
·
2023-09-15 16:43
大
数据开发
:Hive DDL操作入门
今天的大
数据开发
分享,我们就先来讲讲HiveDDL操作入门。HQL的使用对于本身有SQL基础的人来说,是非常容易上手的。DDL操作,主要包括创建数据库中的对象——表、视图、索引等。Hive常用DDL
成都加米谷大数据
·
2023-09-15 11:31
数据清洗:数据挖掘的前期准备工作
目前从事python爬虫、后端和大数据等相关工作,主要擅长领域有:爬虫、后端、大
数据开发
、数据分析等。
秋无之地
·
2023-09-15 09:43
数据分析
数据分析
数据挖掘
原子指标、派生指标、衍生指标
数据指标概述-大
数据开发
治理平台DataWorks-阿里云原子指标,派生指标,衍生指标概念_一二三的小仓库的博客-CSDN博客_原子指标派生指标衍生指标
one ²⁰¹⁹
·
2023-09-15 02:32
大数据
大数据
【大数据笔记】SQL Optimizer 解析
2.
数据开发
数据开发
层次,主要技术包括Airflow、DAG等,主要工作是集群创建。3.权限管控权限管控层次,主要技术包括ApacheRanger、GDPR等,主要工作是集群创建。4.分析引擎(SQL
唐浮
·
2023-09-14 18:18
大数据学习笔记
大数据
sql
天津大数据培训学校 大数据可从事的行业
大数据培训靠谱吗随着大数据发展,市面上的大数据培训机构可谓百花齐放,有专门做大
数据开发
的、大数据分析的,但是在机构的质量上可以说是参差不齐,有好有坏,如果大家想要适合自己的大数据培训机构
qq_38453958
·
2023-09-14 15:09
大数据培训
天津大数据培训
天津大数据培训学校
天津大数据培训班
天津大数据培训机构
大数据培训
大数据培训学校
Python爬虫:如何下载懂车帝的电动车数据(完整代码)
目前从事python爬虫、后端和大数据等相关工作,主要擅长领域有:爬虫、后端、大
数据开发
、数据分析等。
秋无之地
·
2023-09-14 07:28
数据分析
python
爬虫
开发语言
Pandas模块:Python科学计算神器之一
目前从事python爬虫、后端和大数据等相关工作,主要擅长领域有:爬虫、后端、大
数据开发
、数据分析等。
秋无之地
·
2023-09-14 07:58
数据分析
pandas
python
开发语言
用户画像的设计准则以及美团外卖用户画像的设计案例
目前从事python爬虫、后端和大数据等相关工作,主要擅长领域有:爬虫、后端、大
数据开发
、数据分析等。
秋无之地
·
2023-09-14 07:58
数据分析
数据分析
用户画像
数据采集:数据挖掘的基础
目前从事python爬虫、后端和大数据等相关工作,主要擅长领域有:爬虫、后端、大
数据开发
、数据分析等。
秋无之地
·
2023-09-14 07:47
数据分析
数据分析
python
从源头解决大
数据开发
挑战
业务挑战与痛点随着互联网技术的发展、云计算技术的成熟、人工智能技术的兴起和数字化经济的崛起,数据已成为企业的核心资产。在金融行业中,数字化已成为了支撑各类业务场景的核心力量,包括个人理财、企业融资、股票交易、保险理赔、贷款服务、支付结算、投资咨询、资产管理等等。然而,在基于大数据分析与处理技术的业务建设中,当下的金融企业也面临许多挑战与不足:实时与查询性能不足,高并发支持挑战大:金融行业中常见的风
DolphinScheduler社区
·
2023-09-13 13:33
大数据
上一页
7
8
9
10
11
12
13
14
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他