大数据开发常用技术

统一观测丨使用 Prometheus 监控 E-MapReduce，我们该关注哪些指标？

EMR简介开源大数据开发平台E-MapReduce（简称“EMR”）作为大数
阿里云云栖号·2023-03-23 21:58

大数据开发必读书目（持续更新）

在这里插入图片描述1.HadoopHadoop大数据开发案例教程与项目实战.pdfHadoop技术内幕深入解析YARN架构设计与实现原理.pdfHadoop技术内幕深入理解MapReduce架构设计与实现原理
鄙人王道长·2023-03-23 21:00

我的新书《Flink大数据分析实战》出版啦

本书基于Flink1.13.X最新版本编写，作为Flink的入门书，主要使用函数式编程语言Scala进行讲解，知识面比较广，涵盖了当前整个Flink生态系统主流的大数据开发技术。
大数据张老师·2023-03-23 20:54

大数据行业怎么样？真的好找工作么？

大数据开发主要是负责大数据挖掘，大数据清洗处理，大数据建模等，负责大规模数据的处理和应用，工作以开发为主与大数据可视化分析工程师相互配合，从数据中挖掘出价值为企业业务发展提供支持。大数据开发做什么？
我想去吃ya·2023-03-23 11:49

零基础学习大数据可以找到工作么？

每年都有大量的人才涌入到大数据行业中，对于现在刚刚入场大数据开发技术的人来说，现在还有机会吗？
我想去吃ya·2023-03-23 11:49

都说大数据就业好，为什么数据分析这么难就业？

大数据和数据分析还是两个不同的方向的哈~大数据开发做什么？大数据开发分两类，编写Hadoop、Spark的应用程序和对大数据处理系统本身进行开发。
我想去吃ya·2023-03-23 11:49

大数据方向学习方向和目标

一、学习目标企业级大数据工程师实训以Java，Python，数据库，Linux为技术基础，提高学员大数据开发技术水平及综合素质为根本目标。
小白保姆·2023-03-23 07:13

室内定位中非视距的识别和抑制算法研究综述（部分）

源自：控制与决策作者：齐小刚陈谌李芷楠针对存在非视距(non-line-of-sight,NLOS)的室内定位算法进行研究.首先描述室内定位中的常用技术和算法(航迹推算、指纹识别定位、邻近探测、极点定位
m0_72579657·2023-03-23 07:11

浅谈 Spark 在大数据开发中的一些最佳实践

一、字段名规范‍字段名应足够简洁清晰，使阅读者能快速理解字段内容。相似字段名应加上数据源、级别名、细分属性加以区分，例如我们有Google的click数据和内部的click数据，那么就应该使用PARTNER_CLICK,INTERNAL_CLICK来命名不同的点击数据。二、业务字典对于公司已有统一命名的专业术语，应采用此命名方式，例如GMB。对于公司级别命名并未统一的专业术语，在domain或te
Python知识大全·2023-03-22 17:50

Nginx进阶使用-负载均衡原理及配置实例

介绍跨多个应用程序实例的负载平衡是一种用于优化资源利用率，最大化吞吐量，减少延迟和确保容错配置的常用技术。
谁主沉浮oo7·2023-03-22 14:56

两年车间技术员转型大数据开发，说说转型这点事儿

在6月份找的我规划学习路线，8月份就收了联想等offer了，可见学习毅力之强大，目前在广州的某大型银行做大数据开发。折腾转型,我不要你觉得，我要我觉得--黄晓明大家好，我是黄晓明。
程序员峰哥·2023-03-22 04:24

太牛了，在GitHub上“千金难求”的SpringBoot趣味实战课免费分享

MyBatisPlus、SpringDataJPA、SpringSecurity、Quartz等主流框架，整合了MySQL、Druid、Redis、RabbitMQ、Elasticsearch等互联网常用技术与中间件
Java编程日记·2023-03-21 14:26

太牛了！在GitHub上“千金难求”的SpringBoot趣味实战课免费分享

MyBatisPlus、SpringDataJPA、SpringSecurity、Quartz等主流框架，整合了MySQL、Druid、Redis、RabbitMQ、Elasticsearch等互联网常用技术与中间件
退休的汤姆·2023-03-21 14:54

太牛了，GitHub下载量100000份的SpringBoot趣味实战课免费分享

MyBatisPlus、SpringDataJPA、SpringSecurity、Quartz等主流框架，整合了MySQL、Druid、Redis、RabbitMQ、Elasticsearch等互联网常用技术与中间件
Java面试那些事儿·2023-03-21 14:16

Spark2.x精通：TaskScheduler的Task任务提交源码剖析

微信公众号：大数据开发运维架构关注可了解更多大数据相关的资讯。
大数据开发运维架构·2023-03-19 18:04

大数据开发：Azkaban和Oozie调度系统对比

今天的大数据开发分享，我们就主要来讲讲Azkaban和Oozie调度系统对比。所谓DAG工作流类调度系统，这一类系统的方向，重点定位于任务的调度依赖关系的正确处理，分片执行的逻辑通常不是系统关注的
成都加米谷大数据·2023-03-19 09:10

纠结做大数据开发？大数据运维？还是大数据分析？

经常有同学在后台留言问我，自己觉得大数据行业薪资很高，想往大数据方向发展，但不知道该学哪些知识，应该具备的技能树是啥样的。迷茫和焦虑都要溢出屏幕了……如果觉得薪资高就业好，想往大数据方向发展，也不是不可以。那么你的专业是计算机相关专业？还是数学/统计专业？再不然工程专业，就是想转行干IT？那你对计算机的兴趣是什么呢？我列举下大数据岗位有哪些，你可以根据你的兴趣来找对应关系：对操作系统、硬件、网络
BigDataSam·2023-03-18 07:32

商业数据分析入门笔记——以双十一优惠券案例为例

大数据的职业蓝图话说大数据这几年非常火爆、既有营销体系的商业数据分析职位，也有研发体系的大数据开发工程师，像产品经理一样，只要你有心，都可以有自己的发展道路。
卷毛角大丁·2023-03-17 22:19

重磅发布- Java商城秒杀系统的设计与实战视频教程（SpringBoot版）

值得介绍的是，本课程在技术栈层面涵盖了前端和后端的大部分常用技术，包括SpringBoot、
steadyjack·2023-03-17 17:44

大数据架构进阶目录

从事了多年的大数据开发，不甘心一直做小罗罗，希望在更上一层。
风轻云淡lq·2023-03-17 10:13

大数据培训课程分享：Python数据分析与挖掘实战课程介绍

《Python数据分析与挖掘实战》课程内容以Python数据分析与挖掘的常用技术与真实案例相结合的方式，深入浅出地介绍Python数据分析与挖掘的重要内容，共分为基础篇（第1~5章）和实战篇（第6~11
泰迪智能科技·2023-03-16 07:31

《高性能JavaScript》第七章 Ajax

7.1.1请求数据五种常用技术向服务器请求数据：XMLHttpRequest(XHR)DynamicscripttaginsertioniframesCometMultipa
一修锅锅·2023-03-15 14:04

选择java大数据开发方向学习，应该怎么规划学习路线

Java是目前使用广泛的编程语言之一，具有的众多特性，特别适合作为大数据应用的开发语言。Java语言功能强大和简单易用，不仅吸收了C++语言的各种优点还摒弃了C++里难以理解的多继承、指针等概念。Java跨平台应用能力，比C、C++更易用更容易上手。同时还具有简单性、面向对象、分布式、健壮性、安全性、平台独立与可移植性、多线程、动态性等特点。但Java语言也仅是大数据技术体系下的一个技术选型，Py
我想去吃ya·2023-03-15 11:07

使用AntdPro创建基于React的管理后台（学习笔记5）对最新版本antd V5.0后台管理鉴权/权限的研究（内容有较大的简化，适用初学者，文末有参考来源）

常用技术简单介绍1.HTTPBasicAuthentication：用的比较少，平常FTP登录用的这种方式，可以用在内部网系统。2.session-cookie：
FS9000·2023-03-15 08:36

大数据开发 - Java入门5

目录标题流程控制语句1、Scanner输入语句2、分支语句2.1if-else2.2switch-case2.3while循环流程控制语句1、Scanner输入语句顺序结构：从上到下，一步步执行importjava.util.Scanner;publicclassTestone{publicstaticvoidmain(String[]args){Scannerinput=newScanner(S
海星？海欣！·2023-03-14 16:02

马蜂窝毕博：分析完这9点工作原理，我们最终选择了 Apache SeaTunnel！

incubator-seatunnel讲师简介毕博马蜂窝数据工程师在10月15日，ApacheSeaTunnel&IoTDB联合Meetup期间，马蜂窝网数据工程师毕博给大家介绍了SeaTunnel的基本原理和相关企业实践思考、马蜂窝大数据开发调度平台典型场景下的痛点和优化思考
SeaTunnel·2023-03-14 15:58

软件测试读书笔记（佟伟光著）3

静态白盒测试人工检测代码非语法类错误，常用技术包括：代码检查法、静态结构分析法。
NJUST江波·2023-03-14 00:14

大数据工程师、BI工程师、数据库工程师什么区别？

大数据开发工程师、BI工程师、数据仓库工程师、ETL工程师、有什么区别？今天我们来看一位大神如何解释。BI,商务智能。BI工程师即为从事商务智能行业的工程师。
傲娇的程序媛·2023-03-13 00:09

监控体系

和端口进行进行心跳监控可能存在假死的情况第三层：服务可用性监控，通过定时任务，调用线上服务，检查可用性用于解决第二层假死的情况第四层：服务准确率监控，对于爬虫这种场景，对结果进行校验用于解决某些个别爬虫有问题的情况常用技术
蜘蛛和蚂蚁·2023-03-12 15:14

大数据开发-Spark-RDD的持久化和缓存

1.RDD缓存机制cache,persistSpark速度非常快的一个原因是RDD支持缓存。成功缓存后，如果之后的操作使用到了该数据集，则直接从缓存中获取。虽然缓存也有丢失的风险，但是由于RDD之间的依赖关系，如果某个分区的缓存数据丢失，只需要重新计算该分区即可。涉及到的算子：persist、cache、unpersist；都是Transformation缓存是将计算结果写入不同的介质，用户定义可
Hoult-吴邪·2023-03-12 08:36

自学Python迷茫了怎么办

Python是当前流行程度比较高的全场景编程语言，可以用于Web开发、大数据开发、人工智能开发和嵌入式开发等
甜茸·2023-03-12 02:53

大数据开发-分布式文件系统HDFS

HDFS,全称HadoopDistributedFileSystem,意思是分布式文件系统。Hadoop分布式文件系统是指被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。大数据处理的主要应用场景包括数据分析、数据挖掘与机器学习。数据分析主要使用Hive、SparkSQL等SQL引擎完成；数据挖掘与机器学习则有专门的机器学习框架TensorFlow、Mahout以
jason_syf·2023-03-11 15:59

大数据开发：Hadoop与Spark如何设计容错

今天的大数据开发学习分享，我们就来讲讲Hadoop与Spark是如何设计容错的？一般来说，关于容错，最朴素的想法就是通过下面的步骤实现状态与容错：①暂停所有数据的接收。
成都加米谷大数据·2023-03-11 14:08

使用VNC远程连接Ubuntu - 内网穿透实现公网远程办公

本人的技术路线从Java全栈工程师一路奔向大数据开发、数据挖掘领域，如今终有小成，愿将昔日所获与大家交流一二，希望对学习路上的你有所助益。
一头小山猪·2023-03-11 01:03

javaweb开发后端常用技术_java后端开发需要掌握什么技术

一、ServletServlet技术是Java后端的重要技术之一，作为JavaWeb开发的核心组件，Servlet承担了WebMVC结构中的核心作用(功能导航)。传统的Model2结构(Servlet+JavaBean+JSP)虽然在目前已经很少使用了，但是Web开发的基本结构依然没有改变。Servlet技术的应用涉及到Web容器、会话(HttpSession)、安全、同步、Web应用部署等相关内
顾新用·2023-03-10 19:39

挑战海量数据：基于Apache DolphinScheduler对千亿级数据应用实践

点亮⭐️Star·照亮开源之路GitHub:https://github.com/apache/dolphinscheduler精彩回顾近期，初灵科技的大数据开发工程师钟霈合在社区活动的线上Meetup
DolphinScheduler社区·2023-03-10 15:11

MySQL集群Cluster详解（一）——基本原理

一、MySQL集群Cluster原理MySQLCluster是MySQL集群的一种常用技术，适合于分布式计算环境下高冗余高实用版本。
永远是少年啊·2023-03-10 13:44

Java从入门到精通一步到位

课程主要有以下几个特点：•从事云计算、大数据开发工作必备技能•6大阶段，26门免费课程，871课时，助您全面掌握Java开发技能•每阶段包含初、中、高三个难度等级考试，全方位自测掌握
Java架构蒙塔·2023-03-09 21:45

大数据开发和大数据分析应该怎么选择？

主要还是看你个人的兴趣和未来的发展方向，下面给你罗列一下大数据开发和数据分析都是做什么的以及需要掌握哪些技能，然后你自己再选择一下喜好的方向~大数据开发主要是负责大数据挖掘，大数据清洗处理，大数据建模等
我想去吃ya·2023-03-01 07:17

Java面向对象之封装(二)

Java日报部门：**大数据开发六部姓名：cqmfx(阡陌飞絮)日期：2020.10.31大纲一、成员变量和局部变量的初始化二、类的加载内存图三、值传递和引用传递四、方法的递归，斐波那契数列五、包装类，
cqmfx·2023-02-28 22:30

大数据开发学习之Spark系统架构解读

今天的大数据开发学习分享，我们来对Spark系统架构做一个详细的介绍。Spark性能优势的原因Spark是UCBerkeleyAMPlab所开源的类HadoopMapReduce的通用并行框
加米谷大数据张老师·2023-02-26 07:18

女生学习大数据专业未来前景怎么样

而据第三方职友集最新统计，大数据开发人才的平均薪资可以达到30-50k，随着工作经验的增加，薪资更是可以轻
我想去吃ya·2023-02-24 18:29

2021年末大盘点。IT行业那些薪资高前景好的岗位，你知道几个？

大数据开发工程师从每年公布的IT从业人员薪金调查中可以看出，大数据从业人员面临巨大缺口。目前的两
银盾泰安·2023-02-22 09:05

神策沙龙回顾：大数据技术和金融、房产、理财的深度结合

12月17日，由神策数据和极客帮、InfoQ共同策划的技术沙龙在中关村成功举办，来自诸葛找房、神策数据、91金融和51理财的技术专家分享了大数据开发场景，建模，结果应用，扩展等技术内容，全面展示互联网金融
神策数据·2023-02-22 02:37

JavaWab开发的总括以及HTML知识

一、Web开发的总括在这里我来给大家介绍一下Wab开发需要配合哪些前后端的对应语言:首先是Java(Java通常的工作):Wab开发android开发大数据开发另外,Wab开发想要学好就需要配合之前博客中的内容
zyx22334·2023-02-20 23:43

防抖与节流：教你倾听时插话的技巧

什么是防抖与节流防抖和节流是处理“过于频繁”发生的事情的常用技术。想象一下，你和朋友见面，朋友正在给你讲一个故事，但他们说话时很难停下来。
·2023-02-20 22:32

字节跳动广告场景使用的“ClickHouse”介绍

近两年针对大数据的开发工具开启了开源大潮，为大数据开发者提供了多个选择，但是也增加了开发者选择合适的工具的难度。尤其是新入行的开发者，会增加很大的学习成本，框架
IT巅峰技术·2023-02-18 15:05

学生心理辅导

第3部分对心理辅导的常用技术做了一个简单的介绍。第一部分，心理辅导概述第一个问题：什么是心理健康？按照1946年国际心理大会上的标准。
KiPlu·2023-02-18 11:50

深入浅出聊Taier—大数据分布式可视化DAG任务调度系统

袋鼠云数栈大数据开发专家、Taier项目主导人偷天为大家带来了《Taier入门介绍》的分享，我们将直播精华部分做了整理，带大家再次回顾内容，加深技术细节的了解。
数栈DTinsight·2023-02-18 06:07

大数据开发面试题目

Hadoop介绍MapReduce的运行过程，shuffle过程如果在现场，我可以手绘MapReduce从InputFormat到OutputFormat的流程，一边画图一边说。如果讲到环形缓冲区那里，是不是有很多调优的方式.combiner也可以考虑讲一下。Hadoop集群的搭建过程至少自己集群的配置.框架的技术选型是不是都要清楚的明明白白。Hadoop优化HDFS小文件的影响.输入输入时的小文
QLchuan·2023-02-17 18:06
上一页 14 15 16 17 18 19 20 21 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他