大数据学习-核心基础

大数据学习（五）：如何使用 Livy提交spark批量任务--转载

Livy是一个开源的REST接口，用于与Spark进行交互，它同时支持提交执行代码段和完整的程序。Livy封装了spark-submit并支持远端执行。启动服务器执行以下命令，启动livy服务器。./bin/livy-server这里假设spark使用yarn模式，所以所有文件路径都默认位于HDFS中。如果是本地开发模式的话，直接使用本地文件即可（注意必须配置livy.conf文件，设置livy.
zuoseve01·2025-01-19 22:15

大数据学习（四）：Livy的安装配置及pyspark的会话执行

一个基于Spark的开源REST服务，它能够通过REST的方式将代码片段或是序列化的二进制代码提交到Spark集群中去执行。它提供了以下这些基本功能：提交Scala、Python或是R代码片段到远端的Spark集群上执行；提交Java、Scala、Python所编写的Spark作业到远端的Spark集群上执行；提交批处理应用在集群中运行。从Livy所提供的基本功能可以看到Livy涵盖了原生Spar
猪笨是念来过倒·2025-01-19 21:08

每日重温Java核心基础之--面向对象编程中的接口

一、什么是接口接口是抽象方法的集合，通常用interface关键字声明。一个类通过实现接口的方式，从而继承接口的抽象方法。接口主要用于定义一组规范，规定实现接口的类必须遵循的契约。二、接口的语法interface名称[extends其他的接口名]{//声明变量//抽象方法intgetMoney();}例如：interfaceIPay{intgetMoney();}三、接口的特点方法都是抽象方法：接
不夜尘·2025-01-19 00:29

【大数据学习 | kafka】kafka的组件架构

broker:每个kafka的机器节点都会运行一个进程，这个进程叫做broker，负责管理自身的topic和partition，以及数据的存储和处理，因为kafka是集群形式的，所以一个集群中会存在多个broker，但是kafka的整体又不是一个主从集群，需要选举出来一个broker节点为主节点，管理整个集群中所有的数据和操作，以及所有节点的协同工作。每个broker上面都存在一个controll
Vez'nan的幸福生活·2025-01-18 10:30

2024年处理器终极攻略：理清思路，精准选购！

随着科技的不断进步，数据中心作为数字经济时代的核心基础设施，正经历着前所未有的变革。
·2025-01-17 19:32

2024年信创操作系统排行榜：行业格局与发展趋势分析

信创操作系统作为国内信息技术自主创新的重要组成部分，不仅是国家战略中的关键技术，也是企业数字化转型中的核心基础设施之一。
Lalolander·2025-01-17 17:37

大数据学习记录，Java基础（3）

面向对象面向对象的特征：封装随着系统越来越复杂，类会越来越多，那么类之间的访问边界必须把握好，面向对象的开发原则要遵循“高内聚、低耦合”，而“高内聚，低耦合”的体现之一：高内聚：类的内部数据操作细节自己完成，不允许外部干涉；低耦合：仅暴露少量的方法给外部使用，尽量方便外部调用封装可以认为是一个保护屏障，防止该类的代码和数据被其他类随意访问，加强了代码的安全性。隐藏对象内部的复杂性，只对外公开简单和
灵敏的迅捷蟹·2025-01-16 18:46

大数据学习笔记——zookeeper在hadoop集群中的作用

zookeeper主要是用来搭建高可用的Hadoop集群，即HighAvailability，简称(HA)测试中集群是可以不需要高可用的，即使用一个namenode即可。但是在生产环境中为了提高集群的可靠性，需要增加一个namenode备用，当active的namenode挂了之后，系统会启动standby的namenode。这就需要zookeeper监控namenode的状态。
鹅鹅鹅呢·2025-01-16 17:08

BAT大牛的大数据学习之路！

在这里相信有许多想要学习大数据的同学，大家可以+下大数据学习裙
数据工程师金牛·2025-01-16 16:32

大数据学习｜理解和对比 Apache Hive 和 Apache Iceberg

文章目录数据模型与存储事务支持性能优化使用场景总结数据模型与存储Hive:Hive使用的是传统的关系型数据模型，数据存储在Hadoop分布式文件系统(HDFS)中，通常是以文本格式（如CSV或TSV）或者二进制格式（如Parquet或ORC）。Hive的表定义和元数据存储在一个外部的关系数据库中，如MySQL，用于跟踪表结构、分区和其他元数据信息。Iceberg:Iceberg设计为一个现代的表格
进击的小白菜·2024-09-04 16:50

感动小六领读《领导力》

六哥）领读《领导力》直播开启的头1小时37分收到了宅急送小哥带来的李海峰老师新书《领导力》距离第一次遇见海峰老师已经2年三个月13天当年的回忆片段跃然纸上，感动依旧……#要感动笔记#1.要点：*领导力的核心基础
江南錫·2024-08-29 06:46

Python大数据学习day01——大数据开发概论

目录大数据概念大数据特点大数据应用场景大数据分析业务步骤大数据职业规划大数据学习路线1.大数据解决问题海量数据存储——海量数据运算——海量数据迁移2.大数据特点（大、多、值、快、信）数据体量大种类和来源多源化实现低价值密度速度快数据的质量准确可信
笨小孩124·2024-08-28 12:46

大数据学习路线基础指南‌

对于想要投身这一领域的学习者来说，‌制定一份清晰、‌系统的大数据学习路线是至关重要的。‌
一马什么梅一·2024-08-27 23:24

探索网络安全的深度与广度：挑战、策略与未来展望

一、引言在当今数字化的时代，网络已经成为社会运转的核心基础设施之一。从个人的日常通信、娱乐到企业的业务运营、国家的关键服务，几乎所有领域都依赖于网络。
白袍无涯·2024-08-24 03:37

以输出为主体的课堂变革

以输出为主体的课堂变革——乡村优秀校长培训心得九（2020年11月22日分享第427篇）滑县小规模学校联盟小田小学杜冠鹏今天听了华南师范大学王红教授的《从输入为本到输出为本的范式变革:给予核心基础的教学实践创新
激流扬帆·2024-02-19 23:01

学习大数据开发，需要满足哪些条件？学历，性别，专业有限制吗？

大数据学习是不是很难，零基础能学会吗？我是女生，可以学习大数据技术吗？下面我们针对这些问题来一一作答！
yoku酱·2024-02-19 23:22

001kafka源码项目gradle报错UnsupportedClassVersionError-kafka-报错-大数据学习

1报错提示java.lang.UnsupportedClassVersionError:org/eclipse/jgit/lib/AnyObjectIdhasbeencompiledbyamorerecentversionoftheJavaRuntime(classfileversion55.0),thisversionoftheJavaRuntimeonlyrecognizesclassfile
gaog2zh·2024-02-19 22:39

总结了零基础学习Java编程语言的几个基础知识要点

千锋重庆Java教程分享Java4大核心基础，很多Java编程初学者在刚接触Java语言程序的时候，不知道该学习掌握哪些必要的基础知识。
爱穿格子衫的程序猿·2024-02-14 07:03

零基础自学Java教程，如何全面系统掌握Java核心知识点？

如何自学Java还能全面系统地掌握Java核心基础知识是每个Java自学者的共同目标，也是我们打好Java基础的关键。千丈之堤，以蝼蚁之穴溃；百尺之室，以突隙之烟焚。
牛仔码农@·2024-02-14 07:32

Vue核心基础6：Vue内置指令、自定义指令、生命周期

1Vue中的内置指令constvm=newVue({el:'#root',data:{n:1,m:100,name:'Vue',str:'你好'}})1.1v-text1.2v-html1.3v-cloak1.4v-once初始化的n值:{{n}}当前的n值:{{n}}加11.5v-preVue其实很简单的当前的n值:{{m}}当前的n值:{{m}}加12自定义指令【代码】自定义指令当前的n值:放
是小蟹呀^·2024-02-13 13:40

Vue核心基础4：绑定样式、条件渲染、列表渲染

1绑定样式【代码】绑定样式.basic{width:200px;height:100px;background-color:pink;}.normal{background-color:skyblue;font-size:larger;border:1pxsolidblack;}.sad{border-radius:10px;}testtest11test{{name}}{{name}}const
是小蟹呀^·2024-02-13 13:10

Vue核心基础5：数据监测、收集表单数据、过滤器

1数据监测【代码】总结学生信息年龄+1添加性别属性，默认值为男修改性别在朋友列表首位添加一个朋友修改第一个朋友的名字为：小章添加一个爱好修改第一个爱好为：吃饭姓名：{{student.name}}----年龄：{{student.age}}性别：{{student.sex}}朋友姓名：{{fr.name}}-----年龄：{{fr.age}}爱好{{h}}//实现后添加的数据也能有响应式的功能co
是小蟹呀^·2024-02-13 13:10

Vue核心基础3：计算属性和监视属性

1计算属性这边以姓名案例，来介绍计算属性名：-->姓：名：全名：{{fullName}}constvm=newVue({el:'#root',data:{firstName:'张',lastName:'三'},//计算属性computed:{//1.完整写法fullName:{//get有什么作用？当有人读取fullName时，get就会被调用，且返回值就作为fullName的值get(){//g
是小蟹呀^·2024-02-13 13:09

python+大数据学习打卡day1

【大数据从0-1打卡-day1】1、简单了解一些关于大数据的概念数据：数据就是对客观事件进行记录并可以鉴别的符号。他不仅仅是指数字，还可以是有一定意义的字母、文字、符号、语音、文字、图画、视频或者这些元素的结合等。企业数据分析方向：现状分析：离线分析原因分析：实时分析预测分析：机器学习数据分析基本流程：采集、处理、分析、应用大数据：大数据(bigdata)，指的是所涉及的资料量规模巨大到无法透过主
岁月不静好456·2024-02-13 11:11

「云原生可观测团队」获选「InfoQ 年度技术内容贡献奖」

云原生通过提供大规模多元算力的高效供给，可观测成为业务创新的核心基础设施，加速智能化创新。这一过程离不开开发者、企业、厂商、机构、媒体的持续推动产业演进与不计回报的知识分享。
·2024-02-13 11:42

好书推荐《儿童自然法则》

30:33通过教学辅助工具，让孩子更好地学习32:16如何培养孩子智力发展的核心基础能力？
用以致学的简单·2024-02-13 10:54

Vue核心基础1：数据代理

1回顾Object.defineProperty方法letstr='hello'constperson={name:'张三',age:18}Object.defineProperty(person,'sex',{//value:'男',//enumerable:true,//控制属性是否可以枚举，默认值是false//writable:true,//控制属性是否可以被修改，默认值是false//c
是小蟹呀^·2024-02-13 08:58

100条安全原则来制定安全策略

零信任原则，白名单登录；加密原则，加密是安全的核心基础；其他才是CIA。抓包是攻击的核心
网络安全进阶·2024-02-11 17:07

大数据基础必备，大数据是什么？

大数据学习群：199427210百科对于大数据是这样解释的：麦肯锡全球研究所给出的定义是：一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，具有海量的数据规模、快速的数据流转
大数据05·2024-02-11 08:31

2022-12-1晨间日记

2.日常生活中拍出不一样的大片•走进手机摄影的世界•培养用摄影的眼光观察世界•手机摄影常见误区•手机摄影必备核心基础（常规概念
九九聊·2024-02-11 06:41

自学大数据：大数据学习线路及各阶段学习书籍

大数据学习路线及各阶段学习书籍推荐！
yoku酱·2024-02-09 21:46

Spring核心基础：全面总结Spring中提供的那些基础工具类！

内容概要SpringFramework提供了众多实用的工具类，这些工具类在简化开发流程、提升代码质量和维护性方面发挥了重要作用，以下是部分关键工具类的总结及其使用场景：StringUtils：不仅提供了基础的字符串操作，如拼接、拆分、大小写转换，还包含了更高级的功能，如检查字符串是否为空或只包含空白字符，在开发中，这可以避免空指针异常，并简化字符串的预处理工作。CollectionUtils：当处
程序员古德·2024-02-09 03:26

学习大数据需要掌握哪些知识？

1、学习大数据首先要学习Java基础怎样进行大数据学习的快速入门？学大数据课程之前要先学习一种计算机编程语言。Java是大数据学习需要的编程语言基础，因为大数据的开发基于常用的高级语言。
大数据学习01·2024-02-07 15:16

「云原生可观测团队」获选「InfoQ 年度技术内容贡献奖」

云原生通过提供大规模多元算力的高效供给，可观测成为业务创新的核心基础设施，加速智能化创新。这一过程离不开开发者、企业、厂商、机构、媒体的持续推动产业演进与不计回报的知识分享。
阿里云云原生·2024-02-07 06:15

大数据学习入门级书籍推荐，零基础小伙伴们关注一下吧

《大数据分析：点“数”成金》大数据学习入门级书籍推荐你现在正坐在一座金矿之上，这些金子或被深埋于备份、存档数据之中，或正藏在你眼前的数据集里，它们是提升公司效益、拓展新的商业关系、制订更直观决策的秘诀所在
kuntoria·2024-02-06 18:45

AQS简介、AQS实现原理、线程夺取锁失败 AQS队列的变化、线程被唤醒时 AQS队列的变化

AQS是JUC并发包中的核心基础组件，其本身是一个抽象类。
_蓝天IT_·2024-02-06 07:12

2021-11-07大数据学习日志——MySQL进阶——报表项目

01_数据表介绍学习目标了解项目使用的数据表结构及表关系课程使用微软的Northwind数据集,零售业务，包含了客户，供应商和订单数据。原始数据集可以在微软GitHub仓库下载。为了满足课程需求，数据库数据在原始数据基础上做了微调。基于此份数据，我们将通过SQL来创建数据报表，满足业务需求。1.1数据表整体概览1.2员工表(employees)保存员工基本信息，包含如下字段：employee_id
王络不稳定·2024-02-06 03:03

防火墙和IPS有什么区别

防火墙目前主流使用状态检测功能来检查报文链路状态的合法性，丢弃链路状态不合法的报文，核心基础是会话状态。
ordersyhack·2024-02-06 00:39

【Java知识手册】二.Java核心基础

2Java核心基础我想和自己说：学习是反复的过程，学习新知识的时候要仔仔细细阅读，错过一个关键词，可能对知识就会有偏差的理解。如果现在没有心情，收藏起来，后面用到的时候再仔细看。希望有帮助。
Fred3D·2024-02-05 17:55

Java面试核心基础知识之Java基础

Java基础`针对常用的Java基础知识展开详细的介绍，具体包含Java的集合、异常分类及处理、反射机制、注解、内部类、泛型、序列化集合Java基础一、集合1、List：可重复2、Queue3、Set：不可重复4、Map二、异常分类及处理1、Java语言如何进行异常处理？2、Java异常中关键字：throws、throw、try、catch、finally分别如何使用？3、请写出几种常见到的运行时
不称职的程序员❦·2024-02-05 05:04

Java面试核心基础知识之并发编程

Java面试核心基础知识之并发编程文章目录Java面试核心基础知识之并发编程一、基础知识1、并发编程的优点?2、并发编程的缺点?3、并发编程三要素?4、出现线程安全原因?5、并行和并发区别？
不称职的程序员❦·2024-02-05 05:04

大数据学习之Redis，十大数据类型的具体应用（五）

目录3.9Redis地理空间（GEO）简介原理Redis在3.2版本以后增加了地理位置的处理哦命令命令实操如何获得某个地址的经纬度3.9Redis地理空间（GEO）简介移动互联网时代LBS应用越来越多，交友软件中附近的小姐姐、外卖软件中附近的美食店铺、高德地图附近的核酸检査点等等，那这种附近各种形形色色的XXX地址位置选择是如何实现的?地球上的地理位置是使用二维的经纬度表示，经度范围(-180,1
十二点的泡面·2024-02-04 05:37

量化学习：大数据时代的学习方式

关键词：量化学习；大数据；《地平线报告》（高等教育版）在这里相信有许多想要学习大数据的同学，大家可以+下大数据学习裙：740041381，即可免费领取套系统的大数据学习教
weixin_44387107·2024-02-03 13:10

逻辑门器件替代选型，点击查看~

技术详情一、逻辑门电路简介数字电路是现代电子技术的核心基础，广泛应用在计算机、通信、控制等领域。
芯智雲城·2024-02-03 12:17

大数据是什么？华为云学院带你探索大数据之旅

展开我们本次的大数据学习之旅！大数据是什么，内容将包括大数据的产生，发展大数据的基本概念。首先我们来追溯一下大数据的产生与发展，大数据的产生和发展主要经历了三个阶段。第一个阶段，我们称为是萌芽期！
舒意从生·2024-02-03 08:53

零基础学Python之核心基础知识

1.Python入门简介（1）什么是PythonLifeisshort,youneedPython！人生苦短，我用PythonPython是一个高层次的结合了解释性、编译性、互动性和面向对象的脚本语言。Python的设计具有很强的可读性，相比其他语言经常使用英文关键字，其他语言的一些标点符号，它具有比其他语言更有特色语法结构。从排行榜中可以看出，近两年Python的编程热度提升迅猛，目前已经在第一
互联网小阿祥·2024-02-03 01:49

大数据学习(32)hive优化方法总结

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦Hive优化主要从以下几个方面考虑：数据倾斜：对于数据倾斜问题，
viperrrrrrr·2024-02-01 12:08

大数据学习之Redis，十大数据类型的具体应用（四）

3.8Redis基数统计（HyperLogLog）需求统计某个网站的UV、统计某个文章的UV什么是UVuniqueVisitor，独立访客，一般理解为客户端IP大规模的防止作弊，需要去重复统计独立访客比如IP同样就认为是同一个客户需要去重考虑用户搜索网站的关键词的数量统计用户每天搜索不同词条个数是什么？去重复统计功能的基数估计算法-就是HyperLogLogRedisHyperLogLog是用来做
十二点的泡面·2024-02-01 11:02

OceanBase与新加坡南洋理工大学合作，推进机器学习与数据库技术融合

作为一所世界级的科研密集型大学，南洋理工大学是世界顶尖大学之一，在学术研究、教育教学方面始终引领前沿，并持续关注核心基础软件数据库的技术发展与应用实践。数据库应用程序广泛使用参数化查询
CSDN云计算·2024-02-01 10:41

真正国产的最良心的SSH工具，可能是唯一已具备替代SecureCRT、XShell、MobaXTerm等国外核心基础工具的软件，强烈推荐

VxTerm是一款由本人于2023年9月推出的第一款，用C++语言编写的国产化的、纯绿色无依赖单文件、免费的无需注册无任何功能限制的、多线程多窗口多会话管理的、用以替代SecureCRT、XShell、MobaXTerm、puTTy等国外软件的支持Telnet、SSH、Serial串口、SFTP图形化文件上下传的、远程网络设备、安全设备、服务器连接操作的超级终端仿真工具。优点：1、内置独立创造的V
不了阁-飞哥·2024-01-31 19:39
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他