大数据知识点汇总

大数据学习（60）-HDFS文件结构

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦一、体系结构HDFS是一个标准的主从(Master/Slave)
viperrrrrrr·2025-03-12 21:08

Dubbo知识点整理

Dubbo模块划分Service：服务代码的实现。Config：RPC调用的配置，如超时时间、重试、缓存。Proxy：远程调用的服务代理。Registry：注册中心，给出调用方IP。Cluster：路由层，选择调用的服务提供者，实现路由过滤和均衡负载。Monitor：监控层。Protocol：远程调用层，封装调用过程。Exchange：信息交换层，用于封装请求并模式同步、异步获取响应结果。Tran
eeeeeeeeethan·2025-03-12 21:37

Java基础教程：dubbo源码解析-服务暴露与发现

dubbo与spring的整合在了解dubbo的服务注册和服务发现之前，我们首先需要掌握一个知识点：Spring中自定义Schema。Spring自定义SchemaDubbo现在的设计是完全
传智教育·2025-03-12 20:30

Vue项目构建与启动中的版本依赖问题及解决方案

专栏导航：码农阿豪系列专栏导航面试专栏：收集了java相关高频面试题，面试实战总结️Spring5系列专栏：整理了Spring5重要知识点与
码农阿豪@新空间·2025-03-12 19:56

大数据面试之路 (三) mysql

将SparkSQL加工后的数据存入MySQL通常基于以下几个关键原因：1.数据应用场景适配OLTP与OLAP分工：SparkSQL擅长处理大数据量的OLAP（分析型）任务，而MySQL作为OLTP（事务型
愿与狸花过一生·2025-03-12 16:38

【大数据入门】第三章·数据预处理

个人主页：十二月的猫-CSDN博客系列专栏：《小白读透AI原理》_十二月的猫的博客-CSDN博客十二月的寒冬阻挡不了春天的脚步，十二点的黑夜遮蔽不住黎明的曙光目录1.前言2.为什么要进行数据预处理2.1脏数据3.数据预处理分类4.数据清理4.1数据填充4.1.1数据缺失的类型1.完全随机缺失（MissingCompletelyatRandom,MCAR）2.随机缺失（MissingatRandom
十二月的猫·2025-03-12 16:35

四补：网络部署思路-网络搭建的步骤

网络部署思路-网络搭建的步骤1.拓扑设计——IP地址的划分（子网划分、子网汇总）2.实施2.1搭建拓扑2.2底层-给左右需要配置IP地址读的网络节点，配置一个合法的IP地址2.3路由——全网可达2.4优化策略
薛定谔的码*·2025-03-12 16:04

计算机中计算排名用什么公式,最全面的Excel函数排名公式汇总

在工作中，我们很常遇到需要对销售业绩或学生成绩等进行排名。使用排序的方法可以很便捷的进行排名，但是运用函数公式可能更加方便和高大上。本文列举了关于排名的几种方法：第一部分：美式排名公式一、用RANK函数两参数用法做基础排名(默认降序排列)。特点：如果有两个数字排名相同，如下图，有两个第5名，下一名就是第7名，跳过了6。也就是说最大的次序和总数据量一致，其中的第2个第5占据了“第6”这个名次。单列成
鸦杀已尽·2025-03-12 15:30

运行PaddleOCR时遇到的一些问题汇总

官方文档提供了PaddleOCR的各类用例说明，但是使用中仍然会有一些问题，这里做一些总结和整理跑通train.py代码pythontools/train.py-cconfigs/rec/PP-OCRv3/ch_PP-OCRv3_rec_distillation.yml-oGlobal.pretrained_model=ckpt/ch_PP-OCRv3_rec_train/best_accurac
江木27·2025-03-12 15:27

DeepSeek一键生成可视化看板

一、数据可视化的重要性在大数据时代，数据的价值不言而喻。但原始数据往往是繁杂无序
CodeJourney.·2025-03-12 13:17

使用Java开发工具包会遇到哪些问题

哈喽，大家好呀，淼淼又来和大家见面啦，Java作为一门广泛应用于企业级应用、安卓开发、大数据处理等领域的编程语言，其强大的跨平台能力和丰富的类库支持吸引了无数开发者。
·2025-03-12 13:58

薄弱知识点汇总

1.%c前加空格跳过下一个字符之前的所有空白字符%x是16进制打印输出2.sizeof的返回值结果是size_t类型的，是无符号整型，用%zu最合适。3.0x是16进制的意思4.全局变量和静态变量都是放在静态区；局部变量放在栈区。全局变量、静态变量不初始化的时候，默认会被初始化为0。局部变量，不初始化，默认值是随机值。5.整型提升：表达式计算时各种整形首先要提升为int类型。有符号：根据变量的补码
好久不见gap·2025-03-12 13:47

我是学生，想要参与 OpenCloudOS，该怎么做？

近日，小云为大家汇总了一份在OpenCloudOS社区的成长攻略，并正式上线2023年OpenCloudOS校园大使招募计划。在这里，你可以深入学习Linux知识，获得导师专业指导！
·2025-03-12 13:26

Hive实用小文件合并方案

#Hive常见故障#大数据#生产环境真实案例#Hive#离线数据库#整理#经验总结说明：此篇总结hive常见故障案例处理方案结合自身经历总结不易+关注+收藏欢迎留言Hive实用小文件合并方案请往下翻！！
500佰·2025-03-12 12:45

大数据面试之路 (二) hive小文件合并优化方法

大量小文件容易在文件存储端造成瓶颈，影响处理效率。对此，您可以通过合并Map和Reduce的结果文件来处理。一、合并小文件的常见场景写入时产生小文件：Reduce任务过多或数据量过小，导致每个任务输出一个小文件。动态分区插入：分区字段基数高，每个分区生成少量数据，形成大量小文件。频繁追加数据：通过INSERTINTO多次追加数据，导致文件碎片化。二、合并小文件的核心方法方法1：调整Reduce任务
愿与狸花过一生·2025-03-12 12:11

第八课：Scrapy框架入门：工业级爬虫开发

在当今大数据时代，数据抓取已成为信息获取的重要手段。Scrapy作为一个基于Python的开源网络爬虫框架，凭借其高效、灵活的特性，在工业级爬虫开发中占据重要地位。
deming_su·2025-03-12 11:05

flink（十一）：Table&Sql实现窗口水印计算

文章目录分享说明实现讲解代码总结分享大数据博客列表说明本博客每周五更新一次。
羽落风起·2025-03-12 11:34

从0到1入门Docker（二）Windows 系统的虚拟化

课程主要学习知识点：“7个深度/3个全面”；针对Docker的知识体系，无需再查找任何其它资料。课程
农夫山泉有点甜ye·2025-03-12 11:31

从0到1入门Docker（六）Docker引擎的安装

课程主要学习知识点：“7个深度/3个全面”；针对Docker的知识体系，无需
农夫山泉有点甜ye·2025-03-12 11:31

从0到1入门Docker（七）配置国内加速器

课程主要学习知识点：“7个深度/3个全面”；针对Docker的知识体系，无需再
农夫山泉有点甜ye·2025-03-12 11:31

【LeetCode1447.最简分数】从最简分数到辗转相除法的证明及算法实现

LeetCode1447-辗转相除法LeetCode1447.最简分数题目分析知识点总结辗转相除法数字转字符串Go代码实现LeetCode1447.最简分数给你一个整数nnn，请你返回所有000到111
Lf_MrF·2025-03-12 11:00

【愚公系列】2023年10月 WPF控件专题 Path控件详解

《博客内容》：.NET、Java、Python、Go、Node、前端、IOS、Android、鸿蒙、Linux、物联网、网络安全、大数据、人
愚公搬代码·2025-03-12 09:18

51-53 CVPR 2024 | DriveWorld：通过自动驾驶世界模型进行 4D 预训练场景理解 （含模型数据流梳理）

DriveWorld在UniAD的基础上又有所成长，提升了自动驾驶目标检测、目标追踪、3D占用、运动预测及规划的性能，后期扩大数据集和调整骨干网络大小应该会
深圳季连AIgraphX·2025-03-12 08:43

智能制造中的工业大数据分析实践

智能制造中的工业大数据分析实践关键词:智能制造，工业大数据，数据分析，机器学习，深度学习，预测性维护，质量控制，生产优化文章目录智能制造中的工业大数据分析实践1.背景介绍1.1问题的由来1.2研究现状1.3
AI天才研究院·2025-03-12 08:12

Java 大视界 -- 基于 Java 的大数据可视化交互设计与实现技巧（105）

一、欢迎加入【福利社群】点击快速加入：青云交灵犀技韵交响盛汇福利社群点击快速加入2：2024CSDN博客之星创作交流营（NEW)二、本博客的精华专栏：大数据新视
青云交·2025-03-12 07:07

Java 大视界 -- Java 大数据中的时间序列数据异常检测算法对比与实践（103）

一、欢迎加入【福利社群】点击快速加入：青云交灵犀技韵交响盛汇福利社群点击快速加入2：2024CSDN博客之星创作交流营（NEW)二、本博客的精华专栏：大数据新视
青云交·2025-03-12 07:07

实施一套先进的智能摄像头服务系统。

一、项目背景随着物联网、人工智能和大数据技术的飞速发展，智能摄像头已成为家庭、企业以及公共安全领域的重要设备。其便捷、高效、智能的特点，使得市场需求日益增长。
合方圆～小文·2025-03-12 07:04

第一篇：CTF入门指南：了解CTF的基本概念与比赛形式

本系列文章将从零基础开始，逐步带你了解CTF的各个知识点，最终帮助你成为一名CTF大佬。##文章目录1.**CTF入门指南：了解CTF的基本概念与比赛
菜腿承希·2025-03-12 06:28

记一次多线程导入问题排查过程

记一次多线程导入问题排查过程1.需求2.遇到问题3.排查解决问题1.需求大数据量的核对：现在有1000个excel文件，每个excel文件内有21个sheet页，现在要对这些数据进行核对，需要先将这些数据导入到库中
程序辕日记·2025-03-12 04:07

【大数据】大数据处理-Lambda架构-Kappa架构

大数据处理-Lambda架构-Kappa架构elasticsearch-headElasticsearch-sqlclientNLPchina/elasticsearch-sql:UseSQLtoqueryElasticsearch360
weixin_33884611·2025-03-12 04:37

2024年大数据技术4：Lambda和Kappa架构区别_lambda架构和kappa架构区别，2024年最新你花了多久弄明白架构设计

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上大数据知识点，真正体系化！
2401_84182146·2025-03-12 03:32

大数据技术4：Lambda和Kappa架构区别_lambda架构和kappa架构区别(3)

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化资料的朋友，可以戳这里获取一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！Lambda架构总共由三层系统组成：批处理层（Batc
2301_76348014·2025-03-12 03:32

十条解决笔记本电脑摄像头问题方案

根据我最近的经验，可以给大家汇总了几种解决方案！（每一条我都亲身测评过了！）本人电脑联想win10系统出现问题为摄像头闪退，时而正常时而黑屏。先给大家一个摄
YOHAYOLa·2025-03-12 03:01

熬夜一星期！我把WPS的功能用Qt重写了

我收到大量粉丝提问："学完C++/Qt技术栈后，如何通过实战串联知识点？作为深耕C++/Qt领域的技术人，我始终认为通过真实项目实践是掌握技术栈的最佳方式。
十年编程老舅·2025-03-12 03:28

Java统计代码的执行时间的6种方法

Java统计代码的执行时间的6种方法前言：在日前开发中我们会遇到需要统计运行的时间但是又不想运用JMH测试框架，所以本文就汇总了一些比较常用的统计时间的测试方法，总共有6种，我做了一个大概的思维导图：方法一
码叔义·2025-03-12 02:22

自你离开后的第一篇关于MySQL和Hive开发生涯常见函数对比及SQL书写注意事项汇总

涉及到的任何SQL语句或知识点，未特别注明则表明MySQL和Hive通用。
二百四十九先森·2025-03-12 01:12

mySQL和Hive的区别

Mysql将数据存储在设备或本地系统中；2、数据更新：Hive不支持数据的改写和添加，是在加载的时候就已经确定好了；数据库可以CRUD；3、索引：Hive无索引，每次扫描所有数据，底层是MR，并行计算，适用于大数据量
iijik55·2025-03-12 00:41

MySQL和Hive SQL 时间处理常用函数汇总

文章目录一、基础时间函数二、日期加减操作三、日期格式化与解析四、时间差计算五、时间类型转换六、时区处理示例获取当前时间并格式化日期增加3天计算两个日期的天数差注意事项：以下是SQL中常用的时间处理函数汇总
Cachel wood·2025-03-12 00:06

零基础快速上手STM32开发（手把手保姆级教程）-转载学习

安装详细教程：零基础快速上手STM32开发（手把手保姆级教程）-CSDN博客部件详细教程：【STM32】江科大STM32学习笔记汇总(已完结)_stm32江科大笔记-CSDN博客
曹瑞曹瑞·2025-03-11 23:53

【时间序列聚类】从数据中发现隐藏的模式

在大数据时代，时间序列数据无处不在。无论是股票市场的价格波动、天气的变化趋势，还是用户的点击行为，这些数据都随着时间推移而产生。然而，面对海量的时间序列数据，我们如何从中提取有价值的信息？
T-I-M·2025-03-11 22:45

Deepseek结合AnythingLLM搭建个人本地智能知识库

之前通过Ollama搭建了本地Deepseek大模型对话机制，但知识点仅限于Deepseek内部的数据，且目前数据截止时间为2024年7月，如果我们询问一些专业性比较强的内容，则Deepseek也显得无能为力
曲幽·2025-03-11 22:15

1.动手学习深度学习课程安排及深度学习数学基础

.线性代数5.矩阵计算6.自动求导目标介绍深度学习景点和最新模型LeNetAlexNetVGGResNetLSTMBERT…机器学习基础损失函数，目标函数，过拟合，优化实践使用pytorch实现介绍的知识点在真实数据上体验算法效果内容深度学习基础
Unknown To Known·2025-03-11 21:09

Html5学习教程，从入门到精通， HTML5超链接应用的详细语法知识点和案例代码（18）

HTML5超链接应用的详细语法知识点和案例代码超链接（Hyperlink），也称为跃点链接，是互联网和文档编辑中的一种重要概念。
知识分享小能手·2025-03-11 20:33

LLM大语言模型项目知识点总结——Gunicorn、Flask和Docker

一、Flask框架1.1Blueprint流程：创建蓝图对象；在蓝图上定义路由和视图函数；在应用程序对象上注册蓝图(url_prefix参数指定蓝图的URL前缀)1.2CORS(app)Cross-OriginResourceSharing处理跨域的需求[email protected]_request钩子函数,在正常执行的时候插入一些东西，先执行这个东西然后再正常执行（hook）；并且先执行flas
NLP的小Y·2025-03-11 20:00

10 大中文医学数据集汇总：涵盖神农中医药、中医药古籍、医学推理、医学问答……

医疗人工智能的快速发展离不开高质量数据集的支持。从疾病诊断到药物研发，再到个性化医疗，数据集在推动机器视觉、大模型等应用于医学领域中发挥着不可或缺的作用。医学数据集的形式多样，涵盖了不同维度和领域的数据资源。例如，在疾病诊断领域，像RJUA-QA这样的问答数据集推动了复杂医学知识的自动化应用；而在中医药领域，神农中医药数据集整合了传统中医药文献、临床案例和药方数据。针对于此，本文整理了医学领域的1
·2025-03-11 20:07

中文对联/十二生肖/城市景点/旅游计划……年味超浓的数据集汇总

正月初三，年味正浓。新春的喜庆氛围不仅弥漫在大街小巷，也在人工智能领域引发了诸多创新应用。从AI生成春联，到春运交通标志的智能识别，再到生肖文化的深度挖掘，AI工具正赋能传统民俗，让年味更浓！在这阖家团圆，喜庆祥和的日子里，HyperAI超神经为大家整理了8个春节相关的数据集，涵盖对联、十二生肖、民族文化等热门主题，助力开发者在AI赋能春节的道路上大展拳脚！快来领取你的「新春大礼包」吧~点击查看更
·2025-03-11 20:07

工作流编排利器：Prefect 全流程解析

全流程解析本文系统讲解了Prefect工作流编排工具，从基础入门到高级应用，涵盖任务与流程管理、数据处理、执行器配置、监控调试、性能优化及与其他工具集成等内容，文末项目实战示例，帮助读者全面回顾Prefect知识点
船长@Quant·2025-03-11 19:26

家居巨头的觉醒，永洪科技为林氏家居开启一站式智慧决策

永洪科技与林氏家居的合作，是共同开发了一个企业级的一站式大数据分析平台。在合作多年的积累下，已逐步成为家居行业数字化转型的代表性案例。
永洪科技·2025-03-11 19:53

Hive在大数据集群下的部署

hive安装1）把apache-hive-3.1.3-bin.tar.gz上传到Linux的/opt/software目录下2）解压apache-hive-3.1.3-bin.tar.gz到/opt/module/目录下面tar-zxvf/opt/software/apache-hive-3.1.3-bin.tar.gz-C/opt/module/3）修改apache-hive-3.1.3-bin
正在绘制中·2025-03-11 18:47

搭建分布式Hive集群

title:搭建分布式Hive集群date:2024-11-2923:39:00categories:-服务器tags:-Hive-大数据搭建分布式Hive集群本次实验环境：Centos7-2009、Hadoop
逸曦玥泱·2025-03-11 18:17
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他