Spark专栏

spark streaming优点和缺点

优点：sparkstreaming会被转化为spark作业执行，由于spark作业依赖DAGScheduler和RDD，所以是粗粒度方式而不是细粒度方式，可以快速处理小批量数据，获得准实时的特性；以spark
scott_alpha·2024-09-05 15:42

前端之CSS布局

一、前言我们来继续更新CSS的内容，往期的内容可以到前端专栏里去看，也可以点下面的链接HTML常用内容：https://blog.csdn.net/AWSDN/article/details/136112174spm
Violet永存·2024-09-05 14:08

【AIGC】Whisper语音识别模型概述，应用场景和具体实例及如何本地搭建Whisper语音识别模型？

所属的专栏：TensorFlow项目开发实战，人工智能技术主页：我们的天空一、Whisper语音识别模型概述Whisper是由Ope
@我们的天空·2024-09-05 12:27

重复的力量

2018年12月第一次遇见李笑来老师在得到的专栏《通往财富自由之路》，从此仿佛进入到一个新世界，刷新了自己很多认知，养成了一些小习惯，加入007这个社群，生活上虽然没有说天翻地覆的变化，可是很多认知一旦刷新了
小旋风1307·2024-09-05 12:51

Spark

Spark是一个快速的、通用的集群计算系统，主要用于大规模数据处理。它最早由加州大学伯克利分校的AMPLab开发，并于2010年开源，后来由Apache软件基金会管理。
傲雪凌霜，松柏长青·2024-09-05 11:20

Windows系统下的Spark环境配置

一：Spark的介绍ApacheSpark是一个开源的分布式大数据处理引擎，它提供了一整套开发API，包括流计算和机器学习。
eeee~~·2024-09-05 11:19

备战2024数学建模国赛（模型四）：动态规划优秀案例（一）基于蒙特卡洛模拟的眼科病床安排排队模型

专栏内容(赛前预售价99，比赛期间299):2024数学建模国赛期间会发布思路、代码和优秀论文。
2024年数学建模国赛·2024-09-05 10:11

kafka消费者重复消费同一个topic

场景是sparkstreaming消费kafka数据在这里sparkstream和kafka都是单节点的集群模式。同时起两个不同的groupid的应用，发现会发生后起来的应用消费不到数据。
小琳ai·2024-09-05 10:06

Hbase BulkLoad用法

要导入大量数据，Hbase的BulkLoad是必不可少的，在导入历史数据的时候，我们一般会选择使用BulkLoad方式，我们还可以借助Spark的计算能力将数据快速地导入。
kikiki2·2024-09-05 07:29

Python 元组

本文内容：Python元组更多内容请见Python入门基础专栏Python字符串Python常用字符串方法Python元组创建元组tuple函数圆括号多重赋值元组特性单个元素的元组可以省略的圆括号不可变性为什么需要元组除了两个方面
小嗷犬·2024-09-05 07:15

5 Docker flile

原文阅读：【巨人肩膀社区·专栏·分享】5Dockerflile官方地址：https://docs.docker.com/reference/dockerfile/vimbusyboxfile创建文件编写内容
atbigapp.com·2024-09-05 03:26

局部路径规划专栏之9.2：基于Frenet车道线坐标系，采用解耦mini_jerk的插值优化进行局部规划（附C++代码）

系列文章目录提示：这里可以添加系列文章的所有文章的目录，目录需要自己手动添加TODO:写完再整理文章目录系列文章目录前言一、第一步：Frenet车道线坐标系介绍及坐标转换1、frenet坐标系介绍（1）Frenet坐标的定义（2）ST图（纵向速度规划）（3）SL图（横向位移规划）（4）frenet坐标系的横纵向误差定义（5）为什么要用Frenet坐标系做轨迹优化2、坐标系相互转换的方法1.笛卡尔坐
盒子君~·2024-09-05 02:48

statsmodels专栏7——深度探索：Python中的Statsmodels库因果推断

目录写在开头1差分法1.1差分法的基本原理1.2使用Statsmodels进行差分法分析2断点回归分析2.1断点回归分析的概念2.1.1基本思想2.1.2断点回归数学模型2.1.3实现原理2.2利用Statsmodels进行断点回归分析3仪器变量法3.1仪器变量法的基本概念3.2仪器变量法的数学原理3.3仪器变量法的一般步骤3.4使用Statsmodels进行仪器变量法建模3.5仪器变量法与多元线
theskylife·2024-09-05 02:14

EMR组件部署指南

本文将详细介绍如何部署EMR的主要组件,包括:JDK1.8ElasticsearchKafkaFlinkZookeeperHBaseHadoopPhoenixScalaSparkHive准备工作所有操作都在
ivwdcwso·2024-09-05 00:05

【最新华为OD机试E卷】日志采集系统(100分)多语言题解-(Python/C/JavaScript/Java/Cpp)

本系列打算持续跟新华为OD-E/D卷的三语言AC题解ACM金牌️团队|多次AK大厂笔试｜编程一对一辅导感谢大家的订阅➕和喜欢最新华为OD机试D卷目录，全、新、准，题目覆盖率达95%以上，支持题目在线评测，专栏文章质量平均
春秋招笔试突围·2024-09-04 21:46

9.2 spark内存管理之 UnifiedMemoryManager

图片来源https://www.ibm.com/developerworks/cn/analytics/library/ba-cn-apache-spark-memory-management/index.html1
GongMeng·2024-09-04 20:46

Sublime text3+python3配置及插件安装

rayson_666(Rayson开发分享)个人专研技术方向：微服务方向：springboot,springCloud,Dubbo分布式/高并发：分布式锁，消息队列RabbitMQ大数据处理：Hadoop,spark
raysonfang·2024-09-04 19:23

github源码指引：共享内存、数据结构与算法：字符串池StringPool

初级代码游戏的专栏介绍与文章目录-CSDN博客我的github：codetoys，所有代码都将会位于ctfc库中。已经放入库中我会指出在库中的位置。
初级代码游戏·2024-09-04 14:31

基于Java+SpringMvc+Vue求职招聘系统详细设计实现

基于Java+SpringMvc+Vue求职招聘系统详细设计实现作者主页网顺技术团队欢迎点赞收藏⭐留言文末获取源码联系方式查看下方微信号获取联系方式承接各种定制系统精彩系列推荐精彩专栏推荐订阅不然下次找不到哟
网顺技术团队·2024-09-04 13:27

使用PotPlayer播放器查看软解和硬解4K高清视频时的CPU及GPU占用情况

视频的软解与硬解4、使用PotPlayer查看4K高清视频软解和硬解时的CPU占用情况4.1、使用软解时CPU和GPU占用情况4.2、使用硬解时CPU和GPU占用情况5、最后VC++常用功能开发汇总（专栏文章列表
dvlinker·2024-09-04 11:12

【K8s】专题十三：Kubernetes 容器运行时之 Docker 与 Containerd 详解

如果对您有帮助，烦请点赞、关注、转发、订阅专栏！
行者Sun1989·2024-09-04 09:31

java.io.InvalidClassException(spark任务运行失败）

背景：客户集群内偶尔会出现java.io.InvalidClassException:org.apache.kudu.spark.kudu.KuduRDD;localclassincompatible:
LATASA·2024-09-04 09:30

开发团队如何应对突发的技术故障与危机：策略与实践

博客主页：倔强的石头的CSDN主页Gitee主页：倔强的石头的gitee主页⏩文章专栏：《热点时事》期待您的关注目录引言一、快速响应与问题定位策略1.建立紧急响应团队2.利用自动化监控工具3.快速定位问题源头
倔强的石头_·2024-09-04 08:27

使用pgrs在wsl中为postgres写拓展

duckdb,zombodb,datafusion等等产品都是数据组合流思路体现,把这套功法练到大成,处于2024年,综合数据规模/相应速度/和数据应用层解耦,就有了一个最佳答案.比以前hadoop,spark
wangmarkqi·2024-09-04 03:19

小仙女读书笔记 Powerful Sleep有效睡眠读书笔记

在这个专栏中，我会分享我平时读书的心得，也给大家推荐一些我读到的好书，希望可以给大家带来帮助。
教英语的小孙·2024-09-04 01:41

Python编码系列—Python中的安全密码存储与验证：实战指南

探索专栏：学步_技术的首页——持续学习，不断进步，让学习成为我们共同的习惯，让总结成为我们前进的动力。技术导航：人工智能：深入探讨人工智能领域核心技术。自动驾驶：分享自动
学步_技术·2024-09-04 00:32

切片上传记录

核心就是1前端分片2后端组装3md5校验Spark-md5介绍用md5就是为了防止文件被篡改，小的文件直接可以用整个文件传入，返回文件md5，但是越大的文件（超过2G),如果用整文件的方式，时间会很久，
Miya_Ye·2024-09-04 00:32

大数据新视界--大数据大厂之MySQL 数据库课程设计：数据安全深度剖析与未来展望

本博客的精华专栏：Ja
青云交·2024-09-03 23:00

阿里云服务器内存型r7、r8a、r8y实例区别参考

这几个实例规格，相比于活动内的经济型e、通用算力型u1实例来说，这些实例规格等性能更强，与计算型和通用型相比，它的内存更大，因此这些内存型实例规格主要适用于数据库、中间件和数据分析与挖掘，Hadoop、Spark
阿里云最新优惠和活动汇总·2024-09-03 22:41

【AI模型：追求全能还是专精？】

博客主页：倔强的石头的CSDN主页Gitee主页：倔强的石头的gitee主页⏩文章专栏：《热点时事》期待您的关注目录引言编辑一：AI模型的全面评估和比较二：AI模型的专精化和可扩展性三：AI模型的合理使用和道德规范写在结尾引言近年来
倔强的石头_·2024-09-03 15:34

Python编码系列—Python日志记录与监控：提升应用可观测性的关键技术

探索专栏：学步_技术的首页——持续学习，不断进步，让学习成为我们共同的习惯，让总结成为我们前进的动力。技术导航：人工智能：深入探讨人工智能领域核心技术。自动驾驶：分享自动
学步_技术·2024-09-03 14:59

Python编码系列—Python调试秘籍：pdb调试工具的实战应用

探索专栏：学步_技术的首页——持续学习，不断进步，让学习成为我们共同的习惯，让总结成为我们前进的动力。技术导航：人工智能：深入探讨人工智能领域核心技术。自动驾驶：分享自动
学步_技术·2024-09-03 14:59

Python编码系列—Python性能分析神器：cProfile的深度应用与实战案例

探索专栏：学步_技术的首页——持续学习，不断进步，让学习成为我们共同的习惯，让总结成为我们前进的动力。技术导航：人工智能：深入探讨人工智能领域核心技术。自动驾驶：分享自动
学步_技术·2024-09-03 14:29

【经验分享】软考-高级系统架构师经验分享

linux问题排查实战专栏，分享了作为公司专家，在解决内存、性能、各类死机等疑难问题的排查经验，认真学习可以让你在日后工作中大放光彩。
努力努力再努力～～·2024-09-03 13:54

【华为OD机试真题E卷】524、 新工号中数字的最短长度、工号不够用了怎么办？ | 机试真题+思路参考+代码解析（E卷复用）（C++、Java、Py）

文章目录一、题目题目描述输入输出样例1样例2样例3二、代码与思路参考C++语言思路C++代码Java语言思路Java代码Python语言思路Python代码作者：KJ.JK订阅本专栏后即可解锁在线OJ刷题权限个人博客首页
KJ.JK·2024-09-03 13:22

hive学习记录

Hive将HQL（HiveQueryLanguage）转化成MapReduce程序或其他分布式计算引擎（如Tez、Spark）的任务进行计算。
2302_80695227·2024-09-03 12:46

课程37：Docker持久化部署（数据库、日志、配置文件）

前言本文是《.NetCore从零学习搭建权限管理系统》教程专栏的课程（点击链接，跳转到专栏主页，欢迎订阅，持续更新…）专栏介绍：以实战为线索，基于.Net7+REST+Vue、前后端分离，不依赖任何第三方框架
编程乐趣·2024-09-03 10:38

C++程序使用 STL 容器发生异常的常见原因分析与总结

更隐蔽的遍历STL列表删除元素时引发越界的场景5、多线程同时操作STL列表时没有加锁导致冲突6、对包含STL列表对象的结构体进行memset操作导致STL列表对象内存出异常7、最后VC++常用功能开发汇总（专栏文章列表
dvlinker·2024-09-03 09:32

2024年计算机毕业设计2000个热门选题推荐之NodeJS篇——全行业Java项目定制asp.net代做Python安卓NodeJS等

✌精彩专栏推荐订阅以防找不到✌项目界面文字不会改？项目代码不懂？怕老师问？项目没有软件？不会运行？
itszkt计算机项目源代码·2024-09-03 08:54

计算机毕业设计hadoop+spark知识图谱房源推荐系统 房价预测系统 房源数据分析 房源可视化 房源大数据大屏 大数据毕业设计 机器学习

5.四种推荐算法(协同过滤基于用户、物品、SVD混合神经网络、MLP深度学习模型)6.线性回归算法预测房价7.Python爬虫采集链家数据8.AI短信识别9.百度地图API10.lstm情感分析11.spark
计算机毕业设计大全·2024-09-03 07:05

深入理解JavaScript闭包：避免常见的内存泄漏问题

聚沙成塔·每天进步一点点本文回顾⭐专栏简介深入理解JavaScript闭包：避免常见的内存泄漏问题1.引言2.什么是闭包？
几何心凉·2024-09-03 07:46

Spark - SQL查询文件数据

那么我们可以利用spark-sql直接操作文件的特性处理这类的需求，姐姐再也不用担心我不会spark了，因为我就只会sql。使用方法csvspark.sql("select*fromcsv.
kikiki5·2024-09-03 07:39

3.2 寻址方式

微机原理考点专栏（通篇免费）欢迎来到我的微机原理专栏！我将帮助你在最短时间内掌握微机原理的核心内容，为你的考研或期末考试保驾护航。为什么选择我的视频？
命运之光·2024-09-03 03:22

2.6 时序与总线操作

微机原理考点专栏（通篇免费）欢迎来到我的微机原理专栏！我将帮助你在最短时间内掌握微机原理的核心内容，为你的考研或期末考试保驾护航。为什么选择我的视频？
命运之光·2024-09-03 03:52

3.4 数据传送指令

微机原理考点专栏（通篇免费）欢迎来到我的微机原理专栏！我将帮助你在最短时间内掌握微机原理的核心内容，为你的考研或期末考试保驾护航。为什么选择我的视频？
命运之光·2024-09-03 03:18

【AIGC】ChatGPT 3.5/4.0 新手使用手册

所属的专栏：TensorFlow项目开发实战，人工智能技术主页：我们的天空一、基本介绍ChatGPT是一种高级的语言模型，能够生成类
@我们的天空·2024-09-03 00:59

基于Java+SpringBoot+vue+elementui的校园文具商城系统详细设计和实现

Java+SpringBoot+vue+elementui的校园文具商城系统详细设计和实现作者主页网顺技术团队欢迎点赞收藏⭐留言文末获取源码联系方式查看下方微信号获取联系方式承接各种定制系统精彩系列推荐精彩专栏推荐订阅不然下次找不到哟
网顺技术团队·2024-09-03 00:28

Spark-submit提交任务的常用参数

#参数名称#含义--clusterc3prc-hadoop#--masterMASTER_URL#可以是spark://host:port,mesos://host:port,yarn,yarn-cluster
liuzx32·2024-09-02 20:22

遥感之智能优化算法大纲介绍

介绍近年来在遥感及人工智能领域研究比较火热的智能优化算法，其中被广泛使用的比如粒子群算法和遗传算法等，在遥感领域，比如高光谱特征选择，机器学习超参数优化等方向有众多的应用，除了提到了两个算法之外，还有众多其他算法，本专栏基于
遥感-GIS·2024-09-02 19:33

遥感之机器学习树集成模型-CART算法之回归

主要分为如下几部分：回归概念描述回归树中数据集的划分准则CART回归树的原理和流程CART回归树的核心代码前面内容可参考：遥感之机器学习树模型专栏1回归概念机器学习中的回归建模以及相应的回归算法，在遥感领域对应的就是定量遥感分方向
遥感-GIS·2024-09-02 19:03
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他