spark内核

国产芯片CW32L010兼容代替STM8S003

CW32L010是基于eFlash的单芯片低功耗微控制器，集成了主频高达48MHz的ARM®Cortex®-M0+内核，ZUI高主频能够达到48MHz、高速嵌入式存储器（多至64K字节FLASH和多至4K
西城微科方案开发·2025-05-08 18:10

FreeRTOS开发框架全解析：从基础架构到实战应用

FreeRTOS开发框架全解析：从基础架构到实战应用FreeRTOS作为一款轻量级、开源的实时操作系统内核，在嵌入式领域占据着重要地位。
阿牛的药铺·2025-05-08 16:24

Linux 驱动开发步骤及 SPI 设备驱动移植示例

创建驱动框架：依据Linux内核提供的驱动模型，搭建驱动的基本结构。对于字符设备驱动，需定义structcdev结构体，并实现其初始化函数、设备注册与注销函数
前进的程序员·2025-05-08 15:50

Spark 之 metrics

//sql/core/src/main/scala/org/apache/spark/sql/execution/aggregate/HashAggregateExec.scala:“peakMemory
zhixingheyi_tian·2025-05-08 14:13

Spark 之 printSchema

printSchemaspark/sql/core/src/main/scala/org/apache/spark/sql/Dataset.scala/***Printstheschematotheconsoleinanicetreeformat
zhixingheyi_tian·2025-05-08 14:42

Spark external shuffle service

yarnexternalshuffleservice参考链接：https://mp.weixin.qq.com/s/ZggMnX2r4uj8TrzUPTMLhQhttps://mp.weixin.qq.com/s/jY9KawiTLTV7jiO9DJOAZQ?poc_token=HF3gGmijj7mldjK-AIVa1TcjYrdbHRDLTBiju00Dshuffle过程包括shufflere
zhixingheyi_tian·2025-05-08 14:42

【Spark】【第三章】 Spark运行环境

Spark作为一个分布式数据处理框架和计算引擎，被设计在所有常见的集群环境中运行:1.本地模式所谓的Local模式，就是不需要其他任何节点资源就可以在本地执行Spark代码的环境1.1本地模式的安装配置将
败给你的黑色幽默丶·2025-05-08 14:41

甲骨文云服务器技术全景解析：从基础架构到行业赋能

其技术实现包含三大核心模块：虚拟化引擎：基于KVM内核级虚拟化技术，物理服务器被切割为可动态分配的虚拟单元，支持C
国际云·2025-05-08 13:35

大数据技术全景解析：Spark、Hadoop、Hive与SQL的协作与实战

本文将通过通俗类比+场景化拆解，带你深入理解四大关键技术：Hadoop、Hive、Spark和SQL，揭秘它们如何像“仓储-物流-管理”系统一样协同工作。
V文宝·2025-05-08 12:32

RDD有哪几种创建方式

-**Python示例**：```pythonfrompysparkimportSparkContext#创建SparkContext对象sc=SparkCon
痕517·2025-05-08 10:52

freertos应用-任务创建

1FreeRTOS概述FreeRTOS是一款广泛应用于嵌入式设备的实时操作系统(RTOS)内核，已被移植到35种不同的微控制器平台。
数贾电子科技·2025-05-08 10:51

scala连接mongodb_Spark教程（二）Spark连接MongoDB

如何导入数据数据可能有各种格式，虽然常见的是HDFS，但是因为在Python爬虫中数据库用的比较多的是MongoDB，所以这里会重点说说如何用spark导入MongoDB中的数据。
weixin_39688035·2025-05-08 09:13

spark读取mongodb数据配置

原文出处：http://blog.csdn.net/omrapollo/article/details/66968147引入依赖创建方法见上一篇博客：Spark+IntelliJIDEA创建项目引入如下依赖
Maximilian_M·2025-05-08 09:41

移植PWM蜂鸣器驱动到GEC2440开发板

设置好交叉编译工具链，内核是前面移植的2.6.32.8版本，在原来移植修改后的基础上进入下面操作。
fgq1990·2025-05-08 07:03

6818 蜂鸣器驱动

/mk-k编译内核驱动相关的命令：modinfobeepDriver.ko查看驱动信息rmmodgec6818_beep卸载驱动insmodbeep.ko安装驱动源文件编译驱动的Makefile需要指定
扣篮发型不乱·2025-05-08 07:32

GEC6818蜂鸣器驱动开发

beep_drv.c:#include<linux/module.h>//包含了加载模块时需要使用的大量符号和函数声明#include<linux/kernel.h>//包含了printk内核打印函数等函数声明
SeasonedDriverDG·2025-05-08 07:01

RDMA协议原理与零拷贝高吞吐网络通信实践

在传统的网络通信中，数据传输需要经过多个步骤，包括操作系统内核的上下文切换、数据在用户空
学习ing1·2025-05-08 04:16

RDMA高性能网络通信实践

RDMA高性能网络通信实践一、背景介绍二、方法设计A.实现方案B.关键技术点三、代码及注释四、注意事项一、背景介绍远程直接内存访问（RDMA）技术通过绕过操作系统内核和CPU直接访问远程内存，实现了超低延迟
Hi20240217·2025-05-08 04:15

数据分析项目中的关键技术与工具

大数据技术：涵盖Hadoop（HDFS）、Hive、Spark、Fli
王子良.·2025-05-08 03:12

Linux驱动开发: Linux下RTC实时时钟驱动

Linux内核版本:3.51.1Linux下RTC时间的读写分析1.1.1系统时间与RTC实时时钟时间Linux系统下包含两个时间：系统时间和RTC时间。
DS小龙哥·2025-05-08 01:55

手表关于MPU6050中的功能实现

以下是对睡眠和唤醒机制的详细分析：内核休眠/唤醒功能实现MPU6050有两个主要功能来控制其电源状态：voidMPU_Sleep(){MPU_Write_Byte(MPU_PWR_MGMT1_REG,0x48
solomonzw·2025-05-08 01:24

大数据毕业设计PySpark+Hadoop航班延误预测系统 航班可视化

1.选题背景和意义（1）选题背景在旅行规划中，机票价格一直是旅客关注的重点。机票价格的波动不仅受季节、航线、航空公司等因素的影响，还受到市场供求关系、经济形势等因素的影响。因此，通过对机票价格进行预测分析，可以帮助旅客选择更合适的出行时间和机票购买策略，从而节省旅行成本。（2）意义提高乘客购票决策：基于Hadoop的飞机票价格预测能够提供乘客准确的价格预测信息，帮助他们选择合适的购票时间和最优的价
QQ21503882·2025-05-08 01:24

《大数据： Spark Standalone 模式配置历史服务器》

一、配置历史服务器1.上一篇说到Standalone集群模式时候客户端看不到信息，driver:8081虽然能看到日志和结果，但是体验非常差2.spark-shell本身就是客户端模式，这个是改不了为cluster
HarkerYX·2025-05-08 00:52

Spark 配置历史服务器

类似Hadoop，Spark也有自己的historyserver，这里我们就来配置下：修改spark-defaults.conf.template文件名为spark-defaults.confmvspark-defaults.conf.templatespark-defaults.conf
涵sir·2025-05-08 00:51

spark配置历史服务

1：配置spark-default.conf文件,开启Logcpspark-defaults.conf.templatespark-defaults.conf在spark-defaults.conf文件中
都教授2000·2025-05-08 00:51

Spark集群搭建之Yarn模式

什么是SparkONYarn模式SparkonYARN（YetAnotherResourceNegotiator）是Spark框架在Hadoop集群中运行的一种部署模式，它借助HadoopYARN来管理资源和调度任务
lix的小鱼·2025-05-07 23:46

深入探索 Spark RDD 行动算子：功能解析与实战应用

在大数据处理领域，ApacheSpark以其高效的分布式计算能力脱颖而出，而RDD（弹性分布式数据集）作为Spark的核心概念，为数据处理提供了强大的抽象。
麻芝汤圆·2025-05-07 23:16

在 Sheel 中运行 Spark：开启高效数据处理之旅

在大数据处理领域，ApacheSpark凭借其强大的分布式计算能力，成为了众多开发者和企业处理海量数据的首选工具之一。
麻芝汤圆·2025-05-07 23:45

奔跑吧Linux内核初识

我要成为linux内核大牛。是的，开启我的旅程吧。Linux内核奔跑卷第一章处理器体系结构。简单的介绍ARM32和ARM6
颖念·2025-05-07 23:44

STM32MP157A单片机移植Linux驱动深入版

leds节点，其有3个gpio属性，分别表示PE10对应led1，PF10对应led2，PE8对应led3，设备树键值对如下：leds{led1-gpio=;led2-gpio=;led3-gpio=;};内核驱动实现对灯控模块的初始化函数
Johnson Sheng·2025-05-07 21:00

WSL2编译使用6.6版本内核

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言一、有什么变化二、下载6.6内核三、开始编译1.安装环境2.开始编译四、使用1.杀死虚拟机2.防止内核文件3.修改配置文件总结前言最近出了一件不大不小的事
洛克希德马丁·2025-05-07 15:25

深入理解高性能网络通信：从内核源码到云原生实践

深入理解高性能网络通信：从内核源码到云原生实践（示意图：Linux网络协议栈与通信架构分层模型）随着互联网业务规模的不断扩大，系统对网络通信性能的要求也在迅速提升。
北漂老男人·2025-05-07 14:16

Spark应用部署模式实例

Local模式新启动一个终端SparkSubmit#pyspark命令启动的进程，实际上就是启动了一个Spark应用程序SparkStandalone模式讲解：6321SecondaryNameNode
qrh_yogurt·2025-05-07 14:43

深入理解高性能网络通信：从内核源码到云原生实践

深入理解高性能网络通信：从内核源码到云原生实践前言随着互联网业务规模的高速增长，服务端网络通信能力成为系统性能的核心瓶颈。如何支撑百万级连接、在极限场景下实现低延迟高吞吐？
北漂老男人·2025-05-07 14:13

OpenHarmony（鸿蒙南向开发）——标准系统内核（Linux）

OpenHarmony选择Linux内核作为基础内核，可以对不同资源受限的设备产品配置出适合的OS内核，为上层提供基础的操作系统能力。
OpenHarmony_小贾·2025-05-07 12:02

嵌入式openharmony标准鸿蒙系统驱动开发基本原理与流程

第一：鸿蒙概述OpenHarmony采用多内核（Linux内核或者LiteOS）设计，支持系统在不同资源容量的设备部署。
嵌入式开发星球·2025-05-07 12:00

Linux gpio-mockup 虚拟GPIO设备安装与使用指南

Linuxgpio-mockup虚拟GPIO设备安装与使用指南1.简介gpio-mockup是Linux内核自带的一个虚拟GPIO控制器驱动，适用于开发、测试和CI环境下无真实GPIO硬件时的GPIO相关功能验证
Bigbig.·2025-05-07 12:29

小白学习驱动开发20250506

内核空间和用户空间数据交换write()方法：从用户空间读取数据到内核空间，然后在内核中处理这些数据。read()方法：把数据从内核复制到用户空间中。
打倒焦虑·2025-05-07 12:59

Docker单机部署Doris超详细图文教程

1、先修改内核参数在启动doris的be时，需要将Linux操作系统的内核参数设置为2000000，这里是Doris官方要求的。
人间味是清欢·2025-05-07 11:58

Spark读取HDFS加密区数据乱码问题解决

因为项目需求，需要启用hdfs加密区，为了验证对现有程序的影响，我在自己的集群上配置了加密区，并测试spark和java程序读取数据。
蹩脚法师·2025-05-07 11:58

虚拟机启动hdfs、spark命令

说明：用的案例是一个master，两个worker，开启三台虚拟机的情况，已配置好hadoop和spark。
一只菜鸟A·2025-05-07 11:28

基于 kubeconfig 认证的 k8s 用户账号创建案列

系统环境：AnolisOSrelease8.8内核版本：LinuxKernel5.10.134-13.an8.x86_64Kubernetes版本：v1.28.3创建证书签名请求1
JiaWen技术圈·2025-05-07 10:23

Linux内核与模块管理的深入探索

Linux内核与模块管理的深入探索背景简介在Linux操作系统中，内核是整个系统的核心，它负责管理系统资源，包括文件系统、内存、进程、设备和硬件设备。
征途阿韦·2025-05-07 09:46

Spark Shuffle参数调优的原理与建议

文章目录Shuffle对性能消耗的原理详解SparkShuffle过程中影响性能的操作：Spark压缩算法的比较如何调优Spark配置参数的源码详解(Spark2.3)spark.shuffle.managerspark.reducer.maxReqsInFlight
聆听金生·2025-05-07 08:36

Spark 中 Join 操作的实现原理与源码分析

在ApacheSpark中，Join操作是用于合并两个数据集（DataFrame或RDD）的常见操作。它允许我们通过某一共同字段或键，将两个不同的数据集组合起来。
goTsHgo·2025-05-07 07:34

Spark 系列——Spark的Shuffle原理

目录一、基本介绍1.1Lineage1.2窄依赖1.3宽依赖二、SparkShuffle的原理2.1ShuffleManager2.2ShuffleWriter2.2.1BypassMergeSortShuffleWriter
fseast·2025-05-07 07:34

Spark，所用几个网页地址

hadoop的三大组成：1.HDFS：存储。文件上传，下载2.MapReduce：计算。词频统计，流量统计3.YARN：调度HistoryServer网址：192.168.56.100:18080HDFS的NameNode网址：http://hadoop100:9870YARN的ResourceManager网址：http://hadoop101:8088
Amu_Yalo·2025-05-07 07:33

Spark 的 Shuffle 机制：原理与源码详解

ApacheSpark是一个分布式数据处理框架，专为大规模数据分析设计。其核心操作之一是Shuffle，这是一个关键但复杂的机制，用于在某些操作期间在集群中重新分配数据。
goTsHgo·2025-05-07 07:33

大数据领域分布式存储的分布式社交数据处理

从分布式存储架构设计、数据分片策略、一致性协议等核心概念出发，结合MapReduce/Spark分布式计算框架，解析社交数据处理中的高并发、低延迟、高可用技术挑战。通过Python代码实现数
大数据洞察·2025-05-07 07:30

整理CreateProcessW

这次学习主要参考三个资料：1.Windows2000源代码2.毛德操老师的《Windows内核情景分析》3.一个大佬的博客:https://bbs.pediy.com/thread-114611.htm
weixin_30455067·2025-05-07 04:18
上一页 24 25 26 27 28 29 30 31 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他