spark内核

Spring笔记（一）

Spring是分层的JavaSE/EE应用full-stack轻量级开源框架，以IOC（InverseOfControl：反转控制）和AOP（AspectOrientedProgramming：面向切面编程）为内核
m0_75227909·2024-08-23 04:15

3.2 内核初始化(盘古开天地)

InterruptPipeline系列文章大纲-CSDN博客3.2.1内核初始化的神话Linux内核的初始化流程，很多文章都有分析，自己也学习了很多次，总是感觉记忆不深刻。
aspirestro三水哥·2024-08-23 04:12

2024.08.07校招 实习 内推 面经

2025秋季校园招聘正式启动（内推）校招|旷视科技2025秋季校园招聘正式启动（内推）2、校招|华为智能座舱产品部2025校园招聘校招|华为智能座舱产品部2025校园招聘3、校招|蔚来2025届SuperSparks
内推君SIR·2024-08-23 01:26

【Linux 事件驱动模型】selet/epoll 里程碑意义记录

文章目录关键思想Epoll关键流程关键思想在Linux内核中，当使用select/epoll系统调用等待事件发生时，内核会使用poll_wait函数将当前进程添加到等待某个事件的等待队列中。
Michael_Good·2024-08-23 00:49

04.并发和互斥.md

使用机器指令完成互斥4.4操作系统层面的软件互斥4.4.1信号量4.4.2二元信号量4.4.3信号量的强弱4.4.4信号量的实现4.4.4管程4.4.4.1管程的定义4.4.4.2管程的组成4.5linux内核并发机制
夜月行者·2024-08-22 22:08

【手写数据库内核组件】0501多线程并发模型，任务分发多工作者执行架构实现，多线程读写状态时volatile存储类型使用技巧

0501多线程管理专栏内容：postgresql使用入门基础手写数据库toadb并发编程个人主页：我的主页管理社区：开源数据库座右铭：天行健，君子以自强不息；地势坤，君子以厚德载物.文章目录0501多线程管理一、概述二、原理与机制三、多条流水线的工厂3.1Worker信息结构定义3.2工厂的结构定义3.3工厂的建立四、分发任务五、执行任务六、总结结尾一、概述现代的CPU都会采用多个core的形式具
韩楚风·2024-08-22 20:29

spark学习资料

AdvancedApacheSpark-SameerFarooqui(Databricks)”(https://www.youtube.com/watch?
Liam_ml·2024-08-22 16:24

linux内存相关

Linux内核内存申请的方式有哪些？内核申请内存的接口，如下介绍。
chengwei_peng·2024-08-22 13:48

riscv简单常用汇编指令xv6

entry.Smretasmvolatilereadcsrwritecsrriscv常见csr寄存器ecall,系统调用指令cpu执行异常处理指令的三种事件异常处理相关寄存器用户态trapsret指令页表切换操作用户态系统调用过程总结内核态
耶耶耶耶耶~·2024-08-22 13:46

Spark MLlib模型训练—分类算法Multilayer Perceptron Classifier

SparkMLlib模型训练—分类算法MultilayerPerceptronClassifierMultilayerPerceptronClassifier（多层感知器分类器，简称MLP）是SparkMLlib
猫猫姐·2024-08-22 12:39

内核入门——4 龙芯架构——4.2 ~ 4.

4.2运行特权等级龙芯架构定义了4个特权等级：PLV0~PLV3。数字越小，特权等级越高。对于Linux系统来说，架构中仅PLV0级可对应核心态，建议以PLV3级对应用户态。4.3寄存器4.3.1通用寄存器4.3.1.132个通用寄存器龙芯架构，共有32个通用寄存器，记作：r0~r31。其中：r0寄存器只读，且读出来恒为0。r1寄存器，是BL指令默认的目的寄存器。其他寄存器从龙芯架构的角度用法和用
十三香炖猪肉·2024-08-22 11:34

每天一个数据分析题（四百九十三）- 主成分分析与因子分析

主成分载荷矩阵D.解释方差比例数据分析认证考试介绍：点击进入题目来源于CDA模拟题库点击此处获取答案数据分析专项练习题库内容涵盖Python，SQL，统计学，数据分析理论，深度学习，可视化，机器学习，Spark
跟着紫枫学姐学CDA·2024-08-22 11:34

每天一个数据分析题（四百九十一）- 主成分分析与因子分析

最小方差正交旋转D.最大方差正交旋转数据分析认证考试介绍：点击进入题目来源于CDA模拟题库点击此处获取答案数据分析专项练习题库内容涵盖Python，SQL，统计学，数据分析理论，深度学习，可视化，机器学习，Spark
跟着紫枫学姐学CDA·2024-08-22 11:33

Linux外设接口使用及内核驱动开发---Ubuntu搭建Linux内核开发环境

文章目录前言一、安装依赖二、下载Linux内核源代码1.从Github下载2.从官网下载三、编译安装内核配置内核编译安装内核/模块：选用内核四、内核驱动例子前言进行Linux嵌入式系统开发时，如果还没有嵌入式系统的开发环境
Jason.rr·2024-08-22 09:21

Linux学习（1）系统常见的目录、文件类型及权限、操作指令

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档一、系统常见的目录1.目录结构Linux系统的根目录结构是一颗倒状的树2.常见的目录1）根目录/2）存放系统的内核（与系统启动有关的文件）
weixin_71180088·2024-08-22 05:25

Amazon EFS：云端弹性文件系统的多元化应用场景

应用：Hadoop、Spark等大数据框架优势：高
ivwdcwso·2024-08-22 04:51

DeepSpeed与Megatron的区别和联系

DeepSeedDeepSeed代表性功能MegatronMegatron代表性功能备注GPU底层优化有开创性的全栈GPU内核设计FP6量化更牛逼FusedCUDAKernels毕竟Megatron是Nvidia
爱串门的小马驹·2024-08-22 04:16

Apache Paimon：实时湖仓架构构建工具

实时湖仓架构构建工具paimonApachePaimonisalakeformatthatenablesbuildingaRealtimeLakehouseArchitecturewithFlinkandSparkforbothstreamingandbatchoperations
乔如黎·2024-08-22 03:15

探索实时湖仓架构的新星：Apache Paimon

ApachePaimonpaimonApachePaimonisalakeformatthatenablesbuildingaRealtimeLakehouseArchitecturewithFlinkandSparkforbothstreamingandbatchoperations
幸愉旎Jasper·2024-08-22 03:39

Linux性能调优指南(1)：聚焦CPU性能与缓存优化策略

了解缓存结构2.2.缓存预热2.3.数据布局和访问模式优化2.4.使用性能分析工具2.4.1.perf的安装2.4.2.perf的基本使用2.4.3.perf的高级功能2.4.4.perf的工作原理2.5.调整内核参数
星鬼123·2024-08-22 02:38

MAP REDUCE

ApacheSpark：可以整合进Hadoop，取代MapReduce的框架
Xiao_die888·2024-08-22 01:58

Docker学习之路【一】开篇

简介Docker是一个开源的应用容器引擎，它使用Go语言开发，并基于Linux内核的cgroup、namespace以及UnionFS等技术，对应用进程进行封装隔离，使其独立于宿主机和其他进程。
HootinVip·2024-08-21 22:09

微软Edge浏览器全解析：功能、特点与使用技巧

基于Chromium内核，Edge不仅继承了Chrome的优秀性能，还融入了微软自己的特色功能和服务。
阿达C·2024-08-21 21:05

【虚拟化平台】选对虚拟化引擎：ESXi, Hyper-V, KVM, VirtualBox优劣全览

BareMetalHypervisor|ESX|VMwareMicrosoftHyper-V:PagenotfoundKVM(Kernel-basedVirtualMachine):KVM作为Linux内核的一部分
何遇mirror·2024-08-21 21:01

2024-07-12 - 基于 sealos 部署高可用 K8S 管理系统

摘要Sealos是一款以Kubernetes为内核的云操作系统发行版。它以云原生的方式，抛弃了传统的云计算架构，转向以Kubernetes为云内核的新架构，使企业能够像使用个人电脑一样简单地使用云。
流雨声·2024-08-21 21:30

乡村集市 烟火正浓

仔细想一想，这些烟火包含着很现实的成分，内核里面有我们粗粮野菜的原生态生活，有家的味道，有红尘的味道，有苦辣酸甜的味道。其实人
朋友来吧·2024-08-21 20:00

Android系统和开发--安全性和权限管理 SELinux 策略 安全架构

/setenforce0adbrootsufastbootoemat-unlock-vbootadbdisable-verityAndroid权限Android系统是基于Linux内核构建的，因此它继承了
小黄人软件·2024-08-21 19:23

C/C++语法｜pthread线程库的使用

这样的话我们可以理解以下两点：同一地址空间中的多个线程独有的是：每个线程都有属于自己的栈区和寄存器（内核中管理的），寄存器主要记录的就是上下文共享的是：.text、.rodata、.data、.heap
Che3rry·2024-08-21 19:22

微软 Edge 浏览器全解析：创新与突破之旅

它于2015年首次发布，采用了全新的内核和设计理念，旨在提供更快速、更安全、更现代的网页浏览体验。随着时间的推
Cybertronnnnnn·2024-08-21 19:49

检测usb口HotPlug-netlink

为了完成内核空间与用户空间通信，Linux提供了基于Socket的NetLink通信机制。
cany1000·2024-03-29 01:00

Azkaban各种类型的Job编写

command：Linuxshell命令行任务gobblin：通用数据采集工具hadoopJava：运行hadoopMR任务java：原生java任务hive：支持执行hiveSQLpig：pig脚本任务spark
__元昊__·2024-03-28 21:00

关于HDP的20道高级运维面试题

HDP（HortonworksDataPlatform）的主要组件包括Hadoop框架、HDFS、MapReduce、YARN以及Hadoop生态系统中的其他关键工具，如Spark、Flink、Hive
编织幻境的妖·2024-03-26 15:34

Java学习笔记：atomic的实现原理？

在多线程的场景中，我们需要保证数据安全，就会考虑同步的方案，通常会使用synchronized或者lock来处理，使用了synchronized意味着内核态的一次切换。这是一个很重的操作。
曲钟人散·2024-03-26 10:47

【Hadoop】使用Scala与Spark连接ClickHouse进行数据处理

风不懂不懂得叶的梦月不听不听闻窗里琴声意难穷水不见不曾见绿消红霜不知不知晓将别人怎道珍重落叶有风才敢做一个会飞的梦孤窗有月才敢登高在夜里从容桃花有水才怕身是客身是客此景不能久TieYann(铁阳)、薄彩生《不知晓》在大数据分析和处理领域，ApacheSpark
音乐学家方大刚·2024-03-26 09:56

03-10Linux的文件系统

Linux的文件系统：根文件系统（rootfs）：rootfilesystemLSB,FHS/boot：引导文件存放目录：内核文件（vmlinuz），引导加载器（bootloader,grub）都存放于此目录
圆缘1987·2024-03-25 23:32

Spark面试整理-Spark是什么？

ApacheSpark是一个开源的分布式计算系统，它提供了一个用于大规模数据处理的快速、通用、易于使用的平台。它最初是在加州大学伯克利分校的AMPLab开发的，并于2010年开源。
不务正业的猿·2024-03-24 13:02

Linux mkswap命令教程：如何设置Linux交换区（附实例详解和注意事项）

Linux内核不查看分区ID，但许多安装脚本假定十六进制类型82（LINUX_SWAP）的分区是交换分区。
我要下东西噢·2024-03-24 07:55

快速搭建ARM64实验平台（QEMU虚拟机+Debian）

文章目录前言一、实验平台介绍二、安装步骤2.1安装工具2.2下载仓库2.3编译内核并制作根文件系统2.4运行刚才编译好的ARM64版本的Debian系统2.5在线安装软件包2.6在QEMU虚拟机和主机之间共享文件三
SGchi·2024-03-20 12:52

Spark Q&A

A:从Spark2.1开始，你可以通过启用spark.sql.files.ignoreCorruptFiles选项来忽略损毁的文件。
耐心的农夫2020·2024-03-19 00:12

编写Linux内核模块实现文件拷贝

经评论区反馈：如果Linux内核版本为4.XX，那么需要在vfs_read和vfs_write的地方更改为kernel_read和kernel_write操作系统课程实验1添加内核模块每个人题目都是自己选择的
双珵·2024-03-18 21:33

T2080 linux内核移植,T1042/T2080 U-BOOT 移植阶段（四）调试网口问题不通解决

本次设计中，我们采用MEMAC4(RGMII)接口作为调试接口，但是发现网口并不通1.首先排查PHY的问题，phy有没有解复位结果：CPLD已经对PHY解复位，且插上网线后，phy'灯link亮，说明phy确实已经解复位2.使用mii命令，读取phy寄存器，插拔网线后观察寄存器的变化，是否正常反应出phy的down和up拔掉网线时phy的状态=>miidump111.(7969)--PHYstat
weixin_39575758·2024-03-18 16:26

鸿蒙内核系统

一、系统设计总纲1.1鸿蒙战略设计目标全场景1.2鸿蒙操作系统目标实现的技术支撑1.2.1分布式设计1.2.2一次开发，多端部署1.2.3系统与硬件解耦，弹性部署1.3鸿蒙操作系统技术架构1.3.1内核层
junwua·2024-03-18 14:53

Linux 内核原子操作

Linux内核提供了一系列函数来实现内核中的原子操作，
android不会飞·2024-03-18 11:19

51单片机与ARM单片机的区别

单片机区别主要体现在以下几个方面：指令集架构（ISA）：51单片机：基于Intel8051架构，采用的是CISC（复杂指令集计算机）设计，其指令集相对较复杂，最初是8位架构，后来出现了增强型的8051内核变种
嵌入式Stark·2024-03-18 09:16

146 Linux 网络编程2 ，Socket编程，如何创建Linux 服务器 和linux 客户端

本质为内核借助缓冲区形成的伪文件
hunandede·2024-03-18 08:46

如何把新加的分区挂载到/根目录

#fdisk-l查看新增的的磁盘1、对新增磁盘进行分区#fdisk/dev/vdb按提示操作p打印n新增d删除w操作生效q退出操作后w#partprobe强制让内核重新找一次分区表（更新分区表）这里我们新增一个分区
两仪风·2024-03-17 18:57

linux安装单机版spark3.5.0

一、spark介绍是一种通用的大数据计算框架，正如传统大数据技术Hadoop的MapReduce、Hive引擎，以及Storm流式实时计算引擎等.Spark主要用于大数据的计算二、spark下载spark3.5.0
爱上雪茄·2024-03-17 18:57

腾讯文档嵌入html5,基于腾讯TBS 实现应用内打开并浏览Office文件

//这里比较坑，当时用极光推送把64位的ndk库也加上了，x5内核初始化一直失败//这里要去掉所有64位库，x5内核才能加载成功ndk{abiFilters"a
炎火鱼·2024-03-16 12:48

5.68 BCC工具之runqlat.py解读

运行队列是操作系统内核中用于管理待运行进程的数据结构。当进程准备运行时，它们会被添加到运行队列中，然后由调度器选择并在CPU上执行。
高桐@BILL·2024-03-16 10:45

openGauss SQL引擎插件开发指导

fastcheck自测以及CI门禁③提供checkin测试报告和开发文档并通过SIG组评审开发要点开放接口函数DLL_PUBLICPG_FUNCTION_INFO_V1_PUBLIC统一管理为了避免插件与内核同名函数所产生的符号冲突
openGaussMan·2024-03-15 11:09
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他