spark内核

今日份打卡

今日份打卡，感觉的外围是一个宣传的大市场，可能优秀的作者都在内核中。我回的目的也是把她当成一个平台，借此提升自己的文化影响力，很多人也是这样推广自己的公众号的。
悄言·2024-02-07 23:30

初步了解Linux

Linux是一种自由和开放源码的操作系统，以内核形式存在，使用户能够自由地定制和配置系统以满足其需求。Linux操作系统广泛应用于服务器、移动设备和桌面环境等领域，具
CC学妹·2024-02-07 22:49

RDD vs DataFrame vs Dataset

RDD是Spark最基础的数据结构。RDD允许开发者使用容错的形式在集群中使用内存计算，这样可以提高计算速度。1.2DataFrameDataFrame是使用数据组成命名
一生逍遥一生·2024-02-07 22:20

Linux内核中container_of宏的详细解释

如何移植并使用Linux内核的通用链表（附完整代码实现）我们在分析Linux内核链表的时候注意到内核在求解结构体偏移的时候巧妙的使用了container_of宏定义，今天我们来详细剖析下内核到底是如何求解结构体成员变量的地址的
嵌入式与Linux那些事·2024-02-07 20:29

嵌入式Linux_驱动开发：offset宏和container_of宏

今天学习了两个Linux内核中两个宏定义，下面逐步分析宏的作用。
Mr_WangAndy·2024-02-07 20:29

【Linux】内核的锁机制——互斥锁，自旋锁

内核提供了几
PannLZ·2024-02-07 20:59

【Linux】设备驱动开发环境配置

文章目录1.1工具配置（Ubuntu）1.2获取源代码1.3配置构建内核1.4内核约定1.1工具配置（Ubuntu）$sudoapt-getupdate$sudoapt-getinstallgawkwgetgitdiffstatunziptexinfogcc-multilibbuild-essentialchrpa
PannLZ·2024-02-07 20:58

【Linux】内核中的链表

文章目录链表1.创建和初始化2.创建节点3.添加节点4.删除节点5.遍历链表内核开发者只实现了循环双链表，因为这个结构能够实现FIFO和LIFO，并且内核开发者要保持最少代码。
PannLZ·2024-02-07 20:58

【Linux】内核定时器

点赞收藏✍️留言文章目录1.标准定时器1.1标准定时器1.2定时器API（初始化标准定时器）：2.高精度定时器（HRT）2.1高精度定时器（HRT）2.2初始化HRT3.动态Tick/tickless内核时间是继内存之后常用的资源之一
PannLZ·2024-02-07 20:58

MIT6.1810/Fall 2022(which was called 6.S081 then) Lab5-7

Lab:Copy-on-WriteForkforxv68.4CopyOnWriteFork-MIT6.S081先理解COW机制Implementcopy-on-writefork您的任务是在xv6内核中实现写时复制分叉
idMiFeng·2024-02-07 19:48

shell脚本基础语法（.sh ./ sh bash source shell）

Linux之Shell脚本基础语法0.学习一门语言的顺序1.Shell编程概述1.1Shell名词解释在Linux操作系统中，Shell是一个命令行解释器，它为用户提供了一个与操作系统内核交互的界面。
Le0v1n·2024-02-07 18:01

前端的面试题（上）

box{display:flex;}.box{display:inline-flex;}//Webkit内核的浏览器，必须加上-webkit前缀.box
前端阿峰·2024-02-07 18:21

黑猴子的家：Spark SQL 的性能

1、内存列存储（In-MemoryColumnarStorage）内存列存储来说，将所有原生数据类型的列采用原生数组来存储，将Hive支持的复杂数据类型(如array、map等)先序列化后拼接成一个字节数组来存储。这样，每个列创建一个JVM对象，从而导致可以快速的GC和紧凑的数据存储。额外的，还可以用低廉CPU开销的高效压缩方法来降低内存开销。更有趣的是，对于分析查询中频繁使用的聚合特定列，性能会
黑猴子的家·2024-02-07 18:48

简单使用Spark、Scala完成对天气数据的指标统计

目录一、前言&什么是Spark？
db_lcz_2014·2024-02-07 18:33

Rust初体验

Rust初体验最近听闻Linux内核要加入Rust的支持，而且据说Rust这门语言既可以用于系统级别的开发又有现代高级语言的特质，并且没有C++那么臃肿，还可以实现内存安全，神乎其神的，所以特地安装了一个
樱满无门·2024-02-07 16:35

Quicker读取浏览器的书签（包括firefox火狐）

方法1：读取本地Bookmarks文件（仅谷歌内核浏览器）谷歌内核的浏览器本地会有Bookmarks文件，放了所有的书签数据，直接txt可以打开。
ziyue7575·2024-02-07 16:17

Centos 异步 IO framework io_uring,基本原理,程序示例与性能压测

37285.html更多内容参考:https://www.conghengx.com/Linux异步I/O框架io_uring：基本原理、程序示例与性能压测io_uring是2019年Linux5.1内核首次引入的高性能异步
HDX柿子·2024-02-07 15:54

高性能异步io机制：io_uring

io_uring是linux内核5.10引入的异步io接口。
linux大本营·2024-02-07 15:51

Linux内存分配

通常将堆的当前内存边界称为"programbreak"调整programbreak改变堆的大小，就像命令内核改变进程的programbreak位置一样。
WeinKee·2024-02-07 15:19

嵌入式linux驱动开发之网络设备驱动

https://bbs.csdn.net/topics/612247295简介Linux网络设备驱动是Linux内核中的一个重要组成部分，它负责网络设备的底层数据传输和设备控制。
稚肩·2024-02-07 15:00

百面嵌入式专栏（面试题）驱动开发面试题汇总1.0

进行内核与硬件的数据交互。检测和处理设备出现的错误。2、内核程序中申请内存使用什么函数？答案：kmalloc()、kzalloc()、vmalloc()。
内核笔记·2024-02-07 15:59

360度拖拽图片

只支持webkit内核的浏览器html代码我是一名从事了5年前端的程序员，辞职目前在做讲师，今年年初整理了一份适合2019年学习的web前端干货，从最基础的HTML+CSS+JS到移动端HTML5到各种框架都有整理
大山里的前端攻城狮·2024-02-07 15:06

多线程select并发

父进程负责监听，处理客户端的连接请求，也就是在父进程中循环调用accept()函数；创建子进程：建立一个新的连接，就创建一个新的子进程，让这个子进程和对应的客户端通信；回收子进程资源：子进程退出回收其内核
zwhyhhdy·2024-02-07 13:04

日志收集系统ELK+kafka部署

日志收集系统ELK+kafka部署文章目录日志收集系统ELK+kafka部署一、系统准备1.1部署简介1.2升级内核1.3内核优化1.4安装NTP服务1.5关闭swap分区二、部署ISCSI2.1配置数据网络
MappleZF·2024-02-07 13:47

OSDI 2023: Userspace Bypass Accelerating Syscall-intensive Applications

**替代执行模型：**探索使用用户空间或微内核等不同执行环境来绕过系统调用（例如QEMU、Unikernels）。2.应用重
结构化文摘·2024-02-07 12:53

Linux进程信号详解

信号的发送与记录5.信号处理常见方式概述6.补充二.信号的产生1.通过终端按键产生信号2.通过系统函数向进程发送信号3.由软件条件产生的信号4.由硬件异常产生信号三.阻塞信号1.信号其他相关概念2.在内核中的表示
GSX_M·2024-02-07 12:38

Linux驱动工作原理

首先列一张Linux下应用程序对驱动的调用图本次讨论内核是如何操作具体硬件的。
慕诗客·2024-02-07 11:15

内核驱动安装卸载

驱动安装insmod或modprobeinsmod不能解决模块的依赖关系，比如要安装b.ko,但是它依赖a.ko，那么必须使用insmod先加载a.komodprobe会分析模块的依赖，将所有依赖都加载到内核中
慕诗客·2024-02-07 11:45

存算一体：内核架构创新，打破算力能效极限｜深度研报

作者｜王嘉攀司马洁本报告由势乘资本和光锥智能联合发布在后摩尔时代，存算一体作为可10倍提升单位功耗下算力的颠覆性技术之一，其底层原理、应用前景及可实现性如何？当前的产业现状及行业创新创业机遇如何？本文从底层技术原理、产业需求变革说起，全面梳理存算一体产业创新浪潮与投资机遇图景：一、核心判断及观点1.存算一体属于芯片的底层架构创新，阶段非常早期，其产业链空白度及机遇挑战不亚于20年前从头开始发展GP
光锥智能·2024-02-07 11:13

《Docker极简教程》--Docker基础--基础知识（三）

一、Namespace和Cgroups1.1Namespace的作用和类型Docker的Namespace是Linux内核提供的一种机制，用于隔离系统资源，使得容器能够拥有自己独立的视图，从而实现更高程度的隔离和安全性
喵叔哟·2024-02-07 11:21

GEM5中AMR全系统DVFS

其中内核需要。
tristan_tian·2024-02-07 11:17

【Iceberg学习一】什么是Iceberg？

Iceberg为包括Spark、Trino、PrestoDB、Flink、Hive和Impala在内的计算引擎增加了表格功能，使用一种高性能的表格格式，其工作方式就像一个SQL表一样。
周润发的弟弟·2024-02-07 10:56

Archlinux 安装 linux-lts 内核

Archlinux安装linux-lts内核春节期间在家折腾k8s,尝试安装cri-o的时候习惯性的先执行了pacman-Syu（操作系统用的archlinux），然后再安装cri-o,pacman-Scri-o
w1100n·2024-02-07 10:46

RDD任务切分之Stage任务划分(图解和源码)

RDD任务切分中间分为：Application、Job、Stage和Task（1）Application：初始化一个SparkContext即生成一个Application；（2）Job：一个Action
大数据左右手·2024-02-07 09:34

Linux------进程优先级与进程切换

目录一、进程优先级二、优先级与权限的区别三、优先级的查看四、进程优先级修改五、进程切换六、linux2.6内核调度队列与调度原理一、进程优先级首先我们得知道一个进程总是需要排队的，他一会在运行队列中排队等待运行
kkbca·2024-02-07 09:00

kyuubi 接入starrocks | doris

kyuubi接入starrocks一、环境Hadoop集群组件版本Hadoop3.1.1spark3.Xzookeeper3.XHive3.Xkyuubi版本1.7.1starrocks2.X 已将kyuubi
甜甜的巧克力阿·2024-02-07 09:48

linux进程和进程优先级

task_struct是Linux内核的一种数据结构，它会被装载到RAM(内存)里并且包含着进程的信息。task_struct内容分类标示符:描述本进程的唯一标示符，用来区别其他进程。
高高__·2024-02-07 09:04

Java 多线程

（这里的切换是线程的暂停切换到另外一个线程）用户级线程和内核线程
哇塞大嘴好帅(DaZuiZui)·2024-02-07 08:10

Ubuntu无线网卡（Realtek rtl8852be）驱动安装

安装ubuntu22.04解决wifi6驱动问题+没有Realtekrtl8852be驱动（本人电脑：RedimbookR75800H）-CSDN博客#1.build(forkernel5.18）内核>
henry.l·2024-02-07 08:07

linux驱动开发之常见面试问题

驱动中通常会定义一个私有结构体，里面包含一些内核结构体，但注册的时候只注册了某个成员，怎么找到这个私有结构体。什么是container_of如何给应用层提供接口什么是ioctl?
墨染 锦年·2024-02-07 07:52

Hive Sql优化记录

日常检查ETLjob时发现一段sql采用hiveonmr执行比hiveonspark要快70%，与正常的认知正好相反，所以对该sql进行了详细分析。
风筝flying·2024-02-07 07:40

Linux学习笔记之二：U-Boot常用命令

https://blog.csdn.net/qq_46079439/article/details/125474461U-Boot常用命令uboot简介uboot属于bootloader的一种，是用来引导启动内核的
manmanbab·2024-02-07 07:35

腾讯云主机部署spring boot程序

选用的主机型号Ubuntu22.04-Docker24-7U99版本主机内核为ubuntu5.15.0-86-generic，并且内置了docker环境1、安装java8环境aptinstallopenjdk
宣晨光·2024-02-07 07:57

Tomcat的NioEndpoint组件是怎么实现I/O多路复用

这里面数据的读写主要会经历两个步骤：用户线程等待内核将数据从网卡拷贝到内核空间内核将数据从内核空间拷贝到用户空间这两个过程涉及到操作系统从用户态和内核态的转换成，这是一个重量级的操作。
NullzzZ·2024-02-07 07:23

Docker Desktop简介

DockerDesktop一、简介DockerDesktop是可以部署在windows运行docker的应用服务，其基于windos的Hyper-V服务和WSL2内核在windos上创建一个子系统(linux
web15085599741·2024-02-07 07:22

Docker 常见面试题汇总

答：Docker利用了Linux内核中很多安全特性来保证不同容器之间的隔离，并且通过签名机制来对镜像进行验证。大量生产环境的部署证明，Docker虽然隔离性无法与虚拟机相比，但仍然具有极高的安全性。
theo.wu·2024-02-07 07:51

【宝藏系列】嵌入式入门概念大全

【宝藏系列】嵌入式入门概念大全0️⃣1️⃣操作系统（OperatingSystem，OS）是管理计算机硬件与软件资源的系统软件，同时也是计算机系统的内核与基石。
失散多年的哥哥·2024-02-07 07:42

SparkJDBC读写数据库实战

默认的操作代码valdf=spark.read.format("jdbc").option("url","jdbc:postgresql://localhost:5432/testdb").option
SunnyRivers·2024-02-07 07:41

使用 WPF + Chrome 内核实现 在线客服系统 的复合客服端程序

本系列文章详细介绍使用.netcore和WPF开发升讯威在线客服与营销系统的过程。本产品已经成熟稳定并投入商用。免费使用&私有化部署免费下载：https://docs.shengxunwei.com/Post/f7bc8496-14ee-4a53-07b4-08d8e3da6269视频实拍：演示升讯威在线客服系统在网络中断，直接禁用网卡，拔掉网线的情况下，也不丢消息，不出异常。https://bl
升讯威在线客服系统·2024-02-07 07:09

使用 WPF + Chrome 内核实现高稳定性的在线客服系统复合应用程序

在本篇文章中，我将详细介绍如何通过WPF+Chrome内核的方式实现复合客服端应用程序。
升讯威在线客服系统·2024-02-07 07:06
上一页 21 22 23 24 25 26 27 28 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他