开源大数据集群部署

大数据秋招面经之spark系列

文章目录前言spark高频面试题汇总1.spark介绍2.spark分组取TopN方案总结：方案2是最佳方案。3.repartition与coalesce4.spark的oom问题怎么产生的以及解决方案5.storm与flink,sparkstreaming之间的区别6.spark的几种部署方式：7.复习spark的yarn-cluster模式执行流程：8.spark的job提交流程：9.spar
wq17629260466·2024-09-06 19:54

数据库分库分表-ShardingSphere学习

ShardingSphere是一个开源的分布式数据库中间件解决方案，旨在提供数据库分片、分布式事务、读写分离、数据治理等多种数据服务，它以模块化的方式设计，使用户可以根据不同的应用场景选择适合的模块来部署
学Java的skyyyyyyyy·2024-09-06 19:24

R语言基础学习

R是开源的，拥有丰富的包（packages），可以与优化软件进行交互。RStudio提供了R语言的集成开发环境，支持代码编辑、运行、调试等功能。
weixin_55475210·2024-09-06 19:54

云原生 | 在 Kubernetes 中使用 Cilium 替代 Calico 网络插件实践指南!

Cilium是一款开源软件，它基于一种名为eBPF的新的Linux内核技术提供动力，用于透明地保护使用Docker和Kubernetes等Linux容器管理平台中部署的应用程序服务之间的网络连接，Cilium
全栈工程师修炼指南·2024-09-06 19:21

OpenHarmony开发学习资料

OpenHarmony开发学习资料欢迎留言分享&推荐优秀的OHOS资料/网址OpenHarmony官网OpenHarmony文档中心OpenHarmony开发者开源基础软件社区官方OpenHarmony
Mart!nHu·2024-09-06 19:50

经验笔记：NoSQL数据库及其缓存方法实践

NoSQL数据库及其缓存方法实践经验笔记随着大数据时代的到来，传统的关系型数据库在处理大规模数据时面临诸多挑战，如扩展性不足、性能瓶颈等问题。
漆黑的莫莫·2024-09-06 19:50

探索LangChain-Chatchat 0.3：一体化Agent与强大RAG模型的全面入门指南

Xinference、Ollama、LocalAI、FastChat、OneAPI,可以非常方便的切换各个模型,本文只是介绍XinferenceXorbitsInference(Xinference)是一个开源平台
爱喝白开水a·2024-09-06 18:47

如何做大数据测试

测试流程及测试方法没有太大的区别，重点说一下大数据测试相比传统测试的区别：1、数据规模：大数据测试所涉及的数据规模通常是海量级别的，而普通测试所涉及的数据规模较小。
测试界潇潇·2024-09-06 18:47

SecurityHeaders：为.Net网站添加安全标头，让Web更加安全、避免攻击！

下面推荐一个开源项目，可以让我们轻松地添加安全相关的HTTP头到网站中。01项目简介NetEscapad
编程乐趣·2024-09-06 18:45

设计缓存架构时需要考虑的因素总结

1.缓存组件的选择在设计架构缓存的时候，首先要选定缓存组件，比如要用Local-Cache，还是Redis、Memcached、Pika等开源缓存组件。
清锋Online·2024-09-06 18:14

Stirling-PDF：基于Web的开源PDF处理工具

PDF文件进行各种各样的操作，比如合并、拆分、加密、解密、旋转、压缩等等，功能超全，而且开源免费，简直是神器！
TYUT_xiaoming·2024-09-06 18:14

Redis数据类型简介及使用场景

Redis是一种开源的、基于内存的、数据结构存储的、可以用作数据库、缓存和消息队列的NoSQL系统。它提供了多种丰富的数据类型，每种数据类型都有其特定的使用场景和优点。
空青726·2024-09-06 16:28

PolarDB for PostgreSQL 内核解读：HTAP架构介绍

MPP架构步具备了HTAP的能力，对一套TP的数据支持两套执行引擎：单机执行引擎用于处理高并发的OLTPMPP跨机分布式执行引擎用于复杂的OLAP查询，发挥集群多个RO节点的算力和IO吞吐能力本文整理自《开源学堂
阿里云技术·2024-09-06 16:28

LVS基本介绍

这是一个由章文嵩博士发起的一个开源项目，它的官方网站是http://www.linuxvirtualserver.org/.现在LVS已经是Linux内核标准的一部分。
weixin_34144450·2024-09-06 15:57

2020/2/27 Linux 介绍

Linux是操作系统，通常企业使用，免费，开源，字符界面。输入方式：command方式：(命令指令）键盘操作特点快捷简单效率高。系统稳定基本不重启。
成威_7991·2024-09-06 15:28

mysql8.0使用PXC实现高可用

MySQL8.0使用PXC实现高可用1.概述官方文档:PerconaXtradbCluster8.0DocumentationPXC（PerconaXtraDBCluster）是一个开源的高可用性、高性能的
帽子运维笔记·2024-09-06 15:24

k8s安装test

k8s集群部署准备工作三台centos7虚拟机（内存每个节点4G）[root@master~]#cat/etc/redhat-releaseCentOSLinuxrelease7.9.2009(Core
qBeautifulBoy·2024-09-06 15:23

2024数学建模美赛ABC题参考思路论文

摘要：随着世界医疗卫生行业和科技的不断发展，我国医疗大数据发展迅速，康复工程日趋成熟，脑电信号分析和判别是面向康复工程的重要研究方向之一。
2024年数学建模国赛·2024-09-06 15:53

推荐开源项目：nacos-sdk-python - 实现Python版的Nacos开放接口

推荐开源项目：nacos-sdk-python-实现Python版的Nacos开放接口nacos-sdk-pythonnacospythonsdk项目地址:https://gitcode.com/gh_mirrors
班歆韦Divine·2024-09-06 15:22

ffmpeg的安装和使用教程

FFmpeg是一款功能强大的开源多媒体处理工具，支持几乎所有视频和音频格式的转换、压缩、合并、裁剪等功能。
不会代码的小林·2024-09-06 14:47

【Kafka专栏 11】深入理解Kafka的网络线程模型：是谁在幕后“操纵”数据流？

作者名称：夏之以寒作者简介：专注于Java和大数据领域，致力于探索技术的边界，分享前沿的实践和洞见文章专栏：夏之以寒-kafka专栏专栏介绍：本专栏旨在以浅显易懂的方式介绍Kafka的基本概念、核心组件和使用场景
夏之以寒·2024-09-06 14:16

【Java那些年系列-启航篇 01】史上最强JavaSE学习路线图 & 知识图谱

【Java那些年系列-启航篇01】史上最强JavaSE学习路线图&知识图谱作者名称：纸飞机-暖阳作者简介：专注于Java和大数据领域，致力于探索技术的边界，分享前沿的实践和洞见文章专栏：Java那些年专栏专栏介绍
夏之以寒·2024-09-06 14:46

pythonnet_python调用.net动态库

pythonnet简介------------------------------pythonnet是cpython的扩展-pythonnet提供了cpython和.net程序集之间交互的桥梁-pythonnet开源在
weixin_39682944·2024-09-06 14:16

浙江省某市监局 API 敏感数据保护与全链路数据安全管控实践

背景随着政务服务数字化转型的加速，政府信息化建设、大数据分析应用以及智慧监管建设等现代化、智能化转型持续推进，新的数据安全风险也暗藏其中。
原点安全·2024-09-06 13:42

“内鬼”是泄露公民个人信息主要源头！涉及信托、运营商、航空公司三起典型案例

大数据时代下，公民个人信息与保护问题越来越被社会广泛关注。8月23日，北京高院召开新闻通报会，发布侵犯公民个人信息犯罪案件审判情况。
原点安全·2024-09-06 13:42

行测资料分析：有效数字法的应用技巧

在我们的历年的各类公考中对于资料分析的考察，越来越注重考生对于材料和题干的理解，对于计算能力要求并不高，但是作为考生，面对资料分析中的大数据运算，想要在最短的时间内选出最准确的答案，还是需要一定的估算技巧的
wuli小小白·2024-09-06 13:24

ansible自动化运维项目

Ansible是一个基于Python开发的开源自动化运维工具，它通过其模块化的架构和强大的功能，实现了配置管理、批量系统配置、程序部署和运行命令等任务，旨在帮助运维工程师提高工作效能并减少重复性劳动。
不会代码的小林·2024-09-06 13:36

【Java那些年系列-启航篇 04】Java程序架构：深入理解类与对象的设计原则

作者名称：纸飞机-暖阳作者简介：专注于Java和大数据领域，致力于探索技术的边界，分享前沿的实践和洞见文章专栏：Java那些年专栏专栏介绍：本专栏涵盖了JavaSE从基础语法到面向对象编程，从异常处理到集合框架
夏之以寒·2024-09-06 13:05

使用Ansible进行自动化运维

Ansible是一款开源的自动化工具，基于Python开发，不需要在被管理的节点上安装任何客户端代理。它采用一种简洁的YAML格式来编写配置文件，通过SSH协
weixin_58606202·2024-09-06 12:02

梧桐数据库（WuTongDB）：存算分离和存算一体架构的分布式数据库技术分析

一、引言在大数据时代，数据的存储和处理成为了企业面临的重要挑战。传统的单机数据库已经无法满
鲁鲁517·2024-09-06 11:27

Ilya七年前说深度学习已进入瓶颈期；英特尔曾拒绝OpenAI股权；GPT-4o新版本上线 | AI头条...

Ilya曾在Transformer论文发表前一个月表示深度学习已进入瓶颈期英特尔错失OpenAI投资机会，在AI竞争中陷入困境GPT-4o新版本上线，降价之外还有性能提升宇树科技开源人形机器人远程操作项目好莱坞因人工智能应用产生分歧奥特曼暗示
AI科技大本营·2024-09-06 11:25

Ilya新公司获10亿美元融资；支付宝将发布AI独立App支小宝 | AI头条

AI独立App支小宝Transformer作者创业公司Sakana.AI获1亿美元A轮融资2024外滩大会开幕，凯文・凯利谈AI时代三大趋势零一万物发布Yi-Coder系列模型微软Win11中发现国产开源大模型
AI科技大本营·2024-09-06 10:21

【开源 Mac 工具推荐之 5】tldr：简洁明了的命令行手册显示工具

简介在大家日常在macOS/Linux上使用Shell的时候，常常会遇到一些不太熟悉的命令行指令，为此我们一般会查看一下该命令的使用手册（指南）。往往，大家都会使用man这样一个非常传统的指令。但man也有一些缺点，比如显示的信息过于冗余等。其实，GitHub上有一个几乎完美的命令行手册显示工具，叫做tldr。它能够提供比man简介明了多的说明。tldr项目地址：https://github.co
YoungGeeker·2024-09-06 10:50

【Spark高级应用】使用Spark进行高级数据处理与分析

Spark高级应用使用Spark进行高级数据处理与分析引言在大数据时代，快速处理和分析海量数据是每个企业面临的重大挑战。
爱技术的小伙子·2024-09-06 10:47

RabbitMQ 入门教程

引言RabbitMQ是一个开源的消息代理和队列服务器，实现高级消息队列协议(AMQP)0-9-1。它能帮助开发者构建可靠、可扩展的应用程序，通过消息传递来解耦组件。
寂然如故·2024-09-06 09:43

RabbitMQ 入门教程

介绍RabbitMQ是一个开源的消息代理和队列服务器，实现高级消息队列协议(AMQP)。本教程将引导你完成RabbitMQ的基本设置，并演示如何使用Python来发送和接收消息。
寂然如故·2024-09-06 09:13

基于Prometheus和Grafana的现代服务器监控体系构建

1.安装PrometheusPrometheus是一个开源的监控系统和时间序列数据库，适用于记录实时的度量指标。
小绵羊不怕大灰狼·2024-09-06 09:41

Spark一些个人总结

文章目录前言一、Spark是什么二、Spark用来做什么三、Spark的优势是什么四、为什么用Spark五、Spark解决了什么问题总结前言随着大数据技术的发展，一些更加优秀的组件被提了出来，比如现在最常用的
易逑实战数据·2024-09-06 09:39

Fay-UE5 数字人工程使用教程

Fay-UE5工程提供了完整的开源解决方案，包
宗隆裙·2024-09-06 09:09

EI会议推荐-第二届大数据与数据挖掘国际会议（BDDM 2024）

第二届大数据与数据挖掘国际会议（BDDM2024）1、基本信息大会官网：http://www.icbddm.org/官方邮箱：[email protected]主办方：武汉纺织大学会议时间：2024年12月13
shiyuankeyan·2024-09-06 08:36

学会理财，做人生赢家

收入像一条河,支出是你花出去的钱,收入减去支出后剩下来的,就是你的财,财富就像一个水库,理财,就是管好你的水库,开源节流,让你什么时候都有
三出三进是正道·2024-09-06 08:44

Docker方式部署禅道

1、在线下载禅道镜像已放于DockerHub上，地址为：Docker可根据所需版本拉取对应版本的镜像，默认latest为禅道开源最新版本。sudodockerp
<倍感压力>·2024-09-06 08:02

商业银行融入数据要素交易流通的研究

“十四五”规划提出要培育壮大大数据等新兴数字产业，并在建立健全数据要素市场、推动数据要素流通等方面做出了明确部署。
宋罗世家技术屋·2024-09-06 08:01

开源的数据资产管理平台

开源的数据资产管理平台通过提供集中化的存储、管理和分析功能，帮助企业更好地利用其数据资源。
临水逸·2024-09-06 07:31

企业级Registry开源项目Harbor架构简介

企业级Registry开源项目Harbor架构简介作者：张海宁姜坦1.Harbor项目VMware公司最近开源了企业级Registry项目Harbor，其的目标是帮助用户迅速搭建一个企业级的Dockerregistry
project_harbor·2024-09-06 07:00

ClickHouse安装与使用指南

此开源项目位于https://github.com/TimonKK/click
富艾霏·2024-09-06 07:58

【开端】clickhouse入门使用

二、clickhouse入门使用ClickHouse介绍ClickHouse是俄罗斯的Yandex公司于2016年开源的列式存储数据库（DBMS），它使用C++语言编写，主要面向在线分析处理查询（OLAP
奋力向前123·2024-09-06 07:58

Docker 部署禅道开源版

原文地址：https://skyner.cn/archives/docker-deployment-of-zen-road-open-source-version-igd7s下载镜像开源版20.5安装命令
SHENHUANJIE·2024-09-06 06:25

开放麒麟操作系统能打动嵌入式软件工程师吗？

国产操作系统大部分客户其实是toB的，内核以外的源码也是不开源的，比如麒麟系、统信UOS等，个人学习、小企业基本不会用。
物联网_区块链_边缘计算_人工智能·2024-09-06 06:25

Apache SeaTunnel 2.3.7发布：全新支持大型语言模型数据转换

作为一个广受欢迎的下一代开源数据集成工具，ApacheSeaTunnel一直致力于为用户提供更加灵活、高效的数据同步和集成能力。
SeaTunnel·2024-09-06 06:24
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他