大数据云原生运维

挑战杯 大数据商城人流数据分析与可视化 - python 大数据分析

0前言优质竞赛项目系列，今天要分享的是基于大数据的基站数据分析与可视化该项目较为新颖，适合作为竞赛课题方向，学长非常推荐！
laafeer·2024-03-18 05:42

Java开发从入门到精通（七）：Java的面向对象编程OOP：常用API

Java大数据开发和安全开发（一）Java的常用API1.1Object类1.1toString1.1equals方法1.1对象克隆clone1.1Objects类1.1包装类1.1StringBuilder1.1StringBuffer1.1StringJoiner1.1Math
HACKNOE·2024-03-18 02:37

linux安装单机版spark3.5.0

一、spark介绍是一种通用的大数据计算框架，正如传统大数据技术Hadoop的MapReduce、Hive引擎，以及Storm流式实时计算引擎等.Spark主要用于大数据的计算二、spark下载spark3.5.0
爱上雪茄·2024-03-17 18:57

网络安全（黑客技术）—0基础自学

前言一、什么是网络安全网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
羊村最强沸羊羊·2024-03-17 13:49

MySQL数据库管理

MySQL库和表的创建和删除方法掌握MySQL增删改查常见操作掌握MySQL用户权限1.1使用MySQL数据库在熟悉安装及访问MySQL数据库以后，接下来将学习MySQL数据库的基本操作，这也是在服务器运维工作工不可或缺的知识
L罗盛·2024-03-16 13:50

Hadoop简介

简介大数据简介概述大数据的说法从出现到现在，也经历了十多年时间的发展。
程序员小郭同学·2024-03-16 07:10

数大数据时代的关键：融合数据治理与AI为企业增值_光点科技

在数据驱动的今天，企业不能再将数据治理和人工智能（AI）视作孤立的实体。它们之间的协同作用已经成为推动企业增长的强大引擎。本文将探索数据治理与AI如何相互作用，形成闭环，以及企业如何利用这一关系来提升数据价值，实现数字化转型。数据治理与AI的依存共生数据治理是整理和优化数据的过程，以确保其质量、安全性和可用性。而AI，尤其是大模型，是解析和应用这些数据的工具。没有高质量的数据治理，AI无法发挥其最
光点数据治理·2024-03-16 07:10

2024年阿里云大数据acp认证条件

阿里云大数据acp认证考试没有条件，在校大学生、应届毕业生、在职员工均可报考。acp认证考试预约流程1.账户注册，认证人员登录阿里云认证全球培训中心网站，在页面右上角点击“立即注册”2.选择专业。
腾科教育·2024-03-16 06:38

【项目经验】Redis Sentinel从工程中下线并对业务迁移-进行中

一、背景：某天，接到DBA通知，Redissentinel只支持到3.2.X(这个命题有问题，往下翻，见彩蛋)，为节省运维成本，提升运维效率，决定将工程中使用的Redissentinel下线，都使用Rediscluster
小王师傅66·2024-03-16 05:06

Redis 的 RDB 和 AOF

优点:快速恢复大数据集。子进程创建的方式减少了主进程的内存消耗。RDB文件是一个紧凑
龙大.·2024-03-16 02:31

让数据在业务间高效流转，镜舟科技与NineData完成产品兼容互认

在经过联合测试后，镜舟科技旗下产品与NineData云原生智能数据管理平台完全兼容，整体运行高效稳定。
镜舟科技·2024-03-15 16:18

基于Java的天然气工程运维系统(Vue.js+SpringBoot)

目录一、摘要1.1项目介绍1.2项目录屏二、功能模块2.1系统角色分类2.2核心功能2.2.1流程12.2.2流程22.3各角色功能2.3.1系统管理员功能2.3.2用户服务部功能2.3.3分公司（施工单位）功能2.3.3.1技术员角色功能2.3.3.2材料员角色功能2.3.4安全质量部功能2.3.5技术设备部功能2.3.6经营计划部功能2.3.7财务部功能三、研究背景和意义3.1研究背景3.2研
杨荧·2024-03-15 10:39

挑战杯 机器学习股票大数据量化分析与预测系统 - python 挑战杯

文章目录0前言1课题背景2实现效果UI界面设计web预测界面RSRS选股界面3软件架构4工具介绍Flask框架MySQL数据库LSTM5最后0前言优质竞赛项目系列，今天要分享的是机器学习股票大数据量化分析与预测系统该项目较为新颖
laafeer·2024-03-14 18:16

03hive数仓安装与基础使用

可以将结构化的数据文件映射为一张表，并提供完整的sql查询功能，本质上还是一个文件底层是将sql语句转换为MapReduce任务进行运行本质上是一种大数据离线分析工具学习成本相当低，不用开发复杂的mapreduce
daydayup9527·2024-03-14 13:39

Spark的数据结构——RDD

Alistofpartitions:在大数据领域，大数据都是分割成若干个部分，放到多个服务器上，这样就能做到多线程的处理数据，这对处理大数据量是非常重要的。分区意味着，可以使用多个线程了处理。
bluedraam_pp·2024-03-14 08:32

构建轻量级CentOS Docker镜像的实战指南

随着容器技术的迅速发展，Docker已成为现代应用部署和运维的标准工具之一。其中，构建自定义的Docker镜像是将应用程序无缝集成到容器化环境的关键步骤。
Evaporator Core·2024-03-14 00:51

Hbase集群搭建超详细教程

hbase-site.xml3.3修改regionservers文件4、分发hbase目录5、启动HBase集群6、查看HBaseWebUI大家好，我是风云，欢迎大家关注我的博客，在未来的日子里我们一起来学习大数据相关的技术
笑看风云路·2024-03-13 09:02

flink重温笔记（十五）： flinkSQL 顶层 API ——实时数据流转化为SQL表的操作

学习了flinkSQL基础入门，主要是解决大数据领域数据处理采用表的方式，而不是写复杂代码逻辑，学会了如何初始化环境，鹅湖将流数据转化为表数据，以及如何查询表数据，结合自己实验猜想和代码实践，总结了很多自己的理解和想法
那就学有所成吧(˵¯͒¯͒˵)·2024-03-13 09:32

大数据开发（Spark面试真题-卷一）

大数据开发（Spark面试真题）1、什么是SparkStreaming？简要描述其工作原理。2、什么是Spark内存管理机制？请解释其中的主要概念，并说明其作用。
Key-Key·2024-03-13 07:58

Mysql运维篇（六） 部署MHA--一主二从部署

一路走来，所有遇到的人，帮助过我的、伤害过我的都是朋友，没有一个是敌人。如有侵权，请留言，我及时删除！MAH架构图一、上传MySQL软件1、同步MySQL软件[root@mysql01~]#ls-lrttotal626112-rw-r--r--.1rootroot641127384Jan3015:13mysql-5.7.20-linux-glibc2.12-x86_64.tar.gz-rw----
董乐，快乐的乐！·2024-03-13 05:25

基于HBase和Spark构建企业级数据处理平台

专注于大数据分布式计算和数据库领域，具有6年分布式开发经验，先后研发Spark及自主研发内存计算，目前为广大公有云用户提供专业的云HBase数据
weixin_34071713·2024-03-12 22:44

云原生周刊：Helm Charts 深入探究 ｜ 2024.3.11

开源项目推荐GlasskubeGlasskube提供了一个用于Kubernetes的缺失的包管理器。它具有图形用户界面(GUI)和命令行界面(CLI)。Glasskube包是具备依赖感知、GitOps准备和可以通过中央公共包仓库自动更新的特性。imgpkgimgpkg（发音为："imagepackage"）是一个工具，允许用户将一组任意文件存储为OCI镜像。其中一个主要用例是将Kubernetes
KubeSphere 云原生·2024-03-12 16:05

计算机设计大赛 疫情数据分析与3D可视化 - python 大数据

文章目录0前言1课题背景2实现效果3设计原理4部分代码5最后0前言优质竞赛项目系列，今天要分享的是大数据全国疫情数据分析与3D可视化该项目较为新颖，适合作为竞赛课题方向，学长非常推荐！
iuerfee·2024-03-12 15:03

详解乐观锁、悲观锁以及它们各自的应用

转发“详解乐观锁、悲观锁以及它们各自的应用”波波说运维为什么需要锁（并发控制）？在多用户环境中，在同一时间可能会有多个用户更新相同的记录，这会产生冲突。这就是著名的并发性问题。
路亚历克斯·2024-03-12 10:42

大数据开发（Spark面试真题-卷六）

大数据开发（Spark面试真题）1、SparkHashPartitioner和RangePartitioner的实现？
Key-Key·2024-03-12 02:16

大客户项目管理策略思考

都是根据工作实际内容缺乏信息化总体规划，项目开发建设存在突击性，部分项目时间要求短，属于突击需求大客户面临的问题-自己：1、项目建设时间短，质量不高，项目间各自独立开发，重复开发，复用率低，开发规范差，后期运维压力大
guwei666666·2024-03-12 02:45

大数据开发（Hadoop面试真题-卷二）

大数据开发（Hadoop面试真题）1、在大规模数据处理过程中使用编写MapReduce程序存在什么缺点？如何解决这些问题？
Key-Key·2024-03-12 02:15

运维随录实战（14）之docker搭建mysql主从集群(Replication))

1,从官方景镜像中拉取mysql镜像:dockerpullmysql:8.0.24--platformlinux/x86_642,创建master和slave容器:在创建之前先设置网段dockernetworkcreate--subnet=172.20.0.0/24soil_networkmaster:dockerrun-d-p3306:3306--namemysql-master--netsoi
Loren_云淡风轻·2024-03-11 19:35

HTTP代理ip如何助旅游大数据领域？怎么去建立安全代理隧道连接？

HTTP代理IP在旅游大数据领域的应用主要体现在以下几个方面：数据抓取：旅游大数据的获取往往需要从各种在线旅游平台、社交媒体、评论网站等抓取数据。
luludexingfu·2024-03-11 13:11

运维系列：Docker 配置国内源加速(2023/05/14)

Docker配置国内源加速(2023/05/14）Docker配置国内源加速(2023/05/14)1.修改配置文件2.重启`Docker`服务3.查看是否成功Docker配置国内源加速(2023/05/14)Docker在拉取镜像时使用默认源速度会比较慢，因此需要配置国内镜像源进行加速。下面以Ubunut16.04和Docker20.10.2为例演示Docker配置国内源加速的过程。1.修改配置
坦笑&&life·2024-03-11 08:35

Spark从入门到精通29:Spark SQL：工作原理剖析以及性能优化

SparkSQL工作原理剖析1.编写SQL语句只要是在数据库类型的技术里面，例如MySQL、Oracle等，包括现在大数据领域的数据仓库，例如Hive。
勇于自信·2024-03-11 00:20

魔法王国的故事——档案馆的危机

❝这是一个连续的专栏,在这里,我将用一个奇幻的魔法王国的故事,来向你介绍大数据相关内容，希望在这里可以帮助你学到有用的知识第一章：档案馆的危机在一个遥远的魔法王国，有一个叫做档案馆的地方，那里存放着王国的所有重要的文件
健鑫.·2024-03-10 22:22

AI辅助研发：2024年的新趋势与未来展望

一、AI辅助研发的崛起随着计算能力的提升和大数据技术的进步，AI的能力已经达到了新的高度。在研发领域，
AI普惠行者·2024-03-10 22:22

1分钟玩转Kafka

Kafka是一种分布式的、基于发布/订阅的消息系统，其极致体验让人欲罢不能，但操心的运维、复杂的安全策略、可靠性易用性的缺失、算不上极致的性能发挥、并不丰富的消息服务功能，仍需要使用者付出诸多的背后工作
中间件小哥·2024-03-10 21:58

Hive SQL 开发指南（三）优化及常见异常

在大数据领域，HiveSQL是一种常用的查询语言，用于在Hadoop上进行数据分析和处理。为了确保代码的可读性、维护性和性能，制定一套规范化的HiveSQL开发规范至关重要。
大数据_苡~·2024-03-09 14:13

docker-swarm集群管理命令

当前个人负责的项目基本上后端只有一个人，运维也比较费时费力。就想着搭建一个集群，对比了k8s、k3s和d
chenzfp·2024-03-09 12:39

大数据开发（Hadoop面试真题-卷九）

大数据开发（Hadoop面试真题）1、Hivecount(distinct)有几个reduce，海量数据会有什么问题？
Key-Key·2024-03-09 10:06

网络安全（黑客）—2024自学

1.网络安全是什么网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
羊村最强沸羊羊·2024-03-09 10:06

如何成为fpga工程师

FPGA的应用领域非常的广，尤其再人工智能，大数据，云计算等等方向非常吃香。
宸极FPGA_IC·2024-03-09 04:29

MySQL运维实战之备份和恢复（8.6）将数据库恢复到指定时间点

作者：俊达恢复到指定时间点使用全量备份和增量备份文件，都只能将数据库恢复到备份结束的时间。通过binlog，可以将数据库恢复到任意时间点（前提是备份和该时间点之间的binlog都存在）。找到时间点对应的binlog恢复到时间点，首先需要定位该时间点对应的binlog位点（binlog文件和文件内的偏移量）。每个binlog头部都记录了该binlog产生的时间，我们可以使用mysqlbinlog工具
云掣YUNCHE·2024-03-08 21:48

大数据开源框架技术汇总

主要基于对现阶段一些常用的大数据开源框架技术的整理，只是一些简单的介绍，并不是详细技术梳理。可能会有疏漏，发现再整理。参考的太多，就不一一列出来了。这只是作为一个梳理，对以后选型或者扩展的做个参考。
浪尖聊大数据-浪尖·2024-03-08 20:48

自动化运维工具----Ansible入门详解

1.ansible是新出现的自动化运维工具，基于python开发，集合了从多的运维工具（puppet、chef、func、fabric）的优点，实现了批量系统配置、批量程序部署、批量运行命令等功能。
效好飞·2024-03-08 11:05

光谱下的养殖业：数据可视化的现代变革

然而，随着科技的进步，大数据的兴起，数据可视化为养殖业提供了全面的数据支持。通过将养殖场内各项数据以图表、地图等形式直观呈现，养殖场主和管理者
希艾席蒂恩·2024-03-08 05:28

什么是B+树，和B树有什么不同？

博主介绍：博主从事应用安全和大数据领域，有8年研发经验，5年面试官经验，Java技术专家，WEB架构师，阿里云专家博主，华为云云享专家，51CTO专家博主⛪️个人社区：个人社区个人主页：个人主页专栏地址
激流丶·2024-03-07 20:45

2024年AI助力研发：内容驱动下的全新变革与展望

此外，随着大数据
wd90119·2024-03-07 14:38

Azkaban 大数据 任务调度

参考视频：尚硅谷大数据Azkaban3.x教程（全新发布）_哔哩哔哩_bilibili目录Azkaban：是一个定时、批量工作流任务调度器(工作流程调度，定时调度)常见的开源调度系统：比较：特点：三个关键组件
OutRoading·2024-03-07 13:37

西安-腾讯云-Python面试经验--一面凉经

僵尸进程，孤儿进程f.如何产生一个守护进程g.如何避免僵尸进程或者孤儿进程redisa.持久化方式有哪些，区别是什么b.redis集群有了解么c.rediszset()—底层如何实现（哈希表+跳跃表）和大数据相关的操作
jiet07·2024-03-07 02:53

RAID磁盘阵列部署和管理

（2）掌握RAID的基础运维。基础准备安装CentOS7操作系统主机，并添加4块20GB硬盘。案例实施创建raid0利用磁盘分区新建2个磁盘分区，每个大小为20GB。
XYong-@·2024-03-07 02:23

Raid磁盘阵列并管理

目录优点：缺点命令创建raid0raid5运维操作RAID（RedundantArrayofIndependentDisks）即独立磁盘冗余阵列，通常简称为磁盘阵列。
mhcwz·2024-03-07 01:22

网络安全（黑客）—2024自学

1.网络安全是什么网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
德西德西·2024-03-06 21:17
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他