大数据~~运维

运维随录实战（14）之docker搭建mysql主从集群(Replication))

1,从官方景镜像中拉取mysql镜像:dockerpullmysql:8.0.24--platformlinux/x86_642,创建master和slave容器:在创建之前先设置网段dockernetworkcreate--subnet=172.20.0.0/24soil_networkmaster:dockerrun-d-p3306:3306--namemysql-master--netsoi
Loren_云淡风轻·2024-03-11 19:35

HTTP代理ip如何助旅游大数据领域？怎么去建立安全代理隧道连接？

HTTP代理IP在旅游大数据领域的应用主要体现在以下几个方面：数据抓取：旅游大数据的获取往往需要从各种在线旅游平台、社交媒体、评论网站等抓取数据。
luludexingfu·2024-03-11 13:11

运维系列：Docker 配置国内源加速(2023/05/14)

Docker配置国内源加速(2023/05/14）Docker配置国内源加速(2023/05/14)1.修改配置文件2.重启`Docker`服务3.查看是否成功Docker配置国内源加速(2023/05/14)Docker在拉取镜像时使用默认源速度会比较慢，因此需要配置国内镜像源进行加速。下面以Ubunut16.04和Docker20.10.2为例演示Docker配置国内源加速的过程。1.修改配置
坦笑&&life·2024-03-11 08:35

Spark从入门到精通29:Spark SQL：工作原理剖析以及性能优化

SparkSQL工作原理剖析1.编写SQL语句只要是在数据库类型的技术里面，例如MySQL、Oracle等，包括现在大数据领域的数据仓库，例如Hive。
勇于自信·2024-03-11 00:20

魔法王国的故事——档案馆的危机

❝这是一个连续的专栏,在这里,我将用一个奇幻的魔法王国的故事,来向你介绍大数据相关内容，希望在这里可以帮助你学到有用的知识第一章：档案馆的危机在一个遥远的魔法王国，有一个叫做档案馆的地方，那里存放着王国的所有重要的文件
健鑫.·2024-03-10 22:22

AI辅助研发：2024年的新趋势与未来展望

一、AI辅助研发的崛起随着计算能力的提升和大数据技术的进步，AI的能力已经达到了新的高度。在研发领域，
AI普惠行者·2024-03-10 22:22

1分钟玩转Kafka

Kafka是一种分布式的、基于发布/订阅的消息系统，其极致体验让人欲罢不能，但操心的运维、复杂的安全策略、可靠性易用性的缺失、算不上极致的性能发挥、并不丰富的消息服务功能，仍需要使用者付出诸多的背后工作
中间件小哥·2024-03-10 21:58

Hive SQL 开发指南（三）优化及常见异常

在大数据领域，HiveSQL是一种常用的查询语言，用于在Hadoop上进行数据分析和处理。为了确保代码的可读性、维护性和性能，制定一套规范化的HiveSQL开发规范至关重要。
大数据_苡~·2024-03-09 14:13

docker-swarm集群管理命令

当前个人负责的项目基本上后端只有一个人，运维也比较费时费力。就想着搭建一个集群，对比了k8s、k3s和d
chenzfp·2024-03-09 12:39

大数据开发（Hadoop面试真题-卷九）

大数据开发（Hadoop面试真题）1、Hivecount(distinct)有几个reduce，海量数据会有什么问题？
Key-Key·2024-03-09 10:06

网络安全（黑客）—2024自学

1.网络安全是什么网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
羊村最强沸羊羊·2024-03-09 10:06

如何成为fpga工程师

FPGA的应用领域非常的广，尤其再人工智能，大数据，云计算等等方向非常吃香。
宸极FPGA_IC·2024-03-09 04:29

MySQL运维实战之备份和恢复（8.6）将数据库恢复到指定时间点

作者：俊达恢复到指定时间点使用全量备份和增量备份文件，都只能将数据库恢复到备份结束的时间。通过binlog，可以将数据库恢复到任意时间点（前提是备份和该时间点之间的binlog都存在）。找到时间点对应的binlog恢复到时间点，首先需要定位该时间点对应的binlog位点（binlog文件和文件内的偏移量）。每个binlog头部都记录了该binlog产生的时间，我们可以使用mysqlbinlog工具
云掣YUNCHE·2024-03-08 21:48

大数据开源框架技术汇总

主要基于对现阶段一些常用的大数据开源框架技术的整理，只是一些简单的介绍，并不是详细技术梳理。可能会有疏漏，发现再整理。参考的太多，就不一一列出来了。这只是作为一个梳理，对以后选型或者扩展的做个参考。
浪尖聊大数据-浪尖·2024-03-08 20:48

自动化运维工具----Ansible入门详解

1.ansible是新出现的自动化运维工具，基于python开发，集合了从多的运维工具（puppet、chef、func、fabric）的优点，实现了批量系统配置、批量程序部署、批量运行命令等功能。
效好飞·2024-03-08 11:05

光谱下的养殖业：数据可视化的现代变革

然而，随着科技的进步，大数据的兴起，数据可视化为养殖业提供了全面的数据支持。通过将养殖场内各项数据以图表、地图等形式直观呈现，养殖场主和管理者
希艾席蒂恩·2024-03-08 05:28

什么是B+树，和B树有什么不同？

博主介绍：博主从事应用安全和大数据领域，有8年研发经验，5年面试官经验，Java技术专家，WEB架构师，阿里云专家博主，华为云云享专家，51CTO专家博主⛪️个人社区：个人社区个人主页：个人主页专栏地址
激流丶·2024-03-07 20:45

2024年AI助力研发：内容驱动下的全新变革与展望

此外，随着大数据
wd90119·2024-03-07 14:38

Azkaban 大数据 任务调度

参考视频：尚硅谷大数据Azkaban3.x教程（全新发布）_哔哩哔哩_bilibili目录Azkaban：是一个定时、批量工作流任务调度器(工作流程调度，定时调度)常见的开源调度系统：比较：特点：三个关键组件
OutRoading·2024-03-07 13:37

西安-腾讯云-Python面试经验--一面凉经

僵尸进程，孤儿进程f.如何产生一个守护进程g.如何避免僵尸进程或者孤儿进程redisa.持久化方式有哪些，区别是什么b.redis集群有了解么c.rediszset()—底层如何实现（哈希表+跳跃表）和大数据相关的操作
jiet07·2024-03-07 02:53

RAID磁盘阵列部署和管理

（2）掌握RAID的基础运维。基础准备安装CentOS7操作系统主机，并添加4块20GB硬盘。案例实施创建raid0利用磁盘分区新建2个磁盘分区，每个大小为20GB。
XYong-@·2024-03-07 02:23

Raid磁盘阵列并管理

目录优点：缺点命令创建raid0raid5运维操作RAID（RedundantArrayofIndependentDisks）即独立磁盘冗余阵列，通常简称为磁盘阵列。
mhcwz·2024-03-07 01:22

网络安全（黑客）—2024自学

1.网络安全是什么网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
德西德西·2024-03-06 21:17

2022-06-06

大数据真的很神奇，或许这就是吸引力法则吧。和一群人一起坚持了21天。因为喜欢，所以坚持。在另一个地方记录了碎碎念，没有想到有新的收获。尤其是教学反思这块。
小min的花园·2024-03-06 20:26

运维系列：docker部署java项目

docker部署java项目docker部署java项目1、首先你需要提前准备好`jar包`或者`war包`，并想办法放入`Linux环境`(或虚拟机)中；2、`java项目`的部署需要用到`Tomcat`或者`Jetty`，`docker`可以直接拉取他俩的镜像，这里以`Tomcat`为例：3、接下来需要创建一个tomcat的容器:4、创建后需要将`war包`或者`jar包`移动到`tomcat
坦笑&&life·2024-03-06 16:09

大数据，更懂你

作者语：一个致力于用一不本正经的方式讲解一些一本正经的事物，从业多年见过太多一上来就满口专业术语后面做事情渣得不行的真实事件，后来发现原来能用浅显易懂的方式讲解一些高深内容的人都是真正的牛人。作者也致力于网这个方向发展
爱信天下·2024-03-06 12:08

在Linux中使用docker【下】（常见命令下）

在Linux中使用docker【下】（常见命令下）一、Docker介绍二、在Linux中使用Docker的意义2.1轻量级与资源高效2.2快速部署与版本控制2.3隔离与安全2.4简化运维2.5跨平台兼容
长孤秋落·2024-03-06 10:35

如何在十几秒内高效实现几十万条数据的快速插入

本文主要讲述通过MyBatis、JDBC等做大数据量数据插入的案例和结果。
zy_zeros·2024-03-06 09:02

网络安全（黑客）—2024自学

1.网络安全是什么网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
羊村最强沸羊羊·2024-03-06 00:21

网络安全（黑客）—2024自学

1.网络安全是什么网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
羊村最强沸羊羊·2024-03-06 00:21

真快！几分钟就把视频语音识别为文本了，不到10行代码

听说有的公司为了抓取训练数据，已经把抖音、快手这些短视频平台上的视频扒了个遍，然后将其中的音频提取成文本，用作大数据模型的训练语料
诗者才子酒中仙·2024-03-05 23:19

2019-06-07

但于此同时，做公众号编辑器的（如135编辑器），做公众号大数据的
3624土锤·2024-03-05 15:12

运维随录实战（5）之centos搭建jenkins

一，搭建jenkins准备下载安装jdk环境-》版本jdk11下载安装maven环境-》版本maven3.8.8git-》版本1.8.3.1yuminstallgitjenkins安装版本：2.414.3下载地址：https://get.jenkins.io/war-stable/2.414.3/jenkins.war注：jenkins版本与jdk版本有一定的对应关系，版本不对应可能导致后面虽然安
Loren_云淡风轻·2024-03-05 10:32

深入探究Java中equals()和==的区别是什么

=="判断基本类型是否相等.首先基本数据类型指的是Java中的八大数据类型:byte,short,int,long,float,double,char,boolean这八大基本数据类型有个共同的特点是它们在内存中是有具体值的
4553675200ad·2024-03-05 09:30

2019-8-10晨间日记

习惯养成：背诵100个考研英语单词督促雅淇练习汉字专注读书30分钟学习·信息·阅读今天全世界最看好的三种技术：AI，大数据，云计算。这其实是谷歌提出的技术哲学，还存在其他的演进路径。
VisualField·2024-03-04 17:47

NTP网络校时服务器（GPS北斗卫星校时系统）应用场景

NTP网络校时服务器（GPS北斗卫星校时系统）应用场景NTP网络校时服务器（GPS北斗卫星校时系统）应用场景随着大数据、云计算时代的到来,各行业信息化建设的不断提升,信息化下的各个系统不再单独处理各自业务
安徽京准·2024-03-04 16:39

centos服务配置springboot服务开机启动

在做后端服务运维时，经常遇到服务器重启时，需要移动一堆后端服务。服务器故障自动重启时，通常无人通知。把springboot服务的jar包配置开机启动太有必要了，虽然不是很复杂，这里记录一下太有必要了。
GIS开发者·2024-03-04 11:32

如何快速迁移其他云服务器中的网站数据到腾讯云轻量应用服务器中？教你使用宝塔Linux面板迁移网站

使用宝塔Linux面板进行迁移：宝塔Linux面板是一款服务器运维面板，它支持一键部署LAMP、LNMP、集群、监控、网站、FTP、数据库、JAVA等100多项服务器管理功能。因此，使用宝塔L
正宗六脉神剑·2024-03-04 06:25

网络安全（黑客）—2024自学

1.网络安全是什么网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
德西德西·2024-03-04 04:53

做过这三件事的女人，才算真正“见过世面”

不久前，2018中国结婚大数据曝光，全国结婚率再创新低。南开大学教授原新表示，2015年全国30～34岁女性不结婚比例在6%左右，比1990年提高了10倍左右。
Yjxr·2024-03-03 22:11

MySQL运维实战之备份和恢复（8.4）xtrabackup恢复全量备份

作者：俊达恢复全量备份大致可以分成以下几步：解压备份文件、prepare备份文件、将数据copy到目标实例相关目录、启动数据库实例。解压文件如果备份时使用了xbstream，需要先解压备份文件。我们备份时使用了–stream=xbstream和gzip压缩，先使用gunzip接解压缩，再使用xbstream将文件提取出来。#gunzipbackup_full.gz#xbstream-x-vprep
云掣YUNCHE·2024-03-03 08:57

让数据用起来：数据中台建设的评估与选择（第4章）

加强业务与数据融合，利用大数据、机器学习、深度学习等技术进行精准营销、信用风险控制等。第四个阶段：运营优化。开始建设数据中台，快速生产定制化数据服务。企业数据应用能力成熟度可以从
小阳阳兄·2024-03-03 02:20

java 企业工程管理系统软件源码 自主研发 工程行业适用

工程项目管理软件（工程项目管理系统）对建设工程项目管理组织建设、项目策划决策、规划设计、施工建设到竣工交付、总结评估、运维运营，全过程、全方位的对项目进行综合管理工程项目各模块及其功能点清单一、系统管理
微服务 spring cloud·2024-03-03 02:48

Linux系统运维9个实用的shell脚本

看到9个shell脚本范例，运维可以根据实际情况进行修改，9个shell脚本如下：1、Dos攻击防范（自动屏蔽攻击IP）#!
知白守黑V·2024-03-02 23:46

Linux运维_Bash脚本_部署安装DocBook-XSL-1.79.1(XSL-Stylesheets)

Linux运维_Bash脚本_部署安装DocBook-XSL-1.79.1(XSL-Stylesheets)Bash(BourneAgainShell)是一个解释器，负责处理Unix系统命令行上的命令。
Mostcow·2024-03-02 23:15

数据服务安全的重要性

随着大数据、云计算、人工智能等技术的飞速发展，数据已经成为企业和组织的核心资产，数据服务安全也面临着前所未有的挑战。本文将从数据服务安全的重要性、常见威胁、防护策略以及未来发展趋势等方面进行探讨。
SafePloy安策·2024-03-02 06:49

CSP-防疫大数据

是不是最简单的！60行AC！解题思路首先：每日的风险地区是实时更新，所以直接将该region放到Today~Today+7之内；然后：咱采取的思路就是将每条message给他存到每天去。比如这条message是第0天发来的，那么它被存到0~6天的Msg中。比如是第7天来的，那么存到7~(5+7-1)天之中。虽然这样会增加计算判断的message量，但反正这个题也不在乎性能（）代码#includeu
Schwertlilien·2024-03-01 21:06

Linux系统运维命令：查看cache里的URL，即查看系统访问了哪些包含http的url（使用grep结合awk，组合命令实现功能）

目录一、需求二、解决方法1、解决思路2、命令三、实例演示和命令解释1、实例演示2、命令解释四、扩展一、需求想知道某台linux机器最近访问了哪些http的web地址，如何处理？二、解决方法1、解决思路Linux系统访问外部web，也就是外部的http地址，这些数据应该保存在缓存中，所以应该想办法看linux系统的cache，cache中会又从外部web下载下来的一些图片和文本等信息，可以从jpg或
威迪斯特·2024-03-01 17:30

MySQL运维实战之备份和恢复（8.2）xtrabackup备份到云端(OSS)

作者：俊达xtrabackup工具中有一个xbcloud程序，可以将数据库直接备份到S3对象存储中，本地不落盘。这里介绍将数据库直接备份到OSS的一种方法。具体方法如下：1、准备OSS我们使用ossutil工具上传备份文件。下载ossutil工具：wget-Oossutil-v1.7.16-linux-amd64.zip"https://gosspublic.alicdn.com/ossutil/
·2024-03-01 16:40

服务器日常运维工作：探秘技术的前沿

第一章：晨曦中的服务器1.1早晨的第一杯咖啡每天早上，我走进办公室，第一件事就是泡一杯浓郁的咖啡。这杯咖啡不仅是为了提神，更是为了迎接那些等待着我的服务器。它们就像是沉睡的巨人，等待着被唤醒。1.2看门狗的守护服务器的安全是我们的首要任务。我们设置了看门狗程序，定期检查服务器的健康状态。如果有异常，它会立即发出警报，让我们能够迅速采取行动。第二章：故障排除的魔法2.1魔法师的角色故障排除就像是一场
信息安全兴趣爱好者·2024-03-01 10:19
上一页 12 13 14 15 16 17 18 19 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他