运维大数据文件系统hadoop

【吊打面试官系列】Java虚拟机JVM篇 - 关于类加载器的JVM面试题

类加载器负责加载文件系统、网络或其他来源的类文件。类加载器有哪些？有三种默认使用的类加载器：Bootstrap类加载器、Extension类加载器和Application类加载器。每种类
java1234_小锋·2024-03-09 22:53

Hive SQL 开发指南（三）优化及常见异常

在大数据领域，HiveSQL是一种常用的查询语言，用于在Hadoop上进行数据分析和处理。为了确保代码的可读性、维护性和性能，制定一套规范化的HiveSQL开发规范至关重要。
大数据_苡~·2024-03-09 14:13

Linux文件系统的目录结构详解

二、目录1、什么是文件系统2、文件系统的类型3、目录结构的详细解读4、一些重要子目录的解读5、附录：目录结构的简明查阅手册三、正文我想，不光是我，对于每一个Linux学习者来说，了解Linux文件系统的目录结构
wdsoft·2024-03-09 12:10

Linux文件系统目录结构的详细解说(一)

·摘要：当您使用Linux文件系统的时候，如果您通过ls–l/就会发现，在/下包涵很多的目录，比如etc、usr、var、bin......等目录，而在这些目录中，我们进去看看，发现也有很多的目录或文件
LevinLin·2024-03-09 12:40

docker-swarm集群管理命令

当前个人负责的项目基本上后端只有一个人，运维也比较费时费力。就想着搭建一个集群，对比了k8s、k3s和d
chenzfp·2024-03-09 12:39

大数据开发（Hadoop面试真题-卷九）

大数据开发（Hadoop面试真题）1、Hivecount(distinct)有几个reduce，海量数据会有什么问题？
Key-Key·2024-03-09 10:06

网络安全（黑客）—2024自学

1.网络安全是什么网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
羊村最强沸羊羊·2024-03-09 10:06

如何成为fpga工程师

FPGA的应用领域非常的广，尤其再人工智能，大数据，云计算等等方向非常吃香。
宸极FPGA_IC·2024-03-09 04:29

MySQL运维实战之备份和恢复（8.6）将数据库恢复到指定时间点

作者：俊达恢复到指定时间点使用全量备份和增量备份文件，都只能将数据库恢复到备份结束的时间。通过binlog，可以将数据库恢复到任意时间点（前提是备份和该时间点之间的binlog都存在）。找到时间点对应的binlog恢复到时间点，首先需要定位该时间点对应的binlog位点（binlog文件和文件内的偏移量）。每个binlog头部都记录了该binlog产生的时间，我们可以使用mysqlbinlog工具
云掣YUNCHE·2024-03-08 21:48

大数据开源框架技术汇总

主要基于对现阶段一些常用的大数据开源框架技术的整理，只是一些简单的介绍，并不是详细技术梳理。可能会有疏漏，发现再整理。参考的太多，就不一一列出来了。这只是作为一个梳理，对以后选型或者扩展的做个参考。
浪尖聊大数据-浪尖·2024-03-08 20:48

【Linux-磁盘管理】

Linux-磁盘管理■df（英文全称：diskfree）列出文件系统的整体磁盘使用量■du（英文全称：diskused）检查磁盘空间使用量■fdisk用于磁盘分区■df（英文全称：diskfree）列出文件系统的整体磁盘使用量
光芒Shine·2024-03-08 18:45

408近年大题真题总结（后续整理入笔记）

文章目录前言题型分析算法设计题系统分析题内存+cache题虚拟内存PV操作文件系统IO系统计网综合（重点）复习建议前言本文并不是多么细致地讲解大题，而是告诉你大题都考什么，让你心理有个底，因为我自己就是刚开始只学东西
亦梦亦醒乐逍遥·2024-03-08 11:05

自动化运维工具----Ansible入门详解

1.ansible是新出现的自动化运维工具，基于python开发，集合了从多的运维工具（puppet、chef、func、fabric）的优点，实现了批量系统配置、批量程序部署、批量运行命令等功能。
效好飞·2024-03-08 11:05

光谱下的养殖业：数据可视化的现代变革

然而，随着科技的进步，大数据的兴起，数据可视化为养殖业提供了全面的数据支持。通过将养殖场内各项数据以图表、地图等形式直观呈现，养殖场主和管理者
希艾席蒂恩·2024-03-08 05:28

什么是B+树，和B树有什么不同？

博主介绍：博主从事应用安全和大数据领域，有8年研发经验，5年面试官经验，Java技术专家，WEB架构师，阿里云专家博主，华为云云享专家，51CTO专家博主⛪️个人社区：个人社区个人主页：个人主页专栏地址
激流丶·2024-03-07 20:45

linux大版本之间的区别和特性

具体分析如下：Linux内核版本：是操作系统的核心部分，它提供了操作系统的基本功能和底层支持，如内存管理、文件系统、设备驱动等。
编织幻境的妖·2024-03-07 17:12

2024年AI助力研发：内容驱动下的全新变革与展望

此外，随着大数据
wd90119·2024-03-07 14:38

Azkaban 大数据 任务调度

参考视频：尚硅谷大数据Azkaban3.x教程（全新发布）_哔哩哔哩_bilibili目录Azkaban：是一个定时、批量工作流任务调度器(工作流程调度，定时调度)常见的开源调度系统：比较：特点：三个关键组件
OutRoading·2024-03-07 13:37

西安-腾讯云-Python面试经验--一面凉经

僵尸进程，孤儿进程f.如何产生一个守护进程g.如何避免僵尸进程或者孤儿进程redisa.持久化方式有哪些，区别是什么b.redis集群有了解么c.rediszset()—底层如何实现（哈希表+跳跃表）和大数据相关的操作
jiet07·2024-03-07 02:53

RAID磁盘阵列部署和管理

（2）掌握RAID的基础运维。基础准备安装CentOS7操作系统主机，并添加4块20GB硬盘。案例实施创建raid0利用磁盘分区新建2个磁盘分区，每个大小为20GB。
XYong-@·2024-03-07 02:23

Raid磁盘阵列并管理

目录优点：缺点命令创建raid0raid5运维操作RAID（RedundantArrayofIndependentDisks）即独立磁盘冗余阵列，通常简称为磁盘阵列。
mhcwz·2024-03-07 01:22

网络安全（黑客）—2024自学

1.网络安全是什么网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
德西德西·2024-03-06 21:17

2022-06-06

大数据真的很神奇，或许这就是吸引力法则吧。和一群人一起坚持了21天。因为喜欢，所以坚持。在另一个地方记录了碎碎念，没有想到有新的收获。尤其是教学反思这块。
小min的花园·2024-03-06 20:26

运维系列：docker部署java项目

docker部署java项目docker部署java项目1、首先你需要提前准备好`jar包`或者`war包`，并想办法放入`Linux环境`(或虚拟机)中；2、`java项目`的部署需要用到`Tomcat`或者`Jetty`，`docker`可以直接拉取他俩的镜像，这里以`Tomcat`为例：3、接下来需要创建一个tomcat的容器:4、创建后需要将`war包`或者`jar包`移动到`tomcat
坦笑&&life·2024-03-06 16:09

大数据，更懂你

作者语：一个致力于用一不本正经的方式讲解一些一本正经的事物，从业多年见过太多一上来就满口专业术语后面做事情渣得不行的真实事件，后来发现原来能用浅显易懂的方式讲解一些高深内容的人都是真正的牛人。作者也致力于网这个方向发展
爱信天下·2024-03-06 12:08

在Linux中使用docker【下】（常见命令下）

在Linux中使用docker【下】（常见命令下）一、Docker介绍二、在Linux中使用Docker的意义2.1轻量级与资源高效2.2快速部署与版本控制2.3隔离与安全2.4简化运维2.5跨平台兼容
长孤秋落·2024-03-06 10:35

如何在十几秒内高效实现几十万条数据的快速插入

本文主要讲述通过MyBatis、JDBC等做大数据量数据插入的案例和结果。
zy_zeros·2024-03-06 09:02

CentOS部署FastDFS+Nginx并实现远程访问本地服务器中文件

文章目录前言1.本地搭建FastDFS文件系统1.1环境安装1.2安装libfastcommon1.3安装FastDFS1.4配置Tracker1.5配置Storage1.6测试上传下载1.7与Nginx
芷栀夏·2024-03-06 05:27

网络安全（黑客）—2024自学

1.网络安全是什么网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
羊村最强沸羊羊·2024-03-06 00:21

网络安全（黑客）—2024自学

1.网络安全是什么网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
羊村最强沸羊羊·2024-03-06 00:21

真快！几分钟就把视频语音识别为文本了，不到10行代码

听说有的公司为了抓取训练数据，已经把抖音、快手这些短视频平台上的视频扒了个遍，然后将其中的音频提取成文本，用作大数据模型的训练语料
诗者才子酒中仙·2024-03-05 23:19

2019-06-07

但于此同时，做公众号编辑器的（如135编辑器），做公众号大数据的
3624土锤·2024-03-05 15:12

运维随录实战（5）之centos搭建jenkins

一，搭建jenkins准备下载安装jdk环境-》版本jdk11下载安装maven环境-》版本maven3.8.8git-》版本1.8.3.1yuminstallgitjenkins安装版本：2.414.3下载地址：https://get.jenkins.io/war-stable/2.414.3/jenkins.war注：jenkins版本与jdk版本有一定的对应关系，版本不对应可能导致后面虽然安
Loren_云淡风轻·2024-03-05 10:32

深入探究Java中equals()和==的区别是什么

=="判断基本类型是否相等.首先基本数据类型指的是Java中的八大数据类型:byte,short,int,long,float,double,char,boolean这八大基本数据类型有个共同的特点是它们在内存中是有具体值的
4553675200ad·2024-03-05 09:30

2019-8-10晨间日记

习惯养成：背诵100个考研英语单词督促雅淇练习汉字专注读书30分钟学习·信息·阅读今天全世界最看好的三种技术：AI，大数据，云计算。这其实是谷歌提出的技术哲学，还存在其他的演进路径。
VisualField·2024-03-04 17:47

NTP网络校时服务器（GPS北斗卫星校时系统）应用场景

NTP网络校时服务器（GPS北斗卫星校时系统）应用场景NTP网络校时服务器（GPS北斗卫星校时系统）应用场景随着大数据、云计算时代的到来,各行业信息化建设的不断提升,信息化下的各个系统不再单独处理各自业务
安徽京准·2024-03-04 16:39

centos服务配置springboot服务开机启动

在做后端服务运维时，经常遇到服务器重启时，需要移动一堆后端服务。服务器故障自动重启时，通常无人通知。把springboot服务的jar包配置开机启动太有必要了，虽然不是很复杂，这里记录一下太有必要了。
GIS开发者·2024-03-04 11:32

如何快速迁移其他云服务器中的网站数据到腾讯云轻量应用服务器中？教你使用宝塔Linux面板迁移网站

使用宝塔Linux面板进行迁移：宝塔Linux面板是一款服务器运维面板，它支持一键部署LAMP、LNMP、集群、监控、网站、FTP、数据库、JAVA等100多项服务器管理功能。因此，使用宝塔L
正宗六脉神剑·2024-03-04 06:25

网络安全（黑客）—2024自学

1.网络安全是什么网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
德西德西·2024-03-04 04:53

做过这三件事的女人，才算真正“见过世面”

不久前，2018中国结婚大数据曝光，全国结婚率再创新低。南开大学教授原新表示，2015年全国30～34岁女性不结婚比例在6%左右，比1990年提高了10倍左右。
Yjxr·2024-03-03 22:11

MySQL运维实战之备份和恢复（8.4）xtrabackup恢复全量备份

作者：俊达恢复全量备份大致可以分成以下几步：解压备份文件、prepare备份文件、将数据copy到目标实例相关目录、启动数据库实例。解压文件如果备份时使用了xbstream，需要先解压备份文件。我们备份时使用了–stream=xbstream和gzip压缩，先使用gunzip接解压缩，再使用xbstream将文件提取出来。#gunzipbackup_full.gz#xbstream-x-vprep
云掣YUNCHE·2024-03-03 08:57

【Hadoop】在spark读取clickhouse中数据

读取clickhouse数据库数据importscala.collection.mutable.ArrayBufferimportjava.util.Propertiesimportorg.apache.spark.sql.SaveModeimportorg.apache.spark.sql.SparkSessiondefgetCKJdbcProperties(batchSize:String="
方大刚233·2024-03-03 06:54

【Hadoop】使用Metorikku框架读取hive数据统计分析写入mysql

一、定义作业文件作业文件该文件将包括输入源、输出目标和要执行的配置文件的位置，具体内容如下metrics:-/user/xrx/qdb.yaml#此位置为hdfs文件系统目录inputs:output:
方大刚233·2024-03-03 06:23

让数据用起来：数据中台建设的评估与选择（第4章）

加强业务与数据融合，利用大数据、机器学习、深度学习等技术进行精准营销、信用风险控制等。第四个阶段：运营优化。开始建设数据中台，快速生产定制化数据服务。企业数据应用能力成熟度可以从
小阳阳兄·2024-03-03 02:20

java 企业工程管理系统软件源码 自主研发 工程行业适用

工程项目管理软件（工程项目管理系统）对建设工程项目管理组织建设、项目策划决策、规划设计、施工建设到竣工交付、总结评估、运维运营，全过程、全方位的对项目进行综合管理工程项目各模块及其功能点清单一、系统管理
微服务 spring cloud·2024-03-03 02:48

Linux系统运维9个实用的shell脚本

看到9个shell脚本范例，运维可以根据实际情况进行修改，9个shell脚本如下：1、Dos攻击防范（自动屏蔽攻击IP）#!
知白守黑V·2024-03-02 23:46

Linux运维_Bash脚本_部署安装DocBook-XSL-1.79.1(XSL-Stylesheets)

Linux运维_Bash脚本_部署安装DocBook-XSL-1.79.1(XSL-Stylesheets)Bash(BourneAgainShell)是一个解释器，负责处理Unix系统命令行上的命令。
Mostcow·2024-03-02 23:15

Spark-sql Adaptive Execution动态调整分区数量，调整输出文件数

看看这个参数如何运用：我们的spark-sql版本：[hadoop@666~]$spark-sql--versionWelcometo______/__
不想起的昵称·2024-03-02 15:03

求生之路2服务器消息,求生之路2服务器公告设置

求生之路2服务器公告设置内容精选换一换将NFS文件系统挂载到WindowsIIS服务器时，报错路径格式不支持，挂载失败。IISWeb服务器的物理路径错误。根据可能原因进行故障排查。
123你走吧你走吧·2024-03-02 11:27

hadoop里需要的libhadoop.so版本不一致导致问题及解决办法

$HADOOP_HOME/lib/native/Linux-amd64-64(64位操作系统)$HADOOP_HOME/lib/native/Linux-i386-32（32位操作系统）文件夹中的libhadoop.so
weixin_34304013·2024-03-02 09:23
上一页 17 18 19 20 21 22 23 24 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他