运维数据治理

0016-美团OCTO万亿级数据中心计算引擎技术解析

提升研发效率、降低运维成本、提高服务稳定性美团OCTO万亿级数据中心计算引擎技术解析一、OCTO数据中心简介1.1系统介绍1.1.1OCTO系统介绍OCTO是美团标准化的服务治理基础设施，目前几乎覆盖公司所有业务的治理与运营
红苹果_小米粒·2024-01-31 03:47

特性团队和组件团队

比如前端团队、后端团队；比如开发团队、测试团队、运维团队等类似的划分。如泰勒的科学管理中指出：“管理要解决的就是，如何在有限的时间里获取最大程度的产出，也就是如何使劳
尚君领·2024-01-31 02:23

Elastic Stack 7.5 X-Pack 安全功能部署

微信公众号：运维开发故事，作者：double冬场景elasticsearchkibana基本上是多人使用的,所以进行权限控制是必然，以提高安全保障在2019年5月21日，Elastic官方发布消息：ElasticStack
运维开发故事·2024-01-31 02:30

openGauss学习笔记-209 openGauss 数据库运维-常见故障定位案例-共享内存泄露问题

文章目录openGauss学习笔记-209openGauss数据库运维-常见故障定位案例-共享内存泄露问题209.1共享内存泄露问题209.1.1问题现象209.1.2原因分析209.1.3处理方法openGauss
superman超哥·2024-01-31 01:40

openGauss学习笔记-211 openGauss 数据库运维-高危操作一览表

文章目录openGauss学习笔记-211openGauss数据库运维-高危操作一览表211.1禁止操作211.2高危操作openGauss学习笔记-211openGauss数据库运维-高危操作一览表各项操作请严格遵守指导书操作
superman超哥·2024-01-31 01:40

openGauss学习笔记-210 openGauss 数据库运维-常见故障定位案例-谓词下推引起的查询报错

文章目录openGauss学习笔记-210openGauss数据库运维-常见故障定位案例-谓词下推引起的查询报错210.1谓词下推引起的查询报错210.1.1问题现象210.1.2原因分析210.1.3
superman超哥·2024-01-31 01:10

《QT》QT概述

GUI的方案框架软件选择QT优点记住：技术之间有很强的关联性~~互联网岗位介绍互联网的核心岗位如下：开发（程序猿最关注）1）后端开发2）前端开发：又叫大前端开发3）算法工程师4）游戏开发......测试运维产品经理前端开发又有
绅士·永·2024-01-31 01:01

ClickHouse分析效率翻倍提升，揭秘奇点云对归因分析场景的优化实践

奇点云DataKun是大数据集群管理系统，负责企业大数据底层存算及运维，对接并管理离线、实时、图、时序等不同引擎，确保数据能得到高效处理和分析。
奇点云·2024-01-31 00:47

日志：日志打印的15个好建议

日常开发中，我们需要选择恰当的日志级别，不要反手就是打印info哈~error：错误日志，指比较严重的错误，对正常业务有影响，需要运维配置监控的；warn：警告日志，一般的错误，对业务影响不大，但是需要开发关注
wimpykids·2024-01-31 00:39

工作总结！日志打印的15个建议

日常开发中，我们需要选择恰当的日志级别，不要反手就是打印info哈~error：错误日志，指比较严重的错误，对正常业务有影响，需要运维配置监控的；warn：警告
互联网全栈架构·2024-01-31 00:09

日志打印的15个好建议

日常开发中，我们需要选择恰当的日志级别，不要反手就是打印info哈~error：错误日志，指比较严重的错误，对正常业务有影响，需要运维
SZleoWang·2024-01-31 00:38

日志打印的15个建议

error：错误日志，指比较严重的错误，对正常业务有影响，需要运维配置监控的；warn：警告日志，一般的错误，对业务影响不
242030·2024-01-31 00:37

Ansible架构安装与使用＜一＞

1.运维工程师核心职能2.ansible运维工具2.1ansible介绍一款系统开发开源的配置和自动化工具，基于python写成类似于saltstack和Puppet。
神慕蔡蔡·2024-01-31 00:36

【网站搭建】30分钟轻松搭建网站应用

使用免费开源个人博客建站工具WordPress部署博客网站，最终实现：管理员-部署网站并进行日常运维、访客-通过互联网访问博客、浏览文章等。
舒意从生·2024-01-31 00:39

企业微信做运维通知教程

每次使用邮件(不方便)或者短信（没钱）。穷人用法。毕竟能少就剩了不少钱。省的就是赚的。代码只需稍微改下参数。跟逻辑代码就可以搬走。能不能搬走就你自己本事咯。#!/usr/bin/python#-*-coding:utf-8-*-#Author:chencxiaoyu#Email:[email protected]#Date:2017/6/12#Readme:importtimeimpo
数据小菜鸟·2024-01-30 23:44

使用CMap导致服务高CPU

步骤1半夜从睡梦中被叫醒，先自己缕一缕思路（整个人都是懵的，基本缕不出思路），先解决线上问题，让运维保存了一份fulldump，然后重启服务，线上正常，回去睡觉。
睡在床板下·2024-01-30 23:56

故障脚本的重要作用：预防、诊断与恢复

一、预防性作用监控和预警故障脚本可以用于监控系统性能指标，如CPU使用率、内存消耗、网络流量等，一旦系统参数超出设定的阈值，便可触发警报，提醒管理员或运维人员可能存在的问题。
掌动智能·2024-01-30 21:16

服务器运维小技巧（二）——如何进行监控告警

服务器运维难度高的原因，很大程度是因为服务器一旦出现问题，生产环境的业务就会受到严重影响，极有可能带来难以承担的后果。因此这份工作要求工程师保持高要求的服务质量，能够快速响应问题，及时解决问题。
kkong1317·2024-01-30 21:52

关于监控的那些事，你有必要了解一下

监控在整个运维和产品生命周期中扮演着至关重要的角色。其目标是在应用的各个阶段，从程序设计、开发、部署到下线，实现事前预警、事中问题定位和事后问题分析的全方位服务。
kkong1317·2024-01-30 21:52

幻兽帕鲁越玩越卡，内存溢出问题如何解决？

没有服务器运维经验的玩家，很容易束手无策，只能任凭服务器默默重启。在这里教大家一招，使用saas形态的轻量级运维工具，只需要三步，即可对服务器资源情况进行实时监控，出现异
kkong1317·2024-01-30 21:20

网站监测工具的极与极，Site24x7 与百川云

但是它与百川云网站监测完全不一样，百川云网站监测是适合用中小微企业的交互极简的saas应用，Site24x7完全是另一个极端，适合于大型企业，且适合中高级运维人员使用。
A_YSLFWYS·2024-01-30 21:18

服务器运维工具推荐——站长、运维必看！

服务器运维是确保服务器系统稳定运行并保持高效性的重要工作。为了提高运维工作的效率，使用一些优秀的服务器运维工具是非常必要的。
A_YSLFWYS·2024-01-30 21:48

关于监控的那些事，你有必要了解一下

监控在整个运维和产品生命周期中扮演着至关重要的角色。其目标是在应用的各个阶段，从程序设计、开发、部署到下线，实现事前预警、事中问题定位和事后问题分析的全方位服务。
A_YSLFWYS·2024-01-30 21:48

幻兽帕鲁越玩越卡，内存溢出问题如何解决？

没有服务器运维经验的玩家，很容易束手无策，只能任凭服务器默默重启。在这里教大家一招，使用saas形态的轻量级运维工具，只需要三步，即可对服务器资源情况进行实时监控，出现异
A_YSLFWYS·2024-01-30 21:47

使用nslookup命令查询域名系统的信息

文章目录前言常规使用再从linux环境下学点不一样的type选项retry选项timeout选项使用更强大的dig命令总结前言这个命令出现在与运维同学沟通过程中，在此之前要是问我一个域名对应的服务器是IP
AlbertS·2024-01-30 21:47

数据质量和治理论

数据质量和数据治理，这个概念很大不是一两个人可以处理的问题，但是又不得不做，往往需要整个团队或者跨团队协作尽量去处理好这个事情以下是一些方法论数据质量数据质量会带来什么问题：报表数据出错，无人发现数据出现问题
orange大数据技术探索者·2024-01-30 20:41

jrt运维命令改造

以前发布网站都是定死网站放置路径的，现在JRT想面向更广范围推广，所以就不能明确确定网站放置目录，为此需要改造一下jrt命令和sh来满足目录不确定情况和多个程序用不同管理命令的要求。以前是写死的，现在改为调程序运行目录的sh文件，这样程序放置位置就可以随意了改造后的c++#include#include#include#include#include#include#includeusingnam
小乌鱼·2024-01-30 20:32

数据治理宝典！从0-1搭建企业级数据治理体系

数据治理是企业数据建设必不可少的一个环节。好的数据治理体系可以盘活整条数据链路，最大化保障企业数据的采集、存储、计算和使用过程的可控和可追溯。如何构建企业数据治理体系？
小晨说数据·2024-01-30 18:45

Spark 读取、写入时序数据库TDengine以及TDengine概述

TDengine能被广泛运用于物联网、工业互联网、车联网、IT运维、金融等领域。
Alex_81D·2024-01-30 18:10

saltstack——大型环境自动化运维工具

SaltStack、Ansible、Puppet比较1、SaltStack（一般用于大于1000台服务器的公司环境）saltStack由Python编写，为server-client模式的系统，自己本身支持多master。运行模式为master端下发指令，客户端接收指令执行。saltstack依赖于zeromq消息队列，采用yaml格式编写配置文件，比较简单。支持api及自定义python模块，能
KFC质检员·2024-01-30 18:22

关于监控的那些事，你有必要了解一下

监控在整个运维和产品生命周期中扮演着至关重要的角色。其目标是在应用的各个阶段，从程序设计、开发、部署到下线，实现事前预警、事中问题定位和事后问题分析的全方位服务。
云宝的黑客对抗日记·2024-01-30 18:19

幻兽帕鲁越玩越卡，内存溢出问题如何解决？

没有服务器运维经验的玩家，很容易束手无策，只能任凭服务器默默重启。在这里教大家一招，使用saas形态的轻量级运维工具，只需要三步，即可对服务器资源情况进行实时监控，出现异
云宝的黑客对抗日记·2024-01-30 18:48

云计算运维 · 第三阶段 · shell编程2

学习b记·第三阶段一、shell编程1、数值运算1)expr2)$(())3)$[]#前面这三个直接echo测试就可4)let#这个可以直接运算变量5)bc#支持小数#输入两个随机数进行运算#!/bin/bashecho$1+$2'='`echo$1+$2|bc`echo$1-$2'='`echo$1-$2|bc`echo$1*$2'='`echo$1*$2|bc`echo$1/$2'='`ech
Dragon_qu·x·2024-01-30 18:38

云计算运维 · 第三阶段 · gitlib

学习b记·第三阶段三、持续集成1、gitlibGitLab是一个用于仓库管理系统的开源项目。使用Git作为代码管理工具，并在此基础上搭建起来的web服务。可通过Web界面进行访问公开的或者私人项目。它拥有与Github类似的功能，能够浏览源代码，管理缺陷和注释。可以管理团队对仓库的访问，它非常易于浏览提交过的版本并提供一个文件历史库。团队成员可以利用内置的简单聊天程序(Wall)进行交流。它还提供
Dragon_qu·x·2024-01-30 18:38

云计算运维 · 第二阶段 · Ansible_playbook · 变量

学习b记·第二阶段十五、Ansible_playbook1、什么是PlayBookplay:定义的是主机的角色。task:定义的是具体执行的任务。playbook:由一个或多个play（角色）组成，一个play（角色）可以包含多个task。简单理解为:使用不同的模块完成一件事情2、PlayBook与ad-hoc1）PlayBook功能比ad-hoc更全，是对ad-hoc的一种编排.2）PlayBo
Dragon_qu·x·2024-01-30 18:08

云计算运维 · 第二阶段 · Ansible流程控制

学习b记·第二阶段十六、Ansible流程控制1、playbook条件语句不管是shell还是各大编程语言中，流程控制，条件判断这些都是必不可少的，在我们使用Ansible的过程中，条件判断的使用频率极其高。例如：1）我们使用不同的系统的时候，可以通过判断系统来对软件包进行安装。2）在nfs和rsync安装过程中，客户端服务器不需要推送配置文件，之前我们都是写多个play，会影响效率。3）我们在源
Dragon_qu·x·2024-01-30 18:08

云计算运维 · 第三阶段 · shell编程

学习b记·第二阶段一、shell编程1、什么是shellshell是一种命令语言，是为使用者提供操作界面的一种软件，软件可以接收用户的命令，并且执行用户输入的命令，然后对相应的程序进行调用。2、shell可以分为两种方式1）shell命令行式例如一些系统linux，从传统的意义上来说，如果不去注明的话，shell一般是命令行式。shell是传统操作和外部的接口，shell是操作系统的最外层，并且管
Dragon_qu·x·2024-01-30 18:08

云计算运维 · 第二阶段 · Ansible

学习b记·第二阶段十三、Ansible1、什么是Ansible？Ansible是一个自动化统一配置管理工具，自动化主要体现在Ansible集成了丰富模块以及功能组件，可以通过一个命令完成一系列的操作，进而能减少重复性的工作和维护成本，可以提高工作效率。2、Ansible的架构1）连接插件connectionplugins用于连接主机用来连接被管理端2）核心模块coremodules连接主机实现操作
Dragon_qu·x·2024-01-30 18:07

云计算运维 · 第三阶段 · git

学习b记·第三阶段三、持续集成1、git#安装yum-yinstallgit[root@git-git~]#gitconfig–-globaluser.name"qxl"#配置git使用用户[root@git-git~]#gitconfig–-globaluser.email"[email protected]"#配置git使用邮箱[root@git-git~]#gitconfig–-globalcolor
Dragon_qu·x·2024-01-30 18:36

企业专业运维管理的“金牌辅助”——源启一体化监控平台上线啦

本期继续为大家介绍“帮帮团”的第二位骨干也是企业专业运维管理的“金牌辅助”源启一体化监控平台随着云原生的快速发展虚拟化、云平台、分布式、微服务容器等技术被广泛应用给企业数字化转型带来全新选择的同时也让整个
中电金信·2024-01-30 17:37

华为机试真题实战应用【赛题代码篇】-工单调度策略（附Java和C++代码）

假设华为与运营商A签订了运维合同，部署了一套调度系统，只有1个外线工程师（FME），每个工单根据问题严重程度会给一个评分，在SLA时间内完成修复的
林聪木·2024-01-30 16:37

客户心声 | 纸笺传赞誉，璞华科技智慧政务事业部多次收获客户表扬信！

璞华科技秉承“帮助客户实现数智化转型升级”的企业使命，时刻谨记以专业能力和创新精神为客户创造价值，始终把客户利益放在首位，最终以过硬的技术能力、优秀的产品品质、贴心的运维服务获得了客户的高度认同！
璞华Purvar·2024-01-30 16:06

程序人生系列1-2021年通过私活累积收益1.5w

博主在B站更新了接私活的视频，感兴趣的可以移步到我的B站:博主私活记录一.个人介绍  2011年毕业，计算机专业科班出身，10年及以上金融信贷、通信行业数据库运维管理、数据仓库及大数据相关工作经验，持有
只是甲·2024-01-30 15:51

数据治理实践 | 网易某业务线的计算资源治理

由于数据治理层面可以分多个层面且内容繁多（包括模型合规、数据质量、数据安全、计算/存储资源、数据价值等治理内容），因此需要单独拆分为6个模块单独去阐述其中内容。
语兴数据·2024-01-30 15:29

数据治理实践 | 小文件治理

前言感谢关注，可以关注B站同名：语兴呀或公众号语数获取资料。小文件是数仓侧长期头痛问题，它们会占用过多的存储空间，影响查询性能。因此，我们需要采取一些措施来对小文件进行治理，以保证Hive的高效性和稳定性。在本文中，我将介绍Hive中小文件治理的方法和技巧，希望对大家有所帮助。背景小文件是如何产生的：日常任务及动态分区插入数据（使用的Spark2MapReduce引擎），产生大量的小文件，从而导致
语兴数据·2024-01-30 15:29

部署在docker容器中的pg数据库同步操作

前言：今天接到一个运维需求，将部署在docker容器中的pg数据组做一个服务器的定时同步任务，但网上大部分都是直接安装在服务器上的，所以本次记录如何在宿主机进行pgsql的docker容器进行dump备份第一步
失落的IT流浪汉·2024-01-30 15:26

23国赛网络建设与运维正式赛题10.mariadb 服务11.podman 服务

14.mariadb服务任务描述：请安装mariadb服务，建立数据表。（1）配置linux2为mariadb服务器，创建数据库用户xiao，在任意机器上对所有数据库有完全权限。（2）创建数据库userdb；在库中创建表userinfo，表结构如下：字段名数据类型主键自增idint是是namevarchar(10)否否birthdaydatetime否否sexvarchar(5)否否passwor
南港清风i·2024-01-30 14:06

Day28-shell编程基础

Shell编程是Linux运维人员必须要学会的编程语言。最简单的编程语言。编程也是运维人员必须具备的本领：shell、Python。二、什么是shell？
王亚楠ooo·2024-01-30 14:09

23国赛网络建设与运维正式赛题4.apache2服务和5.nginx 和 tomcat 服务

4.apache2服务任务描述：请采用Apache搭建企业网站。（1）配置linux1为Apache2服务器，使用skills.lan或any.skills.lan（any代表任意网址前缀，用linux1.skills.lan和web.skills.lan测试）访问时，自动跳转到www.skills.lan。禁止使用IP地址访问，默认首页文档/var/www/html/index.html的内容为
南港清风i·2024-01-30 14:02

浅谈数据中台架构设计

中台这个词在互联网行业现在越来越火了，从以前对中台一词的争议，到现在演变成各种中台产品林立，加上阿里百度等中台架构的成功，可以看到中台产品在未来一段时间都会是互联网行业非常火爆的赛道，尤其是数据中台更会是很多企业采纳的数据治理方案
何处生才·2024-01-30 14:51
上一页 17 18 19 20 21 22 23 24 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他