大数据平台-日常运维

武汉ISO27001认证审核流程五步曲

这里先跟随我们武汉正易信息科技小编看一下具体的审核流程：1、现状调研从日常运维、管理机制、系统配置等方面对贵公司信息安全管理安全现状进行调研，通过培训使贵公司相关人员全面了解信息安全管理的基本知识。
武汉好地科技～企证易·2023-09-20 00:58

HIVE控制导出数据的大小和数量

工作中碰到个需求，需要我去SFTP服务器采集HIVE导出的数据，由于这个大数据平台设计问题，很多东西没考虑到，他们的导出方式是用HIVE提供的insertoverwritelocaldirectory这个语句来导出
润土1030·2023-09-19 20:56

DataWorks 全新发布：增强分析/数据建模个人版等新能力

DataWorks、Hologres为核心，致力于解决用户多元化数据的计算需求问题，实现存储、调度、元数据管理上的一体化架构融合，支撑交通、金融、科研、等多场景数据的高效处理，是目前国内最早自研、应用最为广泛的一体化大数据平台
·2023-09-19 17:23

从一个死锁问题分析优化器特性

作者：李锡超，一个爱笑的江苏苏宁银行数据库工程师，主要负责数据库日常运维、自动化建设、DMP平台运维。擅长MySQL、Python、Oracle，爱好骑行、研究技术。
·2023-09-19 17:23

相伴六年，Smartbi与荣耀共建数据化运营新生态

——荣耀大数据平台产品经理赵黄起随着中国科技企业迅速发展，越来越多科技企业开始意识到自主研发和创新的重要性，为了摆脱对国外技术的依赖性，他们
·2023-09-19 17:46

HTML学生中秋节日网页设计模板 DIV布局大学生中秋节网页作业制作 八月十五中秋静态网页成品代码下载 中秋节日网页设计作品

获取更多优质源码】web前端期末大作业：【毕设项目精品实战案例(1000套)】程序员有趣的告白方式：【HTML七夕情人节表白网页制作(110套)】超炫酷的Echarts大屏可视化源码：【echarts大屏展示大数据平台可视化
STU网页优选·2023-09-19 15:32

TDengine 与煤矿智能 AI 视频管理系统实现兼容性互认

近日，涛思数据旗下高性能、分布式的物联网、工业大数据平台TDengineV
涛思数据（TDengine）·2023-09-19 05:46

生成式AI搭台，Data+Analytics唱戏 - Snowflake、Databricks2023年度大会前瞻

编者按：每年仲夏之际，全球两大数据平台巨头Snowflake、Databricks均会召开各自的年度大会，成为数据圈的“超级碗”。
云器科技·2023-09-18 23:07

智慧校园电子班牌系统开发 整套商业源码

“智慧校园电子班牌系统”主要针对中小学校园研发，为校园管理提供智慧管理方案，提供校园智慧管理平台，在大数据平台下，对应用系统进行统一、集中管理，囊括校园管理全方面，实现对校园、班级、教师、学生的管理，让管理更多面
淘源码d·2023-09-18 19:04

智慧校园源码，电子班牌人脸识别系统，智慧校园小程序源码

“智慧校园电子班牌系统”主要针对中小学校园研发，为校园管理提供智慧管理方案，提供校园智慧管理平台，在大数据平台下，对应用系统进行统一、集中管理，囊括校园管理全方面，实现对校园、班级、教师、学生的管理，让管理更多面
淘源码d·2023-09-18 19:04

TDengine 3.1.1.0 来啦！更新如下

写在前面伴随2023年9月官网改版，TDengine正式升级为高性能、分布式的物联网、工业大数据平台，提供TDengineEnterprise、TDengineCloud两大版本，在开源、云
·2023-09-18 16:59

TDengine 与煤矿智能 AI 视频管理系统实现兼容性互认

近日，涛思数据旗下高性能、分布式的物联网、工业大数据平台TDengineV
·2023-09-18 15:27

分析hdfs文件变化及监控小文件

1、文档编写目的目前各个企业都在利用Hadoop大数据平台，每天都会通过ETL产生大量的文件到hdfs上，如何有效的去监测数据的有效性，防止数据的无限增长导致物理资源跟不上节奏，我们必须控制成本，让有限的资源发挥大数据的极致功能
jhonshonjs·2023-09-18 15:48

数据中台基本概念

数据中台依赖于大数据平台完成数据研发全流程，同时增加了数据治理和数据服务化以及数据资
躺着听Jay·2023-09-18 10:19

HDP服务器上spark-sql联通hive元数据库

问题描述：金山云大数据平台(基于HDP)服务器上跑批数据加工脚本时，发现当中通过spark-sql执行的脚本没有执行，提示没有找到数据库；新打session窗口测试，通过spark-sql连接yarn后
NightFall丶·2023-09-17 23:44

IDEA Windows下SPARK连接Hive

文章目录IDEAWindows下SPARK连接Hive一、本地Windows环境配置二、IDEA项目配置1.POM配置2.资源文件配置3.测试验证一、本地Windows环境配置本地构建HADOOP客户端将大数据平台的
NightFall丶·2023-09-17 23:44

Apache Spark 在爱奇艺的应用实践

01ApacheSpark在爱奇艺的现状ApacheSpark是爱奇艺大数据平台主要使用的离线计算框架，并支持部分流计算任务，用于数据处理、数据同步、数据查询分析等场景：数据处理：在数据开发平台中支持开发者提交
爱奇艺技术产品团队·2023-09-17 09:39

Hive参数与性能调优-V2.0

Hive作为大数据平台举足轻重的框架，以其稳定性和简单易用性也成为当前构建企业级数据仓库时使用最多的框架之一。
000X000·2023-09-16 21:54

大数据安全组件-Kerberos认证+Ranger权限研究

大数据的安全管控权限的管控，历来是大数据平台中最让人头疼的问题之一。管得严了，业务不流畅，用户不开心，放得宽了，安全没有底，你能放心？
振宅的博客·2023-09-16 12:40

【ODPS新品发布第1期】DataWorks全新发布：增强分析/数据建模个人版等新能力

DataWorks、Hologres为核心，致力于解决用户多元化数据的计算需求问题，实现存储、调度、元数据管理上的一体化架构融合，支撑交通、金融、科研、等多场景数据的高效处理，是目前国内最早自研、应用最为广泛的一体化大数据平台
阿里云大数据AI技术·2023-09-16 09:55

企业可以自己建立大数据平台吗？有哪些好处？

因此不少企业在问，企业可以自己建立大数据平台吗？有哪些好处？企业可以自己建立大数据平台吗？有哪些好处？答案肯定是可以的。有条件的企业可以建立属于自己的大数据平台。
行云管家·2023-09-15 17:23

TDengine 3.1.1.0 来啦！更新如下

写在前面伴随2023年9月官网改版，TDengine正式升级为高性能、分布式的物联网、工业大数据平台，提供TDengineEnterprise、TDengineCloud两大版本，在开源、云
涛思数据（TDengine）·2023-09-15 11:14

es curl _delete_by_query 根据条件删除

使用场景在日常运维中，必不可免的需要对es中的数据进行一些删除，尤其是基于条件的删除。
isowang·2023-09-14 18:54

网页期末作业 基于HTML+CSS中国传统节日【清明节】带论文8000字

获取更多优质源码】web前端期末大作业：【毕设项目精品实战案例(1000套)】程序员有趣的告白方式：【HTML七夕情人节表白网页制作(110套)】超炫酷的Echarts大屏可视化源码：【echarts大屏展示大数据平台可视化
IT芷君·2023-09-14 14:11

【hbase】按时间段批量删除hbase数据

背景是华为大数据平台mrs，这里运用到HDFS、Hive、HBase；数据通过接口接入到hbase，用hive创建hbase外部表。需求是某段时间数据有问题，需要删掉重新补入。
彧覇不能·2023-09-14 10:37

Shell脚本中实现hbase shell命令调用

为了优化性能，大数据平台上的HBase表需要在脚本跑批过程中对创建的索引进行rebuild，因此说明下如何在shell中实现hbase语句调用。
八幡大老师·2023-09-14 08:45

redis使用实践

日常运维Redis需要注意什么？部署Redis时，如何做好资源规划？Redis监控重点要关注哪些指标？尤其是当你的项目越来越依赖Redis时，这些问题就变得尤为重要。
那一抹阳光爱发呆·2023-09-14 03:34

Hive数据仓库实战

Hive作为大数据平台Hadoop之上的主流应用，公司一般都是用它作为公司的数据仓库，分布式机器学习的训练数据和数据处理也经常用它来处理，下面介绍下它的常用功能。
充电了么·2023-09-14 02:28

网工内推 | 运营商技术支持，数通基础扎实，最高17k

01新华三技术有限公司招聘岗位：运营商技术支持工程师职责描述：1、负责新华三产品产品和方案在运营商客户的日常运维和技术支持；2、为运营商客户提供网上问题处理、业务变更支持；3、负责对应运营商客户日常维系
HCIE考证研究所·2023-09-14 01:08

大数据平台迁移后yarn连接zookeeper 异常分析

大数据平台迁移后yarn连接zookeeper异常分析XX保险HDP大数据平台机房迁移异常分析。
岁月的眸·2023-09-13 00:03

大数据平台环境部署手册(CDH6.0.0)

目录1系统环境-1-2文件下载-1-2.1Centos7-1-2.2ClouderaManager6.0.0-1-2.3CDH6.0.0-1-3环境准备（一）-1-3.1更改hosts-1-3.2关闭防火墙-2-3.3修改Linuxswappiness参数-2-3.4设置透明大页面-2-3.5安装jdk-3-3.6安装httpd-3-3.7所有节点配置NTP服务，保持时间同步-3-3.8禁用Sel
Together_aec7·2023-09-12 20:54

大数据精准营销大数据平台应用场景有哪些，平台优势有哪些？

精准营销大数据平台应用场景有很多种，比如在银行领域，我通过相应的客户数据，也可以给客户推广一些银行业务。
浪浪的数据侠客·2023-09-12 18:52

领悟MMM

读懂MMMPostedon2017-04-12李庐年PostedinPMI培训教程,PMI推广,PMI讲座,心态运作,模式原理,精华荟萃MMM金融互助社区是陌生人之间互相帮助（捐款）的互联网+大数据平台
a大漠飞沙·2023-09-12 15:24

【客户案例】脊叶架构(Spine-Leaf)的云化园区网络部署实践

云化园区网络解决方案介绍云化园区解决方案案例一：国内某大型互联网公司总部园区，生产环境稳定运行两年多需求背景传统园区网络架构的复杂、臃肿给国内某大型互联网公司的总部园区网络使用体验和日常运维带来许多挑战
星融元asterfusion·2023-09-12 06:14

民航数据智能微应用集市

前言倘若有一个国内的全航空领域的大数据平台及集市，或者有国家相关职能部门所领导的建设方向。个人的架构实现建议及技术领域突破方向简要罗列如下。背景理解以一国家行为为驱使的特定行业数据中心及应用集市建设。
67fbeff17243·2023-09-11 00:14

漫谈“智慧税务”

作为一名税收信息化建设战线上的老兵，我参与了全国金税三期推广，参与了我省电子税务局的开发和大数据平台的建设。
风的流星·2023-09-10 20:58

大数据平台之数据治理

目录一、表治理二、文件治理三、任务四、监控本文仅在大数据平台角度对数据存储、cpu、内存角度进行数据治理，不包括业务角度。
9随遇而安·2023-09-10 07:54

年后开工，总是一波三折…

领导们三天一个小计划，五天一个大计划，天天喊口号号召，我们要做大数据平台，要做大运营，听说区块链不行了？那我们就赶上短视频风口，一定要有流量，不然都不行。然后呢？
伪装的柚子·2023-09-10 07:38

Nature Plants：将节节麦基因组导入小麦作为谷物改良的基础

此项研究中4个新参考基因组的组装数据和注释文件已存储于国家基因库生命大数据平台（CNGBdb），项目编号为：CNP0001325。研究背景增加作物产量对于养活世界上不
尐尐呅·2023-09-10 04:01

企业大数据平台面临的技术挑战

企业大数据的实施过程中，仍然面临很多技术挑战，涉及数据采集与获取、数据存储与查询、数据处理与计算、数据挖掘与学习、数据理解与应用、数据管理与扩展等方面。在数据理解与应用方面，存在以下几个方面的技术挑战：丰富的可视化。在数据工作的末端，数据可视化是帮助终端客户理解数据过程和结果的关键手段。传统的可视化主要通过三维以下的图、表等方式展现，并且数据容量较小。在海量数据规模下却很难应对，例如如何展示超过三
皮皮杂谈·2023-09-10 03:44

Shell脚本中常用的特殊符号 - 运维总结

在日常运维工作中，经常会碰到需要在一个字符串中截取我们需要的某些字符的需求，之前介绍了Shell脚本中数组的使用方法，这里介绍下基于字符串的截取的方法。
萧木易·2023-09-10 02:41

Web3.0时代，挖掘数据价值的第一步是网络数据采集

任何完整的大数据平台，一般包括以下的几个过程：数据采集–>数据存储–>数据处理–>数据展现(可视化，报表)。
雨与田·2023-09-09 21:48

Spark大数据平台应用实战

对于一个具有相当技术门槛与复杂度的平台，Spark从诞生到正式版本的成熟，经历的时间如此之短，让人惊诧。2009年，Spark诞生于伯克利大学AMPLab，于2010年正式开源，2013年成为了Apache基金项目，2014年成为Apache基金的较高级项目，整个过程不到五年时间。2015年是Spark飞速发展的一年，Spark成为了现在大数据领域最火的开源软件，截止2015年，Spark的Con
yoku酱·2023-09-09 13:07

IT运维：使用数据分析平台监控H3C交换机

概述在企业日常运维中，设备种类繁多，日志格式各异，日志量巨大，大量的告警，我们面临着如何统一的存放这些日志？如何对海量的日志进行查看，分析？
炎凰数据·2023-09-09 04:27

一点感受

（1）现状我评审的涉及底层技术平台：1、云原生（微服务）与低代码2、大数据平台-可视化报表图表3、BPM/Workflow数字化与集成其实这三个有关联性。
david_lv·2023-09-08 16:53

大型数据平台构建方案

大型数据平台构建方案随着信息技术的快速发展和大数据时代的到来，构建一个高效、可扩展的大数据平台成为许多企业和组织的重要需求。本文将介绍一种详细的大数据平台构建方案，包括架构设计、技术选型和源代码示例。
AlianBlank·2023-09-08 09:47

数据中台建设方案-基于大数据平台

数据中台建设方案-基于大数据平台-1数据中台建设方案1.1总体建设方案1.2大数据集成平台1.3大数据计算平台1.3.1数据计算层建设计算层技术含量最高，最为活跃，发展也最为迅速。
FRDATA1550333·2023-09-08 05:08

log4j2发送消息至Kafka

git源码为了给公司的大数据平台提供各项目组的日志，而又使各项目组在改动上无感知。做了一番调研后才发现log4j2默认有支持将日志发送到kafka的功能，惊喜之下赶紧看了下log4j对其的实现源码！
weixin_33698823·2023-09-07 14:36

个性化搜索引擎系统架构设计

文章目录前言一、搜索数据仓库搭建、数据抽取部分二、大数据平台、搜索数据集市分层设计、处理三、离线算法部分四、在线Web搜索接口服务总结前言个性化搜索目前发展阶段不是要替换掉传统搜索，而是对传统搜索的一个补充
充电了么·2023-09-07 11:55

大数据平台之元数据

表、字段的元数据信息是大数据平台建设的基础，随着业务发展，会发现，若一开始对这一块基础没设计好，会遇到很多问题（原以为元数
9随遇而安·2023-09-06 12:12
上一页 8 9 10 11 12 13 14 15 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他