数据平台-基础架构

爬虫实战入门（第二天），小白入门js逆向教程，红人

知识梳理第一天分析扣代码部分运行效果图：练习具体网址：某数据平台：hr,具体网址请私信博主，或者博客中有什么不明白的也可以私信博主第一天作者学习初衷：在面对ai时代，数据是基础，然而那么多的数据去哪找呢
Ming_bc·2024-01-19 04:39

基于Prism框架的WPF前端框架开发《知产代理数字化解决方案》

最近新开发了一套WPF前端界面框架，叫《知产代理数字化解决方案》，采用了时下流行的Prism框架作为整个系统的基础架构，演示了Prism中的IRegionManager区域管理器、IDialogAware
重-庆-教-主·2024-01-19 03:25

信息系统建模的三个阶段：资产管理、CMDB、资源管理

它主要被用于高效控制与管理不断变化的IT基础架构与IT服务。CMDB存储与管理企业IT架构中设备的各种配置信息，通过识别、控制、维护，检查企业的IT资源。
杨正同学·2024-01-19 02:19

VMware技术专题分享：VMware云管平台运维管理

阅读字数：4068|6分钟阅读观看嘉宾完整演讲视频及PPT，请点击：http://t.cn/ELoBXdO摘要跨SDDC和多云环境从应用到基础架构的智能I
IT大咖说·2024-01-18 23:02

构建高效数据生态：数据库、数据仓库、数据湖、大数据平台与数据中台解析_光点科技

本文将深入探讨数据库、数据仓库、数据湖、大数据平台以及数据中台的功能和价值，帮助您构建一个符合自身业务需求的高效数据生态系统。
光点数据治理·2024-01-18 12:24

情报研判分析系统开发，可视化大数据研判平台建设

情报研判分析系统功能：1、大数据多维度预测分析：通过大数据平台和算法对历史数据
d13823153201·2024-01-18 12:08

公安情报大数据分析研判平台建设解决方案，情报信息平台建设

公安情报大数据分析研判平台建设解决方案，情报信息平台建设公安情报大数据分析研判平台建设解决方案，通过构建汇聚公安内部各警种部门和公安外部单位各类社会数据的大数据平台，以公安数据业务为基础、情报需求为主导
d13823153201·2024-01-18 12:37

天猫数据分析工具推荐（天猫第三方数据平台）

在电商迅速发展的大背景下，做好天猫数据分析能够在多方面帮助品牌商家更好地运营店铺、塑造品牌，如通过数据分析了解消费者的需求、购买偏好，这有利于品牌商家及时调整商品结构、产品推广、商品宣传等等，灵活制定品牌的销售策略。那么，天猫平台行业、品牌、商品的具体销售数据该如何查询？首先我们需要选择一个专业的大数据分析平台，以鲸参谋电商数据分析平台为例，接下来具体介绍一下该怎么获取相关数据。在平台中，品牌方可
jingcanmou_data·2024-01-18 12:27

MOJO语言的诞生

MLIR是一个相对较新的开源编译器基础架构，最初由Google（其主要负责人转到Modular）启动，已在机器学习加速器社区广泛应用。
是乔乔啊·2024-01-18 11:50

【大数据】kafka

文章目录【后端目录贴】1.定义2.消息队列2.1使用消息队列的好处2.2消息队列的两种模式3.Kafka基础架构4.kafka使用4.1jar包下载(0.11.0.0版本)4.2部署5.Kafka架构深入
骑鱼过海的猫123·2024-01-18 09:34

MongoDB携手亚马逊云科技优化Amazon CodeWhisperer建议，助力开发者在MongoDB上构建应用程序

MongoDB是业界领先的开发者数据平台，每天有数以百万计的开发者和数以万计的客户在MongoDB上运行关键业务应用程序。AmazonCodeWhisperer是由AW
MongoDB 数据库·2024-01-18 09:59

MongoDB Atlas —— 多云开发者数据平台

MongoDBAtlas是MongoDB公司提供的MongoDB云服务，由MongoDB数据库的开发团队构建和运维，可以在AWS、MicrosoftAzure、GoogleCloudPlatform云平台上轻松部署、运营和扩展。MongoDBAtlas内建了MongoDB安全和运维最佳实践，可自动完成基础设施的部署、数据库的构建、高可用部署、数据的全球分发、备份等即费时又需要大量经验运维工作。让您
MongoDB 数据库·2024-01-18 09:28

如何设计实时数据平台（设计篇）

本文仅为笔者平日学习记录之用，侵删原文：https://mp.weixin.qq.com/s/OyQ0_BhFzEknqOdF0VaeWA导读：本文将会分上下两篇对一个重要且常见的大数据基础设施平台展开讨论，即“实时数据平台
longLiveData·2024-01-18 05:11

提升问题检索的能力

一些搜索引擎的出现已极大地方便了我们日常的信息检索，此处需要注意的是我们不能仅仅局限于常见的搜索引擎，也需要关注和积累一些专业平台或是具有集成功能的引擎，例如常见的文献检索平台、专利平台、科学数据平台等等
角砾岩队长·2024-01-18 01:43

合格的Salesforce管理员必备技能 - 快速入坑篇

以下从个人十多年的从业经验来给大家做下分享：必备技能篇章一.掌握Force.com平台的基础架构及产品线概况二.熟悉Salesforce平台的权限逻辑：包含有OrgLevelSettings、Profile
Frank_Salesforce·2024-01-18 00:18

模型服务网格：云原生下的模型服务管理

它提供了一个可扩展的、高性能的基础架构，用于将多个模型服务进行管理、部署和调度，以此更好地处理模型的部署、版本管理、路由和推理请求的负载均衡。
阿里云云原生·2024-01-17 22:03

Flink的ListState在小规模场景下的缓存提速和接口优化丰富的实践

1.背景笔者的大数据平台XSailboat中包含以DAG方式可视化的离线分析和实时计算的开发、运维功能。
OkGogooXSailboat·2024-01-17 18:36

Aviator表达式扩展--数组、列表负向序号索引以及自己的JSON库支持方括号([])赋值

1.背景笔者开发的大数据大数据平台XSailboat中的DataStudio模块包含基于DAG图的实时计算可视化开发功能，实现了Flink计算任务的可视化开发（想要了解更多，可以查看《Flink的DAG
OkGogooXSailboat·2024-01-17 18:36

关于Flink在一条计算管道中配置流和数据流通过广播方式合流的情形下，无保存点和检查点重跑时，让配置流先行，数据流等延迟几秒再进入合流节点的思考

1.背景笔者带领的团队在自研的大数据平台XSailboat上进行专家策略规则的计算管道开发时，遇到这样一种情形：计算管道中存在一条配置流和数据流通过广播方式合流的情形。
OkGogooXSailboat·2024-01-17 18:36

本地运行Flink退出时java.nio.file.DirectoryNotEmptyException、目录没有正常删除解决方法

1.背景在开发大数据平台XSailboat中的查看Flink任务的状态数据工具时，用StateProcessAPI解析保存点数据，将其从HDFS上读取出来再将其解析过后下沉到HDFS以CSV格式保存，然后由其它接口提供对这个文件的分页加载功能
OkGogooXSailboat·2024-01-17 18:05

Flink的Reduce算子，Name-Position形式的Row数据在使用保存点/检查点重新启动的时候，变成了Position-Based形式的Row解决

1.背景大数据平台XSailboat提供了基于ApacheFlink的实时计算管道开发功能。DataStudio的实时计算管道开发功能中提供了分区规约节点(keyBy+reduce)。
OkGogooXSailboat·2024-01-17 18:05

数据标签设计 -- 大数据平台(XSailboat)的数据标签模块

原先就有在大数据平台XSailboat中增加“数据标签”模块的设想，现在有这样的需求，正好趁此机会将其实现。
OkGogooXSailboat·2024-01-17 18:35

基于大数据平台(XSailboat)的计算管道实现MySQL数据源的CDC同步--flink CDC

1.背景笔者在先前的一篇文档《数据标签设计–大数据平台(XSailboat)的数据标签模块》提到了关于数据标签的模块，现已实现并应用于项目中。
OkGogooXSailboat·2024-01-17 18:05

企业还没用上智能知识库？那就太晚啦

智能知识库，即通过人工智能技术对海量信息进行管理和分析的数据平台，它能帮助企业快速查找和使用各种信息，提高工作效率。比如，一位新加入的员工可以通过智能知识库快速了解公司历史、员工
骁夕forever·2024-01-17 16:52

Ronin Network 宣布与链上数据解决方案 Footprint Analytics 合作

区块链数据平台FootprintAnalytics宣布与RoninNetwork建立合作伙伴关系。RoninNetwork是专为游戏玩家设计的区块链。
Footprint_Analytics·2024-01-17 12:23

StreamX流批一体一站式大数据平台：大数据Flink可视化工具的革命性突破，让你的数据更高效、更直观！

介绍：StreamX，开源的流批一体一站式大数据平台，致力于让Flink开发更简单。它极大地降低了学习成本和开发门槛，使开发者可以专注于最核心的业务。
知识分享小能手·2024-01-17 12:15

智慧校园大数据平台业务系统介绍

常见业务系统以下是智慧校园常见的业务系统。这是某个智慧校园业务系统的数据流情况，我们可以发现业务系统和数据中心并未完全数据交互共享，因此我们在规划建设智慧校园大数据时需要协调各个职能部门的资源确认业务系统的数据接口。同时由于各个业务系统之间数据不统一，我们在采集数据过程中还需进行数据转换，转换成我们所需的数据格式，这些都带来大量的工作量。学校业务系统的数据类型和属性很多，有数百种。我们进行数据的归
shawn_song1212·2024-01-17 11:02

智慧校园大数据平台功能模块

学校概况模块智慧校园大数据平台的“学校概况”模块，主要给学校和院系领导使用，能够从宏观、全局把控学校教学、管理、科研、资产等各个方面的整体情况，可以预测学校的发展趋势并且给出决策建议。
shawn_song1212·2024-01-17 11:02

智慧校园大数据平台概述

背景2015年是中国的智慧校园大数据元年，政府、企业、学校、研究者、管理者、教师、社会公众等都开始关注智慧校园大数据，相关政策文件、研究机构、学术活动、市场产品等开始纷纷出现。然而，我国的智慧校园大数据研究与实践领域整体还处于起步探索阶段，是在“摸着石头过河”，涉及一系列关键问题亟待解决（如教育数据的自然采集、教育数据的安全管理与隐私保护、教育数据的无缝流转与开放共享、教育数据的深度挖掘以及学习分
shawn_song1212·2024-01-17 11:01

智慧校园大数据平台架构

数据计算与分析挖掘大数据平台涵盖了
shawn_song1212·2024-01-17 11:56

大数据开发之Hadoop（入门）

第1章：Hadoop概述1.1Hadoop是什么1、Hadoop是一个由Apache基金会所开发的分布式系统基础架构。2、主要解决，海量数据的存储和海量数据的分析计算问题。
Key-Key·2024-01-17 09:19

已实现：JS如何根据视频的http(s)地址，来截取帧图片，并实现大图压缩的功能

我以Vue为基础架构，来写写代码。1、先写布局，先得有video，然后得有canvas截取当前视频帧并上传界面上很简单，就一个视频容器，一个画布canvas还不让它显示，还有一个就是截取帧图片了。
刚作愁时又忆卿·2024-01-17 09:14

openharmony 编译LLVM编译器基础架构

1.编译库地址third_party_llvm-project:管理员liwentao_uiwdhy308huanghuijin2.编译方法gitclonehttps://gitee.com/openharmony/third_party_llvm-project.gitcdthird_party_llvm-projectmkdirbuildcdbuildcmake-GNinja-DCMAKE_B
Edward.W·2024-01-17 08:47

【软件测试】学习笔记-测试基础架构

这篇文章探讨什么是测试基础架构。什么是测试基础架构？测试基础架构指的是，执行测试的过程中用到的所有基础硬件设施以及相关的软件设施。因此，我们也把测试基础架构称之为广义的测试执行环境。
码农丁丁·2024-01-17 07:53

【软件测试】学习笔记-统一测试数据平台

这篇文章主要探讨全球大型电商企业中关于准备测试数据的最佳实践，从全球大型电商企业早期的测试数据准备实践谈起，分析这些测试数据准备方法在落地时遇到的问题，以及如何在实践中解决这些问题。其实，这种分析问题、解决问题的思路，也是推动着测试数据准备时代从1.0到2.0再到3.0演进的原因。在这个过程中，跟着时代的演进，理解测试数据准备技术与架构的发展历程，并进一步掌握3.0时代出现的业内处于领先地位的“统
码农丁丁·2024-01-17 07:43

MPLS基础架构

目录一、MPLS多协议标签交换概述1、MPLS是什么2、MPLS-VPN3、MPLS起源（1）、MPLS解决的问题MPLS解决了三层转发短板问题。（2）、交换机转发流程（3）、路由器转发流程（4）、交换机和路由器转发区别（5）、MPLS对路由器转发的优化（6）、现阶段MPLS用途二、深入了解MPLS1、三种交换机制（1）、进程交换（路由器时期短板）（2）、快速交换（3）、CEF2、MPLS的术语（
数通工程师小明·2024-01-17 06:33

mysql的sql语句怎么查询序列_MySQL基础架构之一条SQL查询语句是如何执行的？

前言MySQL数据库作为优秀的关系型开源数据库，受到所有人的青睐，我们日常工作中，和其打交道的次数十分频繁，那么你知道我们在写sql的时候，MySQL内部是如何执行的吗？接下来我们就一起探讨一下吧。MySQL的架构以select*fromTwhereID=10;这条sql语句为例：当我们执行该查询语句时，会收到MySQL给我们返回的结果，那么其在MySQL中是如何一步步执行的呢？首先我们了解一下M
我是一颗桔·2024-01-17 05:27

1基础架构：一条sql查询语句是如何执行的 - MySQL实战45讲学习笔记

1.一条sql查询语句是如何执行的简单介绍一下这个图查询语句怎么执行的1.首先需要和数据库建立连接2.连接建立后，本该去缓存查询3.建立连接后，进入到分析器4.进入优化器5.进入执行器此图摘自极客时间丁奇老师的MySQL实战45讲简单介绍一下这个图平时我们使用java去连接数据库时，要使用一个连接池来维护多个数据库连接，我们的一条sql语句通过一个连接发往数据库进行查询。发送sql语句请求的就是我
Iam摸鱼小能手·2024-01-17 05:55

MySQL进阶45讲【1】基础架构：一条SQL查询语句是如何执行的？

1前言我们经常说，看一个事儿千万不要直接陷入细节里，应该先鸟瞰其全貌，这样能够帮助你从高维度理解问题。同样，对于MySQL的学习也是这样。平时我们使用数据库，看到的通常都是一个整体。比如，有个最简单的表，表里只有一个ID字段，在执行下面这个查询语句时:select*fromTwhereID=10:我们看到的只是输入一条语句，返回一个结果，却不知道这条语句在MySQL内部的执行过程。所以今天想和大家
吴名氏.·2024-01-17 05:53

HBase集群写入出现大量毛刺排查

大家好，我是K&D，一名10年以上大数据架构&研发经验从业者，目前主要从事云原生大数据方向设计，擅长云原生技术、数据架构、数据平台构建、大数据组件性能调优问题现象查看监控，业务请求量正常，但是server
KubeData·2024-01-17 02:12

工作十年总结的六条面试技巧，助力你拿到理想的offer

大数据开发的领域不同，面试的锚定点也不同，从我过往的经验来说，可以大致来将大数据领域的开发分为如下几种：离线开发：数据仓库、离线计算、ETL开发实时开发：流计算开发基础架构：组件二次开发，底层组件稳定性维护大数据运维方向数据平台开发一
KubeData·2024-01-17 02:12

一文了解数据库vs数据仓库vs数据湖

大家好，我是K&D，一名10年以上大数据架构&研发经验从业者，目前主要从事云原生大数据方向设计，擅长云原生技术、数据架构、数据平台构建、大数据组件性能调优以下是本文目录：什么是数据库？
KubeData·2024-01-17 02:11

程序员如何构建自己的「护城河」

大家好，我是K&D，一名10年以上大数据架构&研发经验从业者，目前主要从事云原生大数据方向设计，擅长云原生技术、数据架构、数据平台构建、大数据组件性能调优关注我，持续分享更多技术干货0.何为「护城河」前段时间
KubeData·2024-01-17 02:41

flume

Kafka网络端口数据1.2Flume基础架构1.
添柴少年yyds·2024-01-17 00:55

什么是云计算

IaaS（基础架构即服务）：通过互联网提供“基础的计算资源”，包括处理能力、存储、空间、网络等，用户能从申请到的硬件或虚拟硬件（包括BMS或ECS），然后在上面安装系统或其他应用程序。
~xcliu~·2024-01-16 23:14

最新油价API接口查询 - java版

首先，在数据平台中使用API接口需要先注册后申请此API接口。申请成功后使用个人中心的API秘钥就可以进行对接开发。
探数数据·2024-01-16 22:30

快速获取商品条码查询API接口python代码

首先，使用数据平台该API接口需要先注册后申请此API接口。申请成功后使用个人中心的API秘钥就可以进行对接开发。
探数数据·2024-01-16 22:23

Hadoop详解

它提供了一套分布式系统基础架构。核心内容包含hdfs和mapreduce。hadoop2.0以后引入yarn.hdfs是提供数据存储的，mapreduce是方便数据计算的。
武昌库里写JAVA·2024-01-16 21:20

不好意思，Nginx 该弃用了！

我们很高兴有机会在此介绍Pingora，这是我们使用Rust在内部构建的新HTTP代理，它每天处理超过1万亿个请求，提高了我们的性能，并为Cloudflare客户带来了许多新功能，同时只需要我们以前代理基础架构的三分之一的
软件源码·2024-01-16 19:19

IOC中Bean的生命周期

Spring是一个轻量级开发框架，其核心思想是Ioc（控制反转）以及AOP(面向切面编程)，为java应用开发提供组件管理服务，用于组件之间的解耦，以及简化第三方Javaee中间件技术的使用，是是一个基础架构型的开发框架
猿究院_郭嘉诚·2024-01-16 18:29
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他