分布式计算测试理论

第十一周周报

文章目录摘要分布式计算数据增广微调总结摘要本周学习了分布式计算、使用多GPU训练情况及它与单GPU训练之间的比较，数据增广概念及应用的情况实例，和迁移学习中微调的技巧使用。
Joy_moon·2024-01-17 15:42

边缘计算的挑战和机遇

因此，边缘计算既带来了挑战也带来了机遇，需要我们不断地研究和创新，以应对日益复杂的应用场景和技术需方向一：数据安全与隐私保护边缘计算是一种分布式计算模型，它将数据处理和存储功能从中心化的云端移到接近数据源的边缘设备上
Direct_Yang·2024-01-17 13:32

介绍 Apache Spark 的基本概念和在大数据分析中的应用

ApacheSpark是一个开源的分布式计算系统，它旨在处理大规模数据集并提供高性能和易用性。Spark提供了一个统一的编程模型，可以在多种编程语言中使用，包括Scala、Java、Python和R。
酷爱码·2024-01-17 11:45

边缘计算的挑战和机遇

边缘计算是一种分布式计算框架，它将应用程序、数据和计算服务带离集中式数据中心，靠近用户和数据源的位置。这种方法可以减少延迟，提高服务速度，并可能改善数据安全性和隐私性。
终将老去的穷苦程序员·2024-01-17 03:15

2023年软件测试已经崩盘？找不到工作了？

过去几年，可能你只要会一些功能测试理论就能找到一份工作，但是现在的面试和招聘要求可以直观的感受到，企业要求在提高，自动化变成必会技能，最好还能做性能，会测试开发更好
测试秃头怪·2024-01-16 20:01

2021UpdateC#.NET笔试题高级进阶篇

3.3分布式数据和存储3.4分布式计算。3.5
微软MVP Eleven·2024-01-16 10:11

mac上搭建 hadoop 伪集群

1.hadoop介绍Hadoop是Apache基金会开发的一个开源的分布式计算平台，主要用于处理和分析大数据。Hadoop的核心设计理念是将计算任务分布到多个节点上，以实现高度可扩展性和容错性。
寂夜了无痕·2024-01-16 06:30

Hadoop分布式文件系统(三)

目录一、Hadoop1、MapReduce1.1、理解MapReduce思想1.2、分布式计算概念1.3、MapReduce介绍1.4、MapReduce特点1.5、MapReduce局限性1.6、MapReduce
杀神lwz·2024-01-16 06:57

MapReduce总结

执行分布式计算和任务处理split读取数据，一个map任务处理一个分片，通常一个分片对应一个HDFS文件Block。
w未然·2024-01-16 05:51

如何利用云平台技术实现车辆远程控制的浅谈

数据处理与存储：在云端，利用云计算的分布式计算技术，对数据进行处理、分析和存储。此外，还可以利用机器
MarkHD·2024-01-16 00:14

软件测试工程师需要学什么？

功能测试工程师我们想要成为一个功能测试工程师的话呢，你所具备这些技能就OK了我会写测试用例，懂测试理论，懂测试流程，知道提交bug，跟踪bu
程序员阿沐·2024-01-15 20:47

2019-07-14 CAP理论小结

2002年，麻省理工学院的赛斯吉尔伯托和南希林奇发表了猜想的证明，使之成为分布式计算领域公认的一个定理。
hexm01·2024-01-15 18:32

2022-01-03大数据学习日志——Hadoop离线阶段——Hadoop MapReduce、YARN、HA

学习目标理解分布式计算分而治之的思想学会提交MapReduce程序掌握MapReduce执行流程掌握YARN功能与架构组件掌握程序提交YARN交互流程理解YARN调度策略掌握HadoopHA实现原理内容大纲
王络不稳定·2024-01-15 14:37

【AI】无人零售和边缘计算

1.1边缘计算的定义1.2边缘计算的作用1.3边缘计算的关键技术1.4边缘计算的应用场景二、边缘计算在无人零售中的应用一、什么是边缘计算1.1边缘计算的定义边缘计算（EdgeComputing）是一种分布式计算范式
giszz·2024-01-15 10:59

分布式计算平台 Hadoop 简介

Hadoop简介Hadoop是一种分析和处理大数据的软件平台，是一个用Java语言实现的Apache的开源软件框架，在大量计算机组成的集群中实现了对海量数据的分布式计算。
rookiexiong·2024-01-15 08:19

HCIA---学习笔记01

计算机网络基础HCIA---华为认证的初级网络工程师HCIP---华为认证的高级网络工程师HCIE---华为认证的专家级网络工程师计算机网络的基本结构图：云技术的分类云计算（分布式计算即使用多台计算机处理一项任务
江水三千里·2024-01-15 00:29

2024年华夏银行总行社会招聘公告

2、精通软件测试理论和过程，熟悉自
测试小贝·2024-01-14 09:37

2024年华夏银行总行社会招聘公告

2、精通软件测试理论和过程，熟悉自
程序员老鹰·2024-01-13 18:58

边缘计算的挑战和机遇：数据的安全性和隐私性问题

在分布式计算环境中，如何确保边缘计算中的数据安全性和隐私性成为亟待解决的问题。本文将深入讨论在边缘计算中设计有效的安全机制和隐私保护算法，以防止数据泄露和篡改。
Persus·2024-01-13 17:47

边缘计算中的数据安全与隐私保护：挑战与应对策略

边缘计算将数据处理和分析的任务从中心化的数据中心转移到了设备端，这种分布式计算模式虽然带来了许多优势，如更快的响应速度、更低的网络带宽需求以及更好的隐私保护，但也带来了新的安全挑战。
隐私无忧·2024-01-13 17:43

什么是“算力”？

在云计算之前，人类苦于单点式计算（一台大型机或一台PC，独立完成全部的计算任务）的算力不足，已经尝试过网格计算（把一个巨大的计算任务，分解为很多的小型计算任务，交给不同的计算机完成）等分布式计算架构。
三千世界灬·2024-01-13 16:46

软件测试理论----测试设计方法论

1、测试用例格式（1）用例编号：用例的唯一标识，要求具有易识别性和易维护性，能能够根据用例编号识别用例的目的和作用，一般格式为：A-B-C-D其中A：一般表示产品或者项目名称B：表示用例属性（针对哪个的测试阶段，UT，IT，ST）C：表示测试项或者功能模块D：编号如：taobao-st-login-001（2）测试项：说明测试用例所属功能模块（3）用例名称：用于描述测试用例的关注点，原则上用例名称
测试大大怪·2024-01-13 16:14

Spark十一：面试问题

spark是借鉴了Mapreduce,并在其基础上发展起来的，继承了其分布式计算的优点并进行了改进，spark生态更为丰富，功能更为强大，性能更加适用范围广，mapred
eight_Jessen·2024-01-13 07:57

Spark Streaming

Spark由于其内部优秀的调度机制、快速的分布式计算能力，能够以极快的速度进行迭代计算。正是
奋斗的蛐蛐·2024-01-13 06:13

边缘计算：连接实时数据的力量与未来发展之路

边缘计算是一种分布式计算范式，它旨在将数据处理、存储和应用服务带到数据源的近端，即网络的“边缘”。
一尘之中·2024-01-13 05:16

自动化测试理论

一、初识自动化测试概念软件测试的定义在规定的条件下对程序进行操作，以发现程序错误，衡量软件质量，并对其是否能满足设计要求进行评估的过程。自动化测试的定义把人对软件的测试行为转化为由机器执行测试行为的一种实践，用代码测试代码。WebUI自动化测试由自动化测试工具模拟人工在web程序上各种操作，并自动验证结果是否符合预期。AppUI自动化测试由自动化测试工具模拟人工在APP程序上各种操作，并自动验证结
软件测试媛·2024-01-13 04:49

Hadoop 的核心 —— HDFS（1）

Hadoop是一个开源的大数据框架Hadoop是一个分布式计算的解决方案Hadoop=HDFS（分布式文件系统）+MapReduce（分布式计算）Hadoop的两个核心：HDFS分布式文件系统：存储是大数据技术的基础
土冥王·2024-01-12 16:13

自动化测试理论（1）—概述需要掌握的内容

要在自动化测试领域取得成功，需要掌握一系列技能和概念。以下是一些关键的内容：编程语言：了解并精通至少一种编程语言，如Python，Java，JavaScript等。编写自动化测试脚本通常需要编程技能。自动化测试框架：学习并熟练使用流行的自动化测试框架，如Selenium（Web应用程序测试）、Appium（移动应用程序测试）、JUnit、TestNG（Java测试框架）、Pytest（Python
ct745363083·2024-01-12 11:12

云计算技术学习书籍推荐

云计算是通过使计算分布在大量的分布式计算机上，而非本地计算机或远程服务器中，企业数据中心的运行将与互联网更相似。从应用方面理解，云计算，是一种分布式计算，充分利用资源，实现资源的共享。
QFdongdong·2024-01-12 03:32

spark基础--学习笔记

1spark介绍1.1spark概念ApacheSpark是专为大规模数据处理而设计的快速通用的分布式计算引擎，是开源的类HadoopMapReduce的通用分布式计算框架。
祈愿lucky·2024-01-11 07:58

hive sql 和 spark sql的区别

SparkSQL：SparkSQL则建立在ApacheSpark引擎之上，使用了Spark的弹性分布式计算能力。由于Spark的内存
深度学习研究员·2024-01-11 07:08

ROS分布式框架搭建

我们还需要做些准备工作：为Jetsonnano连接无线网络，并且设置固定IP，实现如下：为Jetsonnano连接无线网络；为Jetsonnano配置静态IP，具体操作如图：2ROS分布式通信  ROS是一个分布式计算环境
Nav.·2024-01-11 05:59

云和云计算

1.概述云计算是分布式计算技术的一种，它的原理是通过网络“云”，将所运行的
三千世界灬·2024-01-11 02:59

利用Hadoop进行数据湖构建与管理

Hadoop，作为一个分布式计算平台，为数据湖的构建和管理提供了强大的支持。二、Hadoop与数据湖Hadoop是一个开源的分布式计算平台，它允许用户在大规模
乌龙饼干·2024-01-11 01:14

Hadoop在大数据分析中的应用与挑战

Hadoop，作为开源的大数据处理框架，因其强大的分布式计算和存储能力而广受欢迎。本文旨在探讨Hadoop在大数据分析中的应用及其所面临的挑战。
乌龙饼干·2024-01-11 01:44

软件测试理论总结

1、等价类划分等价类划分2、边界值分析法边界值分析法3、错误推测法错误推测法4、因果图文法因果图文法5、路径覆盖路径覆盖6、功能图功能图7、正交试验设计法正交试验设计法8、场景设计方法场景设计方法
养猫的老鼠·2024-01-10 17:52

3.MapReduce实践-单词统计

目录概述MapReduce核心进程MapReduce编程规范单词统计案例源码结束概述官网文档速递MapReduce：分布式计算框架通常情况下，一个MR作业是有2个部分构成：MapTaskReduceTask
流月up·2024-01-10 12:48

4.MapReduce 序列化

目录概述序列化序列化反序例化java自带的两种Serializable非Serializablehadoop序例化实践分片/InputFormat&InputSplit日志结束概述序列化是分布式计算中很重要的一环境
流月up·2024-01-10 12:46

深入理解 Flink（一）Flink 架构设计原理

大数据分布式计算引擎设计实现剖析MapReduceMapReduce执行引擎解析MapReduce的组件设计实现图Spark执行引擎解析Spark相比于RM的真正优势的地方在哪里：（Simple、Fast
我很ruo·2024-01-10 08:57

深入理解 Flink（二）Flink StateBackend 和 Checkpoint 容错深入分析

这也是Flink有别于其他分布式计算引擎的最重要的区别。Flink中的状态分为两类，KeyedState和OperatorState。Keye
我很ruo·2024-01-10 07:41

浅谈虚拟化技术下的云安全如何处置

浅谈虚拟化技术下的云安全如何处置近年来，云计算是目前非常热门的一个研究领域，其实它并不是一种全新的技术，而是许多技术的融合体，包括分布式计算、动态和拓展等各种各样的技术算法，而虚拟化技术是云计算里最重要的一个技术
weixin_34319817·2024-01-10 07:24

云计算第一天

HCIA—华为认证的初级网络工程师HCIP—华为认证的高级网络工程师HCIE—华为认证的专家网络工程师云技术—云计算----分布式计算云存储----百度网盘计算机技术抽象语言—电信号抽象语言—编码应用层编码
周越飞·2024-01-10 05:06

常见技术选型

MQRocketMQ,RabbitMQ,Kafka,ActiveMQNoSQLRedis,Memcache分布式计算Blink,Storm,SparkDB关系型TiDB,MySQL,MongoDB,CassandraKVLevelDB
独处人·2024-01-09 14:46

Spark与Hive的集成与互操作

Spark提供了强大的分布式计算能力，而Hive是一个用于查询和管理大规模数据的数据仓库工具。本文将深入探讨如何在Spark中集成和与Hive进行互操作，以充分利用它们的强大功能。
晓之以理的喵~~·2024-01-09 11:30

我的隐私计算学习——联邦学习（1）

联邦学习，可以理解为大数据、分布式计算、网络空间信息安全与机器学习的一个
Ataraxia8088·2024-01-08 15:32

阿里云云计算助理工程师ACA证书笔记2024.1.8 云计算基础 第二节（持续更新中....）

□≦）ノ第一章云计算基础二，云计算概述目标：了解，认识云计算的发展和影响理解，掌握云计算的概念与优缺点云计算概念于2006年生根，我们离“像用电一样使用信息服务”的云计算理想已经非常近了云计算可看作是分布式计算
MadisonRing·2024-01-08 13:52

软件测试理论

曾经在B站看过一系列软件测试的基础理论，在这里记录下，共同学习计算机软件分类按照层次划分系统软件支持软件应用软件按结构划分单机软件分布式软件C/SB/SC/S:客户端--服务器，B/S:浏览器--服务端按照组织划分开源软件商业软件计算方式:网格计算(地图)、云计算软件缺陷由来bug:一只虫子的由来defect(缺陷)软件缺陷：软件未能实现产品说明书的功能软件出现了产品说明书指名的不应该实现的功能产
千鸟月读·2024-01-08 13:40

Spark基础原理

SparkOnYarnSparkOnYarn的本质Spark专注于分布式计算,Yarn专注于资源管理,Spark将资源管理的工作交给了Yarn来负责SparkOnYarn两种部署方式Spark中有两种部署方式
小希 fighting·2024-01-08 13:09

大数据 Yarn - 资源调度框架

Hadoop主要是由三部分组成，除了前面我讲过的分布式文件系统HDFS、分布式计算框架MapReduce，还有一个是分布式集群资源调度框架Yarn。
善守的大龙猫·2024-01-08 10:48

基于多内层神经网络的大语言模型具有内在的先天不足

这样可以利用多台机器或分布式计算
人机与认知实验室·2024-01-08 07:46
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他