分布式计算测试理论

Spark的错误处理与调试技巧

ApacheSpark是一个强大的分布式计算框架，用于处理大规模数据。在开发和运行Spark应用程序时，经常会遇到各种错误和问题。了解Spark的错误处理与调试技巧是解决这些问题的关键。
晓之以理的喵~~·2023-12-31 07:52

Spark作业的调度与执行流程

ApacheSpark是一个分布式计算框架，用于处理大规模数据。了解Spark作业的调度与执行流程是构建高效分布式应用程序的关键。
晓之以理的喵~~·2023-12-31 07:22

Spark应用程序的结构与驱动程序

ApacheSpark是一个强大的分布式计算框架，用于处理大规模数据。了解Spark应用程序的结构和驱动程序是构建高效应用的关键。
晓之以理的喵~~·2023-12-31 07:21

Spark任务调度与数据本地性

ApacheSpark是一个分布式计算框架，用于处理大规模数据。了解Spark任务调度与数据本地性是构建高效分布式应用程序的关键。
晓之以理的喵~~·2023-12-31 07:21

云计算基础、Issa、Pssa、Saas区别

一、了解云计算云计算（cloudcomputing）是分布式计算的一种，指的是通过网络“云”将巨大的数据计算处理程序分解成无数个小程序，然后，通过多部服务器组成的系统进行处理和分析这些小程序得到结果并返回给用户
代码敲上天.·2023-12-31 05:40

软件测试工程师(Linux命令大全)零基础小白学习_入门到精通01

大家好，我是一凡在前面的几期文章，我们已经把测试理论以及测试用例学完了。大家有没有掌握呢？如果遇到不明白的地方可以在评论区或者私信我。我都会及时回复的。
程序员阿沐·2023-12-30 23:42

知识学习汇总

1测试理论1.1软件的分类1.1.1软件的定义一系列按照特定顺序组织的计算机数据和指令的集合。
在摘棉花·2023-12-30 18:27

测试理论-bug的级别有哪些，级别如何判断

优先级P11、致命：对业务有至关重要的影响，业务系统完全丧失业务功能，无法再继续进行，或业务系统丢失了业务数据且无法恢复，影响公司运营的重要业务数据出错。2、严重：对业务有严重的影响，业务系统已经丧失可部分的重要的业务功能，或业务系统丢失了业务数据且可以恢复，一般业务数据出错。3、一般：对业务有较小的影响，业务系统丧失了较少的业务功能，例如：界面错误，打印或显示格式错误。4、提示：对业务没有影响，
不会测试用例的测试·2023-12-30 14:06

一分钟读书俱乐部（122）：《区块链技术驱动金融》有效工作量证明

以前的分布式计算项目原文精选：在比特币诞生好多年之前，就有利
全职高手一叶之秋·2023-12-30 14:41

在CentOS7上安装Hadoop分布式系统

Hadoop由分布式存储HDFS和分布式计算MapReduce两部分组成。HDFS是一个master/slave的结构，就通常的部署来说，在master上只运行一个Namenode
栗子艾李子·2023-12-30 07:26

区块链媒体套餐：软文投放如何点亮企业业务的未来

为了更好地推广区块链业务，区块链技术是一种基于密码学原理、分布式计算和去中心化网络设计的技术。它最初是为支持比特币这种加密货币而创建的，但后来被发现有广泛的应用潜力，可以用于许多不同领域。
世媒讯·2023-12-30 00:15

PiflowX大数据流水线系统

支持分布式计算引擎flink和spark。以所见即所得的方式，实现大数据采集、处理、存储与分析流程化配置、运行与智能监控。
暗影八度·2023-12-29 23:43

摩拜或是庞氏骗局，只有区块链才能拯救共享单车

比如，金键教授说，区块链引发的虚拟数字货币滥发、交易、“挖矿”等对金融安全、社会生产带来了明显的不利因素和破坏性；区块链的分布式计算模型也给政府监管提出了新的挑战。
很多人都在·2023-12-29 19:57

【每日试题】java面试题之中间件

中间件可以分为消息中间件、缓存中间件、数据访问中间件、分布式计算中间件、网关中间件等多个类别。什么是消息中间件？
文森特的猫·2023-12-29 17:41

分布式技术之分布式计算MR模式

文章目录什么是分而治之？分治法的原理抽象模型MapReduce工作原理什么是分而治之？分而治之（Divide-and-Conquer），是计算机处理问题的一个很重要的思想，简称为分治法。顾名思义，分治法就是将一个复杂的、难以直接解决的大问题，分割成一些规模较小的、可以比较简单的或直接求解的子问题，这些子问题之间相互独立且与原问题形式相同，递归地求解这些子问题，然后将子问题的解合并得到原问题的解。在
carroll18·2023-12-29 11:02

Hadoop之MapReduce 详细教程

即使是发布过论文实现分布式计算的谷歌也只是实现了这种思想，而不是自己原创。1、Map负责“分”，即把复杂的任务分解为若干个“简单的任务”来并行处理。可以进行拆
白鸽呀·2023-12-29 06:50

Impala 基于hive的交互式实时分析工具(一) 概念及原理介绍

谷歌旧三篇论文（GFS-分布式文件存储，Bigtable-分布式数据库，Mapreduce-分布式计算）设计目的为了
章云邰·2023-12-27 19:59

Spark的生态系统概览：Spark SQL、Spark Streaming

ApacheSpark是一个强大的分布式计算框架，用于大规模数据处理。Spark的生态系统包括多个组件，其中两个重要的组件是SparkSQL和SparkStreaming。
晓之以理的喵~~·2023-12-27 06:35

服务器系统时间不同步如何处理

在分布式计算环境中，服务器系统时间的同步至关重要。然而，由于各种原因，服务器系统时间不同步的问题时有发生,这可能会导致严重的问题，如日志不准确、证书验证失败等。
德迅--文琪·2023-12-27 04:52

不再走弯路，软件测试需要学什么？测试岗有哪些要求？

1）测试基础理论不管有没有计算机基础，测试理论的学习都是首要的，不管你的目标是功能测试、性能测试、测试开发，这些基础知识必须优先掌握。主要包括常见
阿里测试君·2023-12-27 02:44

分布式系统面试连环炮

他们有共同的一个问题，就是都没怎么搞过分布式系统，现在互联网公司，一般都是做分布式的系统，大家都不是做底层的分布式系统、分布式存储系统hadoophdfs、分布式计算系统hadoopmapreduce/
Java机械师·2023-12-26 23:13

SparkCore

Distributed：RDD中的数据是分布式存储的，可用于分布式计算。Resilient：RDD中的数据可以存储在内存中或者磁盘中。1.2RDD的五大
weixin_50458070·2023-12-26 06:40

Hadoop——分布式计算

一、分布式计算概述1.什么是计算、分布式计算？
weixin_50458070·2023-12-26 06:38

大数据技术——处理架构Hadoop

•2.1概述•2.1.1Hadoop简介•Hadoop是Apache软件基金会旗下的一个开源分布式计算平台，为用户提供了系统底层细节透明的分布式基础架构•Hadoop是基于Java语言开发的，具有很好的跨平台特性
Imrea·2023-12-26 01:55

Spark集群部署与架构

在大数据时代，处理海量数据需要分布式计算框架。ApacheSpark作为一种强大的大数据处理工具，可以在集群中高效运行，处理数十TB甚至PB级别的数据。
晓之以理的喵~~·2023-12-25 08:36

2023年软件测试已经崩盘了吗？为什么很难找到工作？

过去几年，可能你只要会一些功能测试理论就能找到一份工作，但是现在的面试和招聘要求可以直观的感受到，企业要求在提高，自动化变成必会技能，最好还能做性能，会测试开发更好
互联网杂货铺·2023-12-24 17:40

测试理论知识七：暴力法调试、归纳法调试、演绎法调试、回溯法调试、测试法调试

1.调试调试是执行一次成功的测试之后所要进行的工作。调试包含了两个步骤：确定程序中可疑错误的准确性质和位置。修改错误。2.暴力法调试暴力调试方法可至少被划分为三种类型：利用内存信息输出来调试。根据一般的”在程序中插入打印语句”建议来调试。使用自动化的调试工具进行调试。2.1.内存信息输出使用内存信息输出是最缺乏效率的暴力调试方法。原因如下：难以在内存区域与源程序中的变量之间建立对应关系。即使对于复
依晴无旧·2023-12-24 11:28

测试理论知识八：敏捷开发测试、极限编程测试

1.敏捷开发模式下的测试敏捷开发的核心理念：个体和互动高于流程和工具。工作的软件高于详尽的文档。客户合作高于合同谈判。响应变化高于遵循计划。2.敏捷开发的特征敏捷开发提倡迭代式和增量式的开发模式，并强调测试在其中的重要作用。这是一个围绕以用户为中心、以客户需求为导向的开发过程，在此过程中随时做好“迎接变化”的准备。敏捷开发特征点如下：敏捷建模：不是一种建模方法，而是一组建模以及文档化软件系统的原则
依晴无旧·2023-12-24 11:23

Federated Learning with Personalization Layers

这种统计异质性可能会损害机器学习训练算法在个性化、推荐、欺诈检测等应用中的性能，因为传统的机器学习训练算法是为可以严格控制数据分区的中央或分布式计算环境设计的研究个性化设置作为深度前馈神经网络联邦学习中统计异质性
白兔1205·2023-12-23 21:13

阿里云中间件

除此之外，中间件还主要为网络分布式计算
编织幻境的妖·2023-12-23 16:02

面试官：你真的会性能测试流程/设计?

00|性能测试理论性能测试概念什么是性能：就是软件质量属性中的“效率”特性。效率的特性：时间特性：指系统处理用户请求的响应时间。资源特性：指系统在运行过程中，系统资源的消耗情况。
锦都不二·2023-12-22 23:59

FISCO BCOS（十六）多机部署及相关操作

多机部署通常指的是在多台计算机或虚拟机之间搭建一个联合系统，以实现分布式计算或服务的目的。这可以提高系统的可靠性、性能和扩展性。
发呆...·2023-12-22 20:03

2023年软件测试已经崩盘了吗，为什么都找不到工作了？

过去几年，可能你只要会一些功能测试理论就能找到一份工作，但是现在的面试和招聘要求可以直观的感受到，企业要求在提高，自动化变成必会技能，最好还能做性能，会测试开发更好
喜欢软测的小北葵·2023-12-22 17:00

测试理论知识六：可用性测试/用户体验测试

1.可用性(或用户体验)测试可用性测试又被称为用户体验测试，文本中，将以可用性测试来进行讲解。可用性测试基本上属于黑盒测试。软件开发中，程序员主要精力在于功能的实现和性能这些方面，对于可用性方面，关注点不是很多。但是，作为用户角度来讲，一个软件的可用性/用户体验是最直接的。这也是开发人员往往忽视的一点。2.可用性测试基本要素可用性的基本要素一般来说是产品经理的责任，不过作为测试工程师来说，对以下基
依晴无旧·2023-12-22 16:49

测试理论大全(附加-常见面试题)

目录一、什么是软件（software）1.软件2.扩展：软件开发的阶段划分1.需求分析阶段2.设计阶段3.编码阶段面试题：哪个阶段引入的bug最多？哪个阶段最少？对测试工作有怎样的影响？二.什么是软件缺陷1.缺陷5条定义（重点）：2.IEEE（美国电气和电子工程师协会）协会对于缺陷的定义（理解）3.缺陷的近义词（了解）三.软件测试--test1.什么是软件测试？四、计算机的层次1、计算机层次2.扩
橙子味冰可乐·2023-12-22 16:48

软件测试理论-软件测试流程与测试模型

一、测试流程1.测试需求分析阅读需求分析文档，记录不明确之处确定各部门对需求理解一致站在不同角度对需求进行查漏补缺2.编写测试计划核心：测什么：测试目标及范围谁来测：人员进度安排怎么测：测试策略、测试工具3.制定测试方案4.开发与设计测试用例5.执行测试用例6.提交缺陷报告提交->验证->关闭7.测试分析与评审8.提交测试总结9.准备下一版本测试二、软件测试质量模型质量模型提供任何软件或硬件，测试
花果水莲·2023-12-22 16:48

测试理论知识之测试基础

软件测试质量1.1什么是质量美国著名的质量管理专家朱兰（J.M.Juran）博士从顾客的角度出发，提出了产品质量就是产品的适用性质量：反映实体满足明确或隐含需要能力的特性总和。1.2软件质量软件质量就是：“软件与明确的和隐含的定义的需求相一致的程度”衡量软件质量的标准：上图总结：满足客户明确的需求，符合软件开发的准则，满足隐含的需求1.4软件质量考虑的要素红色的为测试按内容分类有哪些？1.4.1功
叫我团子吧·2023-12-22 16:47

软件测试理论知识（入门篇）

一、测试基础知识点1、软件生命周期阶段主要人员主要任务输出文档计划项目经理指定整个项目的计划（目标、人员、预算）项目计划需求分析产品经理、需求分析人员进一步确定用户的需求描述软件的具体功能解决系统做什么的问题需求规格说明书（SRS）产品需求文档（PRD）设计系统架构师、高级开发人员系统架构师：系统–>子系统–>模块–>函数高级开发人员：对函数的实现进行详细设计解决问题如何做的问题概要设计详细设计编
我只会埋头炫饭·2023-12-22 16:17

软件测试理论知识

软件测试四大阶段：单元测试（函数）、集成测试（模块）、系统测试（整个软件）、验收测试（整个软件）单元测试：也称模块测试，针对软件设计的最小单位目的：检查每一个程序单元能否正确的实现需求文档的功能，性能，接口，等发现各模块内部可能存在的各种错误。集成测试：也称组装测试，是检验程序单元或部件的接口关系。逐步集成符合需求文档要求的程序部件或整个系统。集成测试常见测试方法（集成方法）：1、大爆炸集成：所有
哟哟哟2333·2023-12-22 16:14

测试理论知识五：功能测试、系统测试、验收测试、安装测试、测试的计划与控制

模块测试的目的是发现程序模块与其接口规格说明之间的不一致。功能测试的目的是为了证明程序未能符合其外部规格说明。系统测试的目的是为了证明软件产品与其初始目标不一致。1.功能测试功能测试是一个试图发现程序与其外部规格说明之间存在不一致的过程。功能测试通常是一项黑盒操作。基于黑盒的测试策略，等价类划分方法、边界值分析方法、因果图分析方法和错误猜测方法是比较适合功能测试的。2.系统测试系统测试并非是测试整
依晴无旧·2023-12-22 15:11

工具系列：PyCaret介绍_Fugue 集成_Spark、Dask分布式训练

PyCaret使用Fugue来支持分布式计算场景。
愤斗的橘子·2023-12-22 12:22

大数据处理与分析

掌握分布式并行编程框架MapReduce掌握基于内存的分布式计算框架Spark理解MapReduce的工作流程、Spark运行原理熟悉机器学习概念一.MapReduceHadoopMapReduce是一个软件框架
僖僖cc·2023-12-21 22:34

测试理论知识四：大型软件的测试技巧——单元测试

1.模块测试/单元测试模块测试也被称为单元测试，本文章称单元测试为主。对于小的程序测试，我们可以在一定时间内完成，如果面对的是大型程序，等程序开发完成之后我们再进行测试，那会大大降低我们的效率。单元测试是对程序中的单个子程序、子程序或过程进行测试的过程，也就是说，一开始并不是对整个程序进行测试，而是先将注意力集中在对构成程序的较小模块的测试上面。2.单元测试的测试用例设计单元测试总体上是面向白盒测
依晴无旧·2023-12-21 21:45

【揭秘】腾讯大数据98.8秒完成100TB数据排序的架构和算法

在这次竞赛中，腾讯云数智分布式计算平台分别夺得SortBenchmark大赛GraySort和Minutesort的冠军，创造了四项世界纪录。
yoku酱·2023-12-21 21:16

使用Apache Spark比较Python和Scala for Data Science

ApacheSpark是一个分布式计算框架，可以简化和加速数据处理和分析工作流程，适用于处理大型数据集的数据科学家和工程师。它为原型设计提供统一的界面，并构建生产质量应用程序，使其特别适合敏捷方法。
Liam_ml·2023-12-21 14:40

Hadoop/Spark 太重，esProc SPL 很轻

很多用户开始转向分布式计算路线，用多台廉价的PC服务器组成集群来完成大数据计算任务。Hadoop/Spark就是其中重要的软件技术，由于开源免费而广受欢迎。
码农翻身·2023-12-21 10:07

什么是ip数据库

2.功能与应用IP数据库的主要功能是将普通的IP地址转换为包含*、省份、城市、运营商等信息的地理位置归属数据，以帮助公司进行客户地址信息的分析、定位和分布式计算等方面的应用。
liu7322·2023-12-21 08:32

003 - 共识算法-BFT

拜占庭容错技术是一类分布式计算领域的容错技术。拜占庭假设是对现实世界的模型化，由于硬件错误、网络拥塞或中断以及遭到恶意攻击等原因，计算机和网络可能出现不可预料的行为。
Venture_Mark·2023-12-20 22:05

大数据学习(27)-Yarn总结与注意事项

它提供了一个可扩展的框架，用于处理大规模数据和分布式计算任务。YARN的主要目标是提供更高效、灵活和可扩展的
viperrrrrrr·2023-12-20 16:48

linux文件服务NFS

是分布式计算系统的一个组成部分，可实现在网络上共享和装配远程文件系统。​
Guff_hys·2023-12-20 16:25
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他