大数据测试

大数据测试之ETL测试工具和面试常见的问题及答案

转自：http://www.51testing.com/html/87/n-3722487.html概述商业信息和数据对于任何一个企业而言都是至关重要的。现在很多公司都投入了大量的人力、资金和时间对这些信息、数据进行分析和整理。数据的分析和整理已经获得了巨大的潜在市场，因此为了使得这个过程更为简单，越来越多的软件供应商引入了ETL测试工具。目前，有需要开源的ETL工具，供应商允许用户直接从他们的官
Andychau2015·2019-03-19 11:37

2019，测试人员该如何清晰的认清职业规划

团队管理领域专场互联网测试：接口测试、白盒测试移动互联网测试：通用app测试、微信小程序测试物联网（IOT）：车联网、智能家居、智能穿戴、机器人、机顶盒互联网金融测试视频与语音测试游戏测试新方向测试、大数据测试
C_TestMG·2019-01-09 10:35

如何进行TPS-DS测试

如何客观地比较不同数据管理系统，即大数据测试基准的选择，成为一个重要的研究课题。
tingtingding·2018-12-11 17:30

8年软件测试工程师感悟——写给还在迷茫中的朋友

当然，我说的是最基础的功能测试的岗位需求已经很少了，而自动化、性能、安全乃至于以后可能出现的大数据测试、AI测试仍存在着非常多的机会。“长江后浪推前浪，前浪死在沙滩上”，曾
ming1093·2018-10-08 17:44

Hadoop（一) HDFS概念及原理总结

大数据测试须知之HadoopHDFS一、读操作图1HDFS的文件读取原理，主要包括以下几个步骤：1、首先调用FileSystem对象的open方法，其实获取的是一个DistributedFileSystem
Root_123·2018-09-11 17:25

Hadoop（二) Map Reduce概念及原理总结

大数据测试须知之HadoopMapReduce一、工作原理图1从上图可以看出，MapReduce工作原理大致可以分为以下几个步骤。1、首先在客户端启动一个作业。
Root_123·2018-09-11 17:44

大数据测试Linux平台搭建以及Linux命令基础

一CentOS6.5修改主机名1、编辑/etc/sysconfig/network[root@localhost~]#vi/etc/sysconfig/networkNETWORKING=yesHOSTNAME=hadoop-012、hostname直接命名[root@localhost~]#hostnamehadoop-013、编/etc/hosts[root@localhost~]#vi/et
夏至1208·2018-09-07 16:56

10年阿里测试大牛感悟——写给还在迷茫的朋友

当然，我说的是最基础的功能测试的岗位需求已经很少了，而自动化、性能、安全乃至于以后可能出现的大数据测试、AI测试仍存在着非常多的机会。其实，目前的国内市场，很多软件企业都存在着重开发、轻测试
TestingGDR·2018-07-14 16:44

大数据测试学习笔记之Python工具集

简介在本次笔记中主要汇总Python关于大数据处理的一些基础性工具，个人掌握这些工具是从事大数据处理和大数据测必备技能主要工具有以下（包括但不限于）：numpypandasSciPyScikit-LearnSparkMatplotlib对于上述工具，笔者之前已经从安装部署、学习其官方示例等等均已经初步做了一些学习，但在实战方面有待进一步提升，有兴趣的朋友可以加入和我一起学习提升。numpyNumP
zhusongziye·2018-03-14 20:25

前端语法整理

其实这段时间，也并不是毫无所获，还是发表了一些比较系统的文章（比如“大数据测试环境全量迁移docker之路”），在公司内部的论坛里，由于涉及一些关键技术和敏感信息，所以不便在此发表。
zni.feng·2018-03-14 11:00

小白学习大数据测试之hadoop hdfs和MapReduce小实战

在湿货|大数据测试之hadoop单机环境搭建(超级详细版)这个基础上，我们来运行一个官网的MapReducedemo程序来看看效果和处理过程。
小强测试·2018-02-04 11:07

小白学习大数据测试之ETL

之前发布过一篇关于ETL的文章，无奈被人说太简单。。。。唉，小编也是刚接触啊，自然不能那么高深，所以只是对学习的过程做了记录转换为文章分享给大家，如果对你有帮助，不要吝啬点赞+转发，如果对你没有帮助，那就请转身离开。。。。或者你写一篇更详细的给我，我申请红包给你（邪恶的笑~）好啦，回归正题，这次作为补充在详细介绍下。ETL是什么？其实ta指的是一个过程，就是大数据中对数据处理的过程（抓取>转换>装
小强测试·2018-02-01 17:19

大数据测试之hadoop单机环境搭建(超级详细版)

友情提示：本文超级长，请备好瓜子Hadoop的运行模式单机模式是Hadoop的默认模式，在该模式下无需任何守护进程，所有程序都在单个JVM上运行，该模式主要用于开发和调试mapreduce的应用逻辑；伪分布式模式下，Hadoop守护进程运行在一台机器上，模拟一个小规模的集群。该模式在单机模式的基础上增加了代码调试的功能，允许你检查NameNode，DataNode，Jobtracker，Taskt
小强测试·2018-01-30 11:32

小白学习大数据测试之hadoop再次探索

引子虽然通过《小白学习大数据测试之hadoop初探》以及把hadoop的基本核心说明白了，但是似乎对于小白来说还是会有点懵逼。。。。
小强测试·2018-01-22 19:38

小白学习大数据测试之hadoop初探

Hadoop的历史这里就不多说了，网上很多资料，总而言之对于hadoop谷歌和雅虎对于ta的贡献功不可没。更多介绍请自行查看这里：https://baike.baidu.com/item/Hadoop/3526507?fr=aladdinHadoop的应用场景数据分析，如日志系统、推荐系统离线计算海量数据存储Hadoop的核心Hadoop的框架最核心的设计就是：HDFS和MapReduce。HDF
小强测试·2018-01-17 19:54

小白学习大数据测试之主流程和关键步骤

明白这个道理之后，我们就先来看看大数据测试的主流程是个神马样子的。需求分析。这步考虑的越全面那么后续
小强测试·2018-01-15 08:41

小白学习大数据测试之揭秘大数据的背景与发展

大数据是个神马鬼根据麦肯锡全球研究所给出的定义是：一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征。简单点说就是指无法在一定时间范围内用传统的计算机技术进行处理的海量数据集。大数据市场前景阿里巴巴创办人马云来台演讲中就提到，未来的时代将不是IT时代，而是DT的时代，DT就是DataTech
小强测试·2018-01-09 22:36

从功能测试角度谈大数据测试

大数据，已经成为了一个时代的代名词，当今的互联网属于大数据时代，大数据时代的到来，颠覆了以往对数据的惯性思考方式，要保证数据执行，软件质量，测试质量，数据使用场景等，都需要重新变换一个新的角度，对软件进行更全方面的思考。之前大数据很少有测试，开发会觉得：测试环境又没有那么多数据，你怎么测？抛开大数据的数据量大的特点，究其根本，他也是为业务服务的，有一句话我非常赞同：一切技术都是为业务服务，脱离业务
小强测试·2017-12-21 07:28

从功能测试角度谈大数据测试

大数据，已经成为了一个时代的代名词，当今的互联网属于大数据时代，大数据时代的到来，颠覆了以往对数据的惯性思考方式，要保证数据执行，软件质量，测试质量，数据使用场景等，都需要重新变换一个新的角度，对软件进行更全方面的思考。之前大数据很少有测试，开发会觉得：测试环境又没有那么多数据，你怎么测？抛开大数据的数据量大的特点，究其根本，他也是为业务服务的，有一句话我非常赞同：一切技术都是为业务服务，脱离业务
小强测试·2017-12-13 12:01

ETL大数据测试介绍

ETL是神马ETL（Extract，TransformandLoad）翻译为中文就是数据提取、转换和加载。典型的大数据项目里，一般都有数据获取，数据清洗，数据发掘，数据可视化，数据分析等步骤，而这个过程就是所谓的ETL。所以ta定义的是过程，并不是技术也不是工具。数据仓库测试VS数据库测试这里为什么会提到数据仓库呢？原因是ta与ETL有着千丝万缕的关系。比如，我们要盖一栋楼，那这个建筑图就是数据仓
小强测试·2017-12-01 08:02

给软件测试工程师的一些面试建议！

刚开始我对测试的要求比较高，希望具备一些大数据测试经验，还要对分布式环境搭建有了解，能够独立搭建测试环境，持续集成了解一点，简单的构建可以做，然而面试经验告诉我，这样的人可遇不可求。慢慢的我
zhaodiana·2017-11-27 22:10

一线券商教你如何保障大数据质量

作者简介：刘宏霞平安证券大数据测试组负责人2014年加入平安证券，正值互联网金融潮流兴起，组织并参与大数据自动化以及监控体系的搭建、应用和优化。
·2017-03-16 08:00

一线券商教你如何保障大数据质量

作者简介：刘宏霞平安证券大数据测试组负责人2014年加入平安证券，正值互联网金融潮流兴起，组织并参与大数据自动化以及监控体系的搭建、应用和优化。
·2017-03-16 00:00

<>HBase跨版本数据迁移总结

作者：王亮出处：腾云阁文章某客户大数据测试场景为：Solr类似画像的数据查出用户标签——通过这些标签在HBase查询详细信息。以上测试功能以及性能。其中HBase的数据量为500G，Solr约5T。
CloudBase·2017-03-12 00:00

HBase跨版本数据迁移总结

作者：王亮出处：腾云阁文章-------------------------------------------------某客户大数据测试场景为：Solr类似画像的数据查出用户标签——通过这些标签在HBase
菠萝破坏神·2017-03-11 16:11

HBase跨版本数据迁移总结

某客户大数据测试场景为：Solr类似画像的数据查出用户标签——通过这些标签在HBase查询详细信息。以上测试功能以及性能。其中HBase的数据量为500G，Solr约5T。
腾讯云+社区·2017-03-09 18:00

大数据测试类型&大数据测试步骤

大数据测试类型测试大数据应用程序更多的是验证其数据处理，而不是测试软件产品的个别功能。当涉及到大数据测试时，性能和功能测试是关键。在大数据测试中，QA工程师使用集群和其他组件来验证对TB级数据的成
坏蛋是我·2017-02-07 16:13

如何进行TPS-DS测试

如何客观地比较不同数据管理系统，即大数据测试基准的选择，成为一个重要的研究课题。
huangmr0610·2017-01-14 14:33

循环队列及C语言实现

在之前的博客中给出了设计循环队列的思路以及源码，这些可都是经过我长期大数据测试的验证哦。
SoldierJazz2019·2016-12-28 20:56

2017届中兴飞流校招大数据测试工程师面经

中兴飞流同样是我没想到会收到面试通知的公司。中兴飞流是合资公司，2016年2月才成立，今年招收应届生人数不到10个，就没有组织宣讲会。一开始听同学说她投了中兴飞流，我也就跟着投了，但没报多大希望，毕竟找工作到这个时候，也了解找工作有很多影响因素。10月24日早上查收邮件时发现中兴飞流给了面试通知，正好25日没事，就约定了第二天面试。我有一个习惯，面试前一定要了解这个公司情况以及往年的面经，可是刚成
twc829·2016-10-27 17:47

老李分享：持续集成学好jenkins之安装

如果对课程感兴趣，请大家咨询qq：908821478，poptest在移动端测试开发培训，selenium培训，大数据测试培训中都加入了持续集成的课程，为了能提高大家的技能，实战能力，Poptest也采购了部分机器构建测试环境
北京茑萝00·2015-12-15 14:13

老李分享：持续集成学好jenkins之安装

如果对课程感兴趣，请大家咨询qq：908821478，poptest在移动端测试开发培训，selenium培训，大数据测试培训中都加入了持续集成的课程，为了能提高大家的技能，实战能力，Poptest也采购了部分机器构建测试环境
北京茑萝00·2015-12-15 14:13

老李分享：持续集成学好jenkins之安装

如果对课程感兴趣，请大家咨询qq：908821478，poptest在移动端测试开发培训，selenium培训，大数据测试培训中都加入了持续集成的课程，为了能提高大家的技能，实战能力，Poptest也采购了部分机器构建测试环境
北京茑萝00·2015-12-15 14:13

大数据测试之hadoop命令大全 2

31、获取或设置每个守护进程的日志级别(daemonlog)。用法：hadoopdaemonlog-getlevel用法：hadoopdaemonlog-setlevel命令选项                                       描述-getlevel                       打印运行在的守护进程的日志级别。这个命令内部会连接http:///logLe
北京茑萝00·2015-12-14 17:18

大数据测试之hadoop命令大全 2

31、获取或设置每个守护进程的日志级别(daemonlog)。用法：hadoopdaemonlog-getlevel用法：hadoopdaemonlog-setlevel命令选项                                       描述-getlevel                       打印运行在的守护进程的日志级别。这个命令内部会连接http:///logLe
北京茑萝00·2015-12-14 17:18

大数据测试之hadoop命令大全 1

大数据测试之hadoop命令大全1、列出所有HadoopShell支持的命令  $bin/hadoopfs-help2、显示关于某个命令的详细信息  $bin/hadoopfs-helpcommand-name3
北京茑萝00·2015-12-14 17:43

大数据测试之hadoop命令大全 1

大数据测试之hadoop命令大全1、列出所有HadoopShell支持的命令  $bin/hadoopfs-help2、显示关于某个命令的详细信息  $bin/hadoopfs-helpcommand-name3
北京茑萝00·2015-12-14 17:43

老李分享：大数据测试中java和hadoop关系

老李分享：大数据测试中java和hadoop关系Hadoop的创始人是DougCutting，同时也是著名的基于Java的检索引擎库ApacheLucene的创始人。
北京茑萝00·2015-12-11 14:53

老李分享：大数据测试中java和hadoop关系

老李分享：大数据测试中java和hadoop关系Hadoop的创始人是DougCutting，同时也是著名的基于Java的检索引擎库ApacheLucene的创始人。
北京茑萝00·2015-12-11 14:53

老李分享：大数据测试之HDFS文件系统

老李分享：大数据测试之HDFS文件系统    poptest是国内唯一一家培养测试开发工程师的培训机构，以学员能胜任自动化测试，性能测试，测试工具开发等工作为目标。
北京茑萝00·2015-12-11 14:33

老李分享：大数据测试之HDFS文件系统

老李分享：大数据测试之HDFS文件系统poptest是国内唯一一家培养测试开发工程师的培训机构，以学员能胜任自动化测试，性能测试，测试工具开发等工作为目标。
北京茑萝00·2015-12-11 14:33

大数据测试之hadoop系统生态

大数据测试之hadoop系统生态MapReduce:分布式数据处理模型和执行环境、运行于大型商用机集群。ZooKeeper:一个分布式、高可用的协调服务。
北京茑萝00·2015-12-11 14:10

大数据测试之hadoop系统生态

大数据测试之hadoop系统生态MapReduce:分布式数据处理模型和执行环境、运行于大型商用机集群。ZooKeeper:一个分布式、高可用的协调服务。
北京茑萝00·2015-12-11 14:10

大数据测试之Hadoop的基本概念

大数据测试之Hadoop的基本概念   poptest是国内唯一一家培养测试开发工程师的培训机构，以学员能胜任自动化测试，性能测试，测试工具开发等工作为目标，也是国内最早探索大数据测试培训的机构，开发了独有的课程体系
北京茑萝00·2015-12-11 14:59

大数据测试之Hadoop的基本概念

大数据测试之Hadoop的基本概念   poptest是国内唯一一家培养测试开发工程师的培训机构，以学员能胜任自动化测试，性能测试，测试工具开发等工作为目标，也是国内最早探索大数据测试培训的机构，开发了独有的课程体系
北京茑萝00·2015-12-11 14:59

大数据测试之初识Hadoop2

HDFS的关键元素：Block：将一个文件进行分块，通常是64M。NameNode：保存整个文件系统的目录信息、文件信息及分块信息，这是由唯一一台主机专门保存，当然这台主机如果出错，NameNode就失效了。在Hadoop2.*开始支持activity-standy模式----如果主NameNode失效，启动备用主机运行NameNode。DataNode：分布在廉价的计算机上，用于存储Block块
北京茑萝00·2015-12-10 17:39

大数据测试之初识Hadoop2

HDFS的关键元素：Block：将一个文件进行分块，通常是64M。NameNode：保存整个文件系统的目录信息、文件信息及分块信息，这是由唯一一台主机专门保存，当然这台主机如果出错，NameNode就失效了。在Hadoop2.*开始支持activity-standy模式----如果主NameNode失效，启动备用主机运行NameNode。DataNode：分布在廉价的计算机上，用于存储Block块
北京茑萝00·2015-12-10 17:39

大数据测试之初识Hadoop2

HDFS的关键元素：Block：将一个文件进行分块，通常是64M。NameNode：保存整个文件系统的目录信息、文件信息及分块信息，这是由唯一一台主机专门保存，当然这台主机如果出错，NameNode就失效了。在Hadoop2.*开始支持activity-standy模式----如果主NameNode失效，启动备用主机运行NameNode。DataNode：分布在廉价的计算机上，用于存储Block块
北京茑萝00·2015-12-10 17:39

大数据测试之初识Hadoop1

大数据测试之初识Hadoop    POPTEST老李认为测试开发工程师是面向测试的开发，也就是说，写代码就是为完成测试任务服务的，写自动化测试（性能自动化，功能自动化，安全自动化，接口自动化等等）的case
北京茑萝00·2015-12-10 17:15

大数据测试之初识Hadoop1

大数据测试之初识Hadoop    POPTEST老李认为测试开发工程师是面向测试的开发，也就是说，写代码就是为完成测试任务服务的，写自动化测试（性能自动化，功能自动化，安全自动化，接口自动化等等）的case
北京茑萝00·2015-12-10 17:15
上一页 1 2 3 4 5 6 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他