大数据软件测试技术的类型及挑战
大数据软件测试技术的类型及挑战
摘要:随着大数据技术的发展、大数据系统不断出现,用户对系统质量的期望,大数据测
试技术也将不断完善。该文把大数据测试和传统软件测试进行对比,详细阐述了大数据功能测
试的步骤,简单介绍了几种大数据非功能测试类型以及大数据测试面临的挑战。
关键词 :大数据; 软件测试; 步骤;
大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要
新处理模式才能具有更强的决策力、洞察发现力和流程优化力的海量信息,在运行方面具有数
据流庞大、数据种类繁多、数据价值量密度较低以及数据运行和处理的速度极快等基础特征。
[1]当前,我国大数据的应用领域已经从政府、金融延伸到医疗、生物、电商、安防等各行各
业。随着云计算技术与应用、物联网、大数据等技术的不断发展,应用于各个领域的大数据系
统也不断形成。这种大数据系统的系统结构复杂,数据类型更加丰富,更有 TB 级别的海量数
据量,要使系统平稳运行,比起传统软件更是需要软件测试技术作为支撑。随着大数据技术的
发展也逐步形成具有独特特征的大数据测试技术。
1 大数据测试与传统测试的比较
传统软件测试是在系统已知的前提下对从用户需求提取到的测试任务进行的测试,用户的行为
直接影响系统的最终执行结果。传统软件测试最主要的两种测试类型为功能测试和性能测试,
都是简单的从用户界面入手,比如 12306 中注册、登录、下订单、支付等,可直接使用黑盒测
试方法即可。传统软件测试技术已经比较成熟,也形成了各种配套的自动化测试工具。
软件测试类型很多,包括功能测试、性能测试、安装与卸载测试、兼容性测试、健壮性测试、
文档测试、回归测试等等。大数据测试和传统软件测试相比,主要测试类型都是功能测试和性
能测试,但在测试目的和测试流程存在一定差异,主要表现在大数据测试更多的是去验证其数
据处理而不是验证单一的功能。
大数据测试与传统测试的区别如表 1所示。
2 大数据功能测试步骤
整体而言,大数据功能测试可以分为下面四个步骤:
2.1 数据预处理验证
大数据测试的第一步,也称作pre-hadoop 阶段。本阶段主要验证:
表1 大数据测试与传统测试的区别
1)来自关系数据库、日志系统、社交网络、互联网文本和文件等各种数据资源应该要被验
证,确保是正确的资源被加载进系统[4];
2)数据加载后还要验证推送到hadoop 系统中的数据和源数据是一致的[4];
3)验证正确的数据被提取并被加载到 HDFS(Hadoop Distributed File System)正确的数据节点
中。
2.2"MapReduce"验证
经过数据预处理验证、数据成功加载到 HDFS 后,MapReduce 开始对数据进行并行处理。由
Google 公司最早提出的 MapReduce 是一种面向大规模数据处理的并行技术模型,也是当前公
摘要:
展开>>
收起<<
大数据软件测试技术的类型及挑战 摘要:随着大数据技术的发展、大数据系统不断出现,用户对系统质量的期望,大数据测试技术也将不断完善。该文把大数据测试和传统软件测试进行对比,详细阐述了大数据功能测试的步骤,简单介绍了几种大数据非功能测试类型以及大数据测试面临的挑战。 关键词:大数据;软件测试;步骤;大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化力的海量信息,在运行方面具有数据流庞大、数据种类繁多、数据价值量密度较低以及数据运行和处理的速度极快等基础特征。[1]当前,我国大数据的应用领域已经从政府、金融延伸到...
相关推荐
-
2024年党建工作要点工作计划5篇供参考
2023-12-16 999+ -
2025年专题生活会对照带头严守政治纪律和政治规矩,维护党的团结统一等“四个带头方面”个人对照检查发言材料4110字文稿
2024-12-21 999+ -
2025年医保局局长、科技局领导干部专题“四个带头”方面对照检查材料2篇例文(附:反面典型案例剖析情况)
2025-02-09 458 -
2025年国有企业党委书记、市总工会党组书记民主生活会“四个带头”方面对照个人检查发言材料2篇文(附:典型案例、上年度整改+个人情况)
2025-02-09 507 -
2025年市委组织部部长、教育局党委书记生活会“四个带头”个人对照检查发言材料2篇文(典型案例+个人事项)
2025-02-09 627 -
2025年市财政局党组书记、局长、市检察院党组领导班子对照“四个带头”方面生活会个人对照检视发言材料2篇文(含以案为鉴反思、以案促改促治方面)
2025-02-09 509 -
市检察院党组、市财政局领导班子2025年生活会对照“四个带头”方面检视发言材料2份文【含以违纪行为为典型案例剖析】
2025-02-09 461 -
2025年市财政局领导对照“四个带头”生活会检视发言材料2篇例文【含以违纪行为为典型案例剖析】
2025-02-09 586 -
单位领导班子2025年聚焦“四个带头”生活会对照检查材料2篇文(含:典型案例剖析反思、落实意识形态责任制)
2025-02-09 758 -
2025年镇党委副书记、市科学技术局领导班子生活会对照“四个带头”检视材料2篇文【含违纪行为典型案例分析】
2025-02-09 257
作者:闻远设计
分类:其它行业资料
价格:免费
属性:3 页
大小:15.21KB
格式:DOCX
时间:2024-03-09

