第一篇:测试流程说明
测试部联运评测流程
说明
1,有产品评测部门主管收集评测目标,并记录到评测日程表中
2,由市场或其他部门来提供评测目标,相应的评测目标会记录在评测日程表中 3,有评测组的测试员来对评测目标进行游戏评测并给出相应联运建议
4,在测试部门内进行最终筛选,并给出集中建议(建议分为:推荐;不推荐;周期观察)5,提交给评测报告产品运营部门接口人,报告包括所有给出建议的产品报告
6,对评价为可观察的产品,进入评测日程表中的回归参看列表中,将根据周为单位进行跟
踪观察
报告上报时间:周二,周四,周五(上报时会RTX通知相关人员)
周五为每周评测产品的一个数据统计,并包括当天评测的游戏报告
如有非常值得推荐的产品游戏,会马上提交给产品运营接口人
研发产品测试流程
说明
1,对公司内研发产品测试,遵循研发部门测试进行
2,产品更新及架设到内网测试服务器后,则进行游戏测试,在测试过程中发现的问题bug
上报到bug上报系统中(这个之后进行架设)
3,提交后的bug由功能能划分表进行分配给相应的修正人,功能模块负责人划分到时可以
和其他负责部门主管进行沟通来制定或者有对应负责的部门主管来进行分配,这部分可以到时来讨论决定
4,对修正后的bug进行回归测试,测试结果分为已修正和未修正两种
5,对已修正的bug进行关闭操作,这部分有测试部门负责人执行
6,对未修正的bug测试人员则直接打回给修正人,让他继续修正
注:对于项目整体bug修正的推动会按bug的严重程度进行重点推动,督促严重bug尽快的解决
Bug的严重等级和所归为具体功能模块,到时会给一个明确的定义和划分文档,已供测试员参考
以上是对bug的跟踪、验证、回归的流程,研发产品的测试会有一个相应的日程表进行计划和记录(测试计划暂定分为:一,功能、玩法专项测试,既针对该功能、玩法进行详细测试;二,更新后常规测试,既大概走一下全部功能、玩法,保证更新后,游戏可以正常进行;三,集中和压力承载测试),测试计划主要是根据项目的进度和更新来做。
第二篇:采购部审批流程测试说明文档
采购部审批流程测试说明文档
一、采购部申请单、采购订单现有审批流程:
系统内采购订单生成后,采购员进行自审批。然后将采购订单进行系统自动打印,提交主管采购经理、采购总监、财务经理等领导签字后生效备案。
流程图:
采购流程1.0MRP分解2.0手工录入输入供应商、价格等信息生产计划部采购部3.0采购申请单4.0采购订单5.0打印审批单6.0领导审批Y7.0打印采购订单8.0通知供应商供货N14.0订单修改采购部9.0仓库接收储运部11.0非生产类检验10.0生产类检验质检部申请部门检验12.0入库储运部13.0付款财务部
二、测试目的
按照公司授权审批流程及采购部采购订单审批程序,系统内采购订单取消自审批,重新设置审批层,由主管领导在系统内审批订单。
三、测试过程
以下测试均在测试环境下,电器组织下进行测试。测试用户:E01061(采购员),E04920(采购经理),H00021
(采购总监),H00083(财务经理),E01077(采购总经理),E00358(财务总监),H00076(首席财务官),H00029(首席运营官),H00002(董事长),CHF(采购超级用户、人力资源管理员、HRMS管理员)。
3.1、取消采购订单自审批功能
以新飞电器_采购超级用户进入,设置—采购—单据类型
选择标准采购订单,点击<更新>,将责任人可审批前对勾去掉,即取消自审批功能。
提交报表:
同步WF局部表
(系统管理员下)填写员工层次结构表(采购超级用户)
3.2查看和添加职务、职位信息及相应权限 3.2.1添加职务信息
以HRMS管理员权限进入,工作结构—职务—说明,查看已经存在的职务。
添加相应职务。添加采购员、采购经理、采购总监、采购总经理、财务经理、财务总监、首席财务官、首席运营官、董事长等空职务。
3.2.2添加职位信息
以HRMS管理员权限进入,工作结构—职位—说明,查看添加相应职位。
例如:
3.2.3添加权限信息
以系统管理员权限进入添加对应权限职责。
例:
3.2.3添加采购员职责
添加为采购员,以电器采购超级用户权限。设置—人员—采购员。
3.3、设立采购审批层次
1、采购员创建采购订单,提交相应的采购经理审批。
2、采购经理批准后提交采购总监审批。
3、采购采购总监审批后,提交采财务经理审批。
4、财务经理审批后,提交采购总经理。
5、采购总经理审批后,提交财务总监。
6、财务总监审批后,提交首席财务官。
7、首席财务官审批后,提交首席运营官。
8、首席运营官审批后,提交董事长。
9、董事长审批,整个流程结束。
创建采购审批层次:以用户HRMS管理员进入,工作结构—职位—层次结构,创建审批层次
3.4查看定义对应的上下级关系(由低至高)
1、采购员
2、采购经理
(李娜)
3、采购总监
(苏俊文)
4、财务经理
(王仁伟)
5、采购总经理(李永刚)
6、财务总监
(巩红中)
7、首席财务官(尹浩恩)
9、首席运营官(丁俊发)
10、董事长
(高嘉琳)
以新飞人力资源超级用户进入,人事管理—输入维护人员—分配
3.5、查看各职位下属人员信息
以HRMS管理员权限进入,工作结构—职位—层次结构
3.6查看审批组的设定
以采购超级用户权限进入,设置—审批—审批组,创建审批组
3.7、查看审批分配的设定
以采购超级用户权限进入,设置—审批—审批分配。
3.8设置完毕,提交报表
1、以采购超级用户权限提交填写员工层次结构表报表。
2、以系统管理员权限提交同步WF局部表报表。
3.9采购订单测试
3.9.1测试采购金额小于50万元
流程:采购员—采购经理—采购总监—财务经理—批准结束 测试:采购员E01061提交采购订单49320审批过程。
点击审批
点击确定。
采购经理E04920进入http://172.16.10.2:8001进行单据审批,审批后提交采购总监审批。
点<审批> 采购总监H00021进入http://172.16.10.2:8001进行单据审批,审批后提交财务经理审批。
点<审批>
财务经理H00021进入http://172.16.10.2:8001进行单据审批,审批批准。
点<审批> 采购员E01061查看此订单是否已经批准
3.9.2测试采购金额大于50万元小于300万元
步骤如上
3.9.3测试采购金额大于300万元小于500万元
步骤如上
3.9.4测试采购金额大于500万元
步骤如上
自审批: Step1:
创建一个新内部审批组,用于电器采购制冷、家电的成品,额度没有限制
定义相关人员的职位
职位与审批组关联,单据类型一定选择标准的采购订单
第三篇:产品测试流程
需求分析
需求分析由产品人员制定,他们要做的不是一份简单的文档,而是细化每一个功能的细节,每一个按钮的位置,对于稍大或复杂一点的需求都进行建模。
需求评审
需求评审(产品需求人员、开发人员、测试人员、设计人员)前期需求进入会大大增加测试人员对产品的功能的整体把握,现在测试人员担任的是测试和产品体验员的身份。测试人员提出需求,开发人员考虑功能实现的方案与可行性、当然开发负责也是要参与的。测试人员主要是对需求的理解提出疑问,以便才能根据需求写用例。QA人员是最终对软件质量进行验证的人,所以也需求了解需求。
开发人员编写排期
开发人员需求根据需求功能点进行排期。然后将开计划转交给测试人员。
测试计划排期
测试人员根据开发计划,对测试具体测试时间,也就是开发功能完成后的时间,进行几轮测试等。然后,把项目的开发与测试计划发送给各部门负责人及参与项目的所有人员。
编写测试用例
根据详细的需求分档,开始进行用例的编写。
【开发人员写开发计划--》测试人员编写测试计划--》邮件通知所有人员及部门负责人。】
用例评审
在用例进行评审之间,先以邮件形式将用例发送给相关人员,以便他们事先了解用例对哪些功能进行验证以及验证的细节。
然后,测试人员组进行用例评审,开发人员对用例与实际功能不符合有哪些,产品人员对会通过用例对功能的具体实现进行把握等等。
【测试用例评审(产品需求人员、开发人员、测试人员、QA人员)】
提交基线
开发人员完成所有功能后,会对自己的功能进行一个自测。自测完成后提交测试人员进行基线。【开发代码及自测---》编写测试用例】
具体测试流程
开发人员对于基到测试线的功能进行测试,发现的问题通过缺陷管理工具进行反馈,开发人员对问题进行修复,然后,准备第二轮测试。
测试人员完成第一轮测试后,需要写测试结论,发到相关人员。然后对基线后的第二轮进行测试,第二轮会对第一轮中发现的问题进行重点回归。
测试具体流程如下:
1、测试和发现软件中存在的软件缺陷
使用各种测试技术和方法来测试和发现软件中存在的软件缺陷。测试技术主要分为黑盒测试和白盒测试两大类。
其中黑盒测试技术主要有等价类划分法、边界值法、因果图法、状态图法、测试大纲法以及各类典型的软件故障模型等;白盒测试的主要技术有语句覆盖、分支覆盖、判定覆盖、基本路径覆盖等;
2、测试工作需要贯穿整个软件开发生命周期
完整的软件测试工作包括单元测试、集成测试、确认测试和系统测试工作。
单元测试工作主要在编码阶段完成,由开发人员和软件测试工程师共同完成,其主要依据是详细测试。集成测试的主要工作测试软件模块之间的接口是否正确实现,基本依据是软件体系结构设计。确认测试和系统测试是在软件开发完成后,验证软件的功能与需求的一致性、验证软件在相应的硬件条件下的系统功能是否满足用户需求,其主要依据是用户需求。
3、缺陷报告编写及提交
测试人员将发现的缺陷编写成正式的缺陷报告,提交给开发人员进行缺陷的确认和修复。缺陷报告编写最主要的要求是保证缺陷的重现。要求测试人员具有很好的文字表达能力和语言组织能力。
4、软件质量分析
测试人员需要分析软件质量。
在测试完成后,测试人员需要根据测试结果来分析软件质量,包括缺陷率、缺陷分布、缺陷修复趋势等。给出软件各种质量特性包括有功能性、可靠性、易用性、安全性、时间与资源特性等的具体度量。最后给出一个软件是否可以发布或提交用户使用的结论。
5、测试计划制定
测试过程中,为了更好地组织与实施测试工作,测试负责人需要制定测试计划,包括有测试资源、测试进度、测试策略、测试方法、测试工具、测试风险等。
6、测试用例报告形成测试人员为了更好更有效地进行测试,保证测试工作质量,需要在执行测试工作之前首先需要设计测试用例,形成测试用例报告。设计测试用例是保证测试质量的核心工作,很多测试技术都可以用来指导设计用例。
7、自动化测试工具引进
为了提高工作效率或提高测试水平,测试工作需要引进自动化测试工具,测试人员需要学会使用自动化测试工具,编写测试脚本,进行性能测试等。
8、测试水平提高
测试负责人在测试工作中,还需要根据实际情况不断改进测试过程,提高测试水平,进行测试队伍的建设等。
缺陷管理
使用bug缺陷管理工具,redmine项目管理,通过测试对发现的问题提交到redmine上并进行跟踪。视情况可以将比较简单的bug直接对接开发人员,通过当面交流的方式阐明简单bug的问题所在,提高开发人员修复bug的效率,同时要在redmine上做好bug记录,发布测试新的版本的时候复测问题。
测试管理
经过两到三轮或四轮的测试后,直到没发现新的问题,或暂时无法解决,或不紧急的问题。通过上级确认,可以通过。编写测试报告与验收方案。
验收方案是交由QA进行验证的。在现公司的流程中是将测试与QA分开的,测试人员重点关注的是功能是否可以正常运行。QA关注的是整个流程的质量以及最终用户的质量。有些公司QA与测试是不区分的,但这对测试的要求会更高,除了关心功能,还需要关心整体流程与质量。
上线后测试
产品上线后需要再次测试产品的功能性,确保发布线上的环境配置正确,产品功能流畅。这是我们一个面向大众用户的网站,给于测试人员的定位是测试员兼用户体验员,测试员将发现的bug和体验问题提交到缺陷管理系统,由经理对问题进行分析,指派开发人员解决。定期对系统进行更新。(测试人员以用户的角度出发体验功能完整性和功能流畅度以及功能的体验,为产品的长期发展起到一个促进的作用!)
第四篇:测试流程参考资料
工作两年了,我一直希望让自己每年对测试的理解更深入一层。工作一年的时候我写了《谈软件测试---一年工作总结》,谈轮了自己对各种测试的理解,这一年来,虽然对那些理概念的有所加强,自我感觉没有什么质的变化。前些天听我们公司的一位测试经理讲《敏捷测试》豁然开朗。他在学造飞机,而我一直在学造飞机里的一个发动机。我从来没想过,一个完整飞机的架构应该是怎样的。
如果想让测试在公司的项目中发挥出它最大的价值,并不是招两个测试技术高手,或引入几个测试技术,而是测试技术对项目流程的渗透,以及测试流程的改进与完善。虽然,当然测试行业前景乐观,许多中小企业也都在引入测试,但一百个公司就有一百种测试,每个公司对测试的看法不同,公司对测试的定位也不完全一样。本人前后经历两个公司,以自己的拙见浅谈一下对测试流程的看法。
这几天整理思路,回顾了前两份测试工作的流程与架构。
简陋的测试流程
先说笔者入职的第一个家公司,笔者是第一个入职的专职测试人员,相信一两个测试的公司还是不少的,入职后各种项目都在进行当中,上面给我的定位是并没完全融入到项目中去。而通过指派任务的方式。下面是简陋的流程图:
需求分析与架构设计:
我们做的是某一移动公司内部使用的项目,需求分析与架构全部由项目经理完成,之后由项目经理给具体某个开发人员分配任务,具体对某个功能模块的实现。这个对项目经理的经验与技术要求很高,他既然担任了需求分析师,又担任架构师的角色。程序员编码:
因为我们开发语言用的是JAVA 语言,IDE用myeclipse 中自带的CVS版本管理工具,开发人员完成代码后,提交到版本库中。测试:
笔者入职后的第一个任务是搭建缺陷管理工具,禅道项目管理,通过推广对发现的问题进行跟踪。后来正明效果并不好,因为对于一个六七人的开发团队项目,开发人员更喜欢测试人员能当面反馈,这样更能提高效率。对一个小bug 通过当面交流的方式就可以将问题修复。
对于当时的环境,并没有测试线。开发人员在本机上将项目进行部署运行。测试人员通过局域网访问开发人员的机子进行访问。或在测试人员本机上进行部署测试。这也是一个致命的缺点。因为开发人员测试人员使用的电脑存在太多不稳定性,这些都会造成问题的出现,有时候难以判定是系统问题还是环境问题。上线:
经过测试人员测试通过后,开发人员部署上线。A程序员流程
你会发现在流程图中,A程序员是先发上线之后,再进行测试。这是我们一个面向大众用户的网站,上面给于测试人员的定位是测试员兼用户体验员,测试员将发现的bug和体验问题提交到缺陷管理系统,由经理对问题进行分析,指派开发人员解决。定期对系统进行更新。
流程分析:
这个流程唯一的优点,就是能快速的发现并修复问题。
缺点就非常多了,相信许多小软件公司也有类似的流程。
这个流程中,项目经理是核心,项目经理也确实是有多年开发与项目经验的牛人,他喜欢不定期分享上些前沿的技术。我很崇拜他。
对于测试来说,需求很不明确,测试文档与用例也是可有可无的产物,没有需求文档,或非常简陋,根据需求文档根本无法编写用例。笔者只能收集一些通用的测试用例,如登录、文件上传下载、列表翻页、日期选择、输入框验证、搜索等有一些“通用型”用例,以便在测试过程中做参考。功能测试的多了,拿到一个功能,测试思路也就出来了。
规范的测试流程
放弃上份悠闲的工作,感谢那个带我入行公司,我想了解真正的测试在公作中如何进行的。所以,来到了现在这家公司。我很欣喜的是这测试有自己的团队,专业(对当时的我来说)的流程,以及与开发等同的地位。现在的测试流程:
需求分析:
需求分析由产品人员制定,他们要做的不是一份简单的文档,而是细化每一个功能的细节,每一个按钮的位置,对于稍大或复杂一点的需求都进行建模。需求评审:
这里会叫上所有参与项目人员进行,开发人员、测试人员、QA人员。测试人员提出需求,开发人员考虑功能实现的方案与可行性、当然开发负责也是要参与的。测试人员主要是对需求的理解提出疑问,以便才能根据需求写用例。QA人员是最终对软件质量进行验证的人,所以也需求了解需求 开发人员编写排期:
开发人员需求根据需求功能点进行排期。然后将开计划转交给测试人员。测试计划排期:
测试人员根据开发计划,对测试具体测试时间,也就是开发功能完成后的时间,进行几轮测试等。然后,把项目的开发与测试计划发送给各部门负责人及参与项目的所有人员。编写测试用例:
根据详细的需求分档,开始进行用例的编写。用例评审:
在用例进行评审之间,先以邮件形式将用例发送给相关人员,以便他们事先了解用例对哪些功能进行验证以及验证的细节。
然后,测试人员组进行用例评审,开发人员对用例与实际功能不符合有哪些,产品人员对会通过用例对功能的具体实现进行把握等等。提交基线:
开发人员完成所有功能后,会对自己的功能进行一个自测。自测完成后提交测试人员进行基线。
具体测试流程:
开发人员对于基到测试线的功能进行测式,发现的问题通过缺陷管理工具进行反馈,开发人员对问题进行修复,然后,准备第二轮基。
测试人员完成第一轮测试后,需要写测试结论,发到相关人员。然后对基线后的第二轮进行测试,第二轮会对第一轮中发现的问题进行重点回归。测试通过:
经过两到三轮或四轮的测试后,直到没发现新的问题,或暂时无法解决,或不紧急的问题。通过上级确认,可以通过。编写测试报告与验收方案。
验收方案是交由QA进行验证的。在现公司的流程中是将测试与QA分开的,测试人员重点关注的是功能是否可以正常运行。QA关注的是整个流程的质量以及最终用户的质量。有些公司QA与测试是不区分的,但这对测试的要求会更高,除了关心功能,还需要关心整体流程与质量。
流程分析:
对于刚接触这个流程的我来说,这个流程是规范的,测试真正融入了整个流程,而且还担任了很重的角色,从而也有效的保证了软件产品的整体质量。
那么这个流程是不是完美的呢?不,这个项目流程太强化各种文档。我们来看测试的工作内容,测试计划、测试用例、测试结论、测试报告、验收方案、问题的提交跟踪。其实,我们真用于测试的时间是非常少的,在一周的时间,也许只有一天或不到一天的时间是在进行测试的。测试人员只有在测试的时候才会体现出他的价值。而大部分工作却不能体现他的价值。
当然,我这里会省略与测试主流程无关的东西,真正的测试工作中琐事很多。
敏捷测试流程
下面来看敏捷测试,本人并没有接触过敏捷,对敏捷也没花时间学习与研究。唯一接触就是听我们测试经理对测度流程讲了两个半小时,听讲的人很多,我站着听的。受益匪浅,凭着记忆也简单谈谈。
前面讲的第一种流程,还是第二种流程都是瀑布式的,严格来说第一种简陋的都不能称为瀑布式,对于一个三个月的项目说,产品把需求分析完了给开发,然后产品就没事儿了;开发开发完成之后给测试,然后开发人员也不忙了。测试完成之后上线。那么在产品分析的阶段,开发和测试都是没事干的(这里只对单一项目)。开发阶段,产品和测试也基本没事儿。同样在测试阶段,产品与开发也是没什么事儿的。
敏捷测试的一个核心是迭代,在每个时间点上,所有项目人员都是有事可做的。
1、下面是我理解中的敏捷测试流程图:
第一阶段:
通过上面的流程图,对于一个月的需求分析,在敏捷中,可能三五天就确定下来。这个需求定得会很模糊,但整体框架确定。产品对其中某一模块功能确认,开发人员开始对确认的功能编码,开发人员编码的过程中,测试进行功能分解,因为根据模糊的需求很难写出具体的用例,所以,只能尽量对功能进行分析得细些,标注需要验证的内容。第二阶段:
开发完成后交给测试人员进行测试,开发人员继续开发新的功能。那么测试人员发现的问题怎么办呢?会从开发团队中抽出一个人员来用于解决测试发现的问题。但开发进度并没有因为测试而停止。
流程分析:
在这个流程中弱化了文档,强调了各个人员的沟通,通过这种迭代的方式,三个月的项目,可以能两个月和两个半月就会完成。
但这种流程并非完美,加入一个功能在需求分析阶段就是错误的,因为它是一个迭代渐进的过程。也只能一路错下去。
2、对测试问题的处理
上面的图更能清晰看出对问题的处理过程。
第一块面板中是开发人员未实现的功能,第二块面板中是开发完成功能,测试人员对其进行测试,发现不通过的就放回未开发的面板中,测试通过的将放到第三块面板中。
需要说明的是,敏捷测试在国外很流行,在内容,雷声大雨点小,推行的人很多,真正有公司引入的不多。我们所在公司千差万别,测试流程也可能有很大的不同。对于已经工作两年一个测试员来说,从来没关注过测试流程与结构应该是个悲剧。我希望不被思想局限,所以,努力冲破一个又一个的局限。
第五篇:APP测试流程
APP测试基本流程 1.流程图
尽快申请到正式环境下测试 接收版本 不符
App测试版本送测规范 用户行为统计测试 后台订单统计测试 尽快申请到正式环境下测试 兼容性测试、性能压力测试 功能测试:核对需求文档 UI测试:核对rp/效果图 符合 回归测试 仍然为测试环境 进入正式环境 发送上线报告 Fail Pass
2.测试周期 测试周期可按项目的开发周期来确定测试时间,一般测试时间为两三周(即15个工作日),根据项目情况以及版本质量可适当缩短或延长测试时间。正式测试前先向主管确认项目排期。3.测试资源
测试任务开始前,检查各项测试资源。--产品功能需求文档;--产品原型图;--产品效果图;
--行为统计分析定义文档;
--测试设备(ios3.1.3-ios5.0.1;Android1.6-Android4.0;Winphone7.1及以上;Symbian v3/v5/Nokia Belle等);--其他。
4.日报及产品上线报告
1)测试人员每天需对所测项目发送测试日报。2)测试日报所包含的内容为:--对当前测试版本质量进行分级;
--对较严重的问题进行例举,提示开发人员优先修改;--对版本的整体情况进行评估。
3)产品上线前,测试人员发送产品上线报告。4)上线报告所包含的内容为:---对当前版本质量进行分级;---附上测试报告(功能测试报告、兼容性测试报告、性能测试报告以及app可用性能标准结果);
--总结上线版本的基本情况。若有遗留问题必须列出并记录解决方案。
App测试
1.安全测试
a.软件权限
1)扣费风险:包括发送短信、拨打电话、连接网络等 2)隐私泄露风险:包括访问手机信息、访问联系人信息等
3)对App的输入有效性校验、认证、授权、敏感数据存储、数据加密等方面进行检测
4)限制/允许使用手机功能接人互联网 5)限制/允许使用手机发送接受信息功能 6)限制/允许应用程序来注册自动启动应用程序 7)限制或使用本地连接
8)限制/允许使用手机拍照或录音 9)限制/允许使用手机读取用户数据 10)限制/允许使用手机写人用户数据
11)检测App的用户授权级别、数据泄漏、非法授权访问等 b.安装与卸载安全性
1)应用程序应能正确安装到设备驱动程序上 2)能够在安装设备驱动程序上找到应用程序的相应图标 3)是否包含数字签名信息
4)JAD文件和JAR包中包含的所有托管属性及其值必需是正确的 5)JAD文件显示的资料内容与应用程序显示的资料内容应一致 6)安装路径应能指定
7)没有用户的允许, 应用程序不能预先设定自动启动 8)卸载是否安全, 其安装进去的文件是否全部卸载 9)卸载用户使用过程中产生的文件是否有提示 10)其修改的配置信息是否复原 11)卸载是否影响其他软件的功能 12)卸载应该移除所有的文件 c.数据安全性
1)当将密码或其他的敏感数据输人到应用程序时, 其不会被储存在设备中, 同时密码也不会被解码
2)输人的密码将不以明文形式进行显示
3)密码, 信用卡明细, 或其他的敏感数据将不被储存在它们预输人的位置上 4)不同的应用程序的个人身份证或密码长度必需至少在4一8 个数字长度之间
5)当应用程序处理信用卡明细, 或其他的敏感数据时, 不以明文形式将数据写到其它单独的文件或者临时文件中。以6)防止应用程序异常终止而又没有侧除它的临时文件, 文件可能遭受人侵者的袭击, 然后读取这些数据信息。7)当将敏感数据输人到应用程序时, 其不会被储存在设备中 8)备份应该加密, 恢复数据应考虑恢复过程的异常讯中断等, 数据恢复后再使用前应该经过校验
9)应用程序应考虑系统或者虚拟机器产生的用户提示信息或安全替告 10)应用程序不能忽略系统或者虚拟机器产生的用户提示信息或安全警告, 更不能在安全警告显示前,,利用显示误导信息欺骗用户,应用程序不应该模拟进行安全警告误导用户
11)在数据删除之前,应用程序应当通知用户或者应用程序提供一个“取消”命令的操作
12)“ 取消” 命令操作能够按照设计要求实现其功能
13)应用程序应当能够处理当不允许应用软件连接到个人信息管理的情况 14)当进行读或写用户信息操作时, 应用程序将会向用户发送一个操作错误的提示信息
15)在没有用户明确许可的前提下不损坏侧除个人信息管理应用程序中的任何内容Μ
16)应用程序读和写数据正确。17)应用程序应当有异常保护。
18)如果数据库中重要的数据正要被重写, 应及时告知用户 19)能合理地处理出现的错误 20)意外情况下应提示用户 d.通讯安全性 1)在运行其软件过程中, 如果有来电、SMS、EMS、MMS、蓝牙、红外等通讯或充电时, 是否能暂停程序,优先处理通信, 并在处理完毕后能正常恢复软件, 继续其原来的功能
2)当创立连接时, 应用程序能够处理因为网络连接中断, 进而告诉用户连接中断的情况
3)应能处理通讯延时或中断
4)应用程序将保持工作到通讯超时, 进而发送给用户一个错误信息指示有连接错误
5)应能处理网络异常和及时将异常情况通报用户 6)应用程序关闭或网络连接不再使用时应及时关闭)断开 7)HTTP、HTTPS覆盖测试
--App和后台服务一般都是通过HTTP来交互的,验证HTTP环境下是否正常;--公共免费网络环境中(如:麦当劳、星巴克等)都要输入用户名和密码,通过SSL认证来访问网络,需要对使用HTTP Client的library异常作捕获处理。e.人机接口安全性
1)返回菜单总保持可用 2)命令有优先权顺序
3)声音的设置不影响应用程序的功能
4)应用程序必需利用目标设备适用的全屏尺寸来显示上述内容
5)应用程序必需能够处理不可预知的用户操作, 例如错误的操作和同时按下多个键
2.安装、卸载测试 验证App是否能正确安装、运行、卸载以及操作过程和操作前后对系统资源的使用情况 a.安装
1)软件在不同操作系统(Palm OS、Symbian、Linux、Android、iOS、Black Berry OS 6.0、Windows Phone 7)下安装是否正常。
2)软件安装后的是否能够正常运行,安装后的文件夹及文件是否写到了指定的目录里。
3)软件安装各个选项的组合是否符合概要设计说明 4))软件安装向导的UI测试
5)软件安装过程是否可以取消,点击取消后,写入的文件是否如概要设计说明处理
6)软件安装过程中意外情况的处理是否符合需求(如死机,重启,断电)7)安装空间不足时是否有相应提示 8)安装后没有生成多余的目录结构和文件
9)对于需要通过网络验证之类的安装,在断网情况下尝试一下 10)还需要对安装手册进行测试,依照安装手册是否能顺利安装 b.卸载
1)直接删除安装文件夹卸载是否有提示信息。2)测试系统直接卸载程序是否有提示信息。3)测试卸载后文件是否全部删除所有的安装文件夹。
4)卸载过程中出现的意外情况的测试(如死机、断电、重启)。5)卸载是否支持取消功能,单击取消后软件卸载的情况。6)系统直接卸载UI测试,是否有卸载状态进度条提示。
3.UI测试
测试用户界面(如菜单、对话框、窗口和其它可规控件)布局、风格是否满足客户要求、文字是否正确、页面是否美观、文字、图片组合是否完美、操作是否友好等。UI测试的目标是确保用户界面会通过测试对象的功能来为用户提供相应的访问或浏觅功能。确保用户界面符合公司或行业的标准。包括用户友好性、人性化、易操作性测试。a.导航测试
1)按钮、对话框、列表和窗口等;或在不同的连接页面之间需要导航 2)是否易于导航,导航是否直观 3)是否需要搜索引擎 4)导航帮助是否准确直观
5)导航与页面结构、菜单、连接页面的风格是否一致 b.图形测试
1)横向比较。各控件操作方式统一
2)自适应界面设计,内容根据窗口大小自适应 3)页面标签风格是否统一 4)页面是否美观
5)页面的图片应有其实际意义而要求整体有序美观
6)图片质量要高且图片尺寸在设计符合要求的情况下应尽量小 7)界面整体使用的颜色不宜过多 c.内容测试 1)输入框说明文字的内容与系统功能是否一致 2)文字长度是否加以限制 3)文字内容是否表意不明 4)是否有错别字 5)信息是否为中文显示 6)是否有敏感性词汇、关键词
7)是否有敏感性图片,如:涉及版权、专利、隐私等图片
4.功能测试
根据软件说明或用户需求验证App的各个功能实现,采用如下方法实现并评估功能测试过程:
1)采用时间、地点、对象、行为和背景五元素或业务分析等方法分析、提炼App的用户使用场景,对比说明或需求,整理出内在、外在及非功能直接相关的需求,构建测试点,并明确测试标准,若用户需求中无明确标准遵循,则需要参考行业或相关国际标准或准则。
2)根据被测功能点的特性列丼出相应类型的测试用例对其进行覆盖,如;涉及输入的地方需要考虑等价、边界、负面、异常或非法、场景回滚、关联测试等测试类型对其进行覆盖。
3)在测试实现的各个阶段跟踪测试实现与需求输入的覆盖情况,及时修正业务或需求理解错误。a.运行
1)App安装完成后的试运行,可正常打开软件。2)App打开测试,是否有加载状态进度提示。3)App打开速度测试,速度是否可观。4)App页面间的切换是否流畅,逻辑是否正确 5)注册
--同表单编辑页面--用户名密码长度--注册后的提示页面
--前台注册页面和后台的管理页面数据是否一致--注册后,在后台管理中页面提示 6)登录
--使用合法的用户登录系统。
--系统是否允许多次非法的登陆,是否有次数限制。--使用已经登陆的账号登陆系统是否正确处理。--使用禁用的账号登陆系统是否正确处理。--用户名、口令(密码)错误或漏填时能否登陆。--删除或修改后的用户,原用户登陆。
--不输入用户口令和用户、重复点(确定或取消按钮)是否允许登陆。--登陆后,页面中登陆信息。--页面中有注销按钮。--登陆超时的处理。7)注销
--注销原模块,新的模块系统能否正确处理。--终止注销能否返回原模块,原用户。--注销原用户,新用户系统能否正确处理。
--使用错误的账号、口令、无权限的被禁用的账号进行注销 b.应用的前后台切换
1)APP切换到后台,再回到app,检查是否停留在上一次操作界面。2)APP切换到后台,再回到app,检查功能及应用状态是否正常,IOS4和IOS5的版本的处理机制有的不一样。
3)app切换到后台,再回到前台时,注意程序是否崩溃,功能状态是否正常,尤其是对于从后台切换回前台数据有自动更新的时候。
4)手机锁屏解屏后进入app注意是否会崩溃,功能状态是否正常,尤其是对于从后台切换回前台数据有自动更新的时候。
5)当App使用过程中有电话进来中断后再切换到app,功能状态是否正常 6)当杀掉app进程后,再开启app,app能否正常启动。
7)出现必须处理的提示框后,切换到后台,再切换回来,检查提示框是否还存在,有时候会出现应用自动跳过提示框的缺陷。
8)对于有数据交换的页面,每个页面都必需要进行前后台切换、锁屏的测试,这种页面最容易出现崩溃。c.免登录
很多应用提供免登录功能,当应用开启时自动以上一次登录的用户身份来使用app.1)app有免登录功能时,需要考虑IOS版本差异。2)考虑无网络情况时能否正常进入免登录状态。3)切换用户登录后,要校验用户登录信息及数据内容是否相应更新,确保原用户退出。
4)根据MTOP的现有规则,一个帐户只允许登录一台机器。所以,需要检查一个帐户登录多台手机的情况。原手机里的用户需要被踢出,给出友好提示。5)app切换到后台,再切回前台的校验 6)切换到后台,再切换回前台的测试
7)密码更换后,检查有数据交换时是否进行了有效身份的校验
8)支持自动登录的应用在进行数据交换时,检查系统是否能自动登录成功并且数据操作无误。
9)检查用户主动退出登录后,下次启动app,应停留在登录界面 d.数据更新
根据应用的业务规则,以及数据更新量的情况,来确定最优的数据更新方案。1)需要确定哪些地方需要提供手动刷新,哪些地方需要自动刷新,哪些地方需要手动+自动刷新。
2)确定哪些地方从后台切换回前台时需要进行数据更新。
3)根据业务、速度及流量的合理分配,确定哪些内容需要实时更新,哪些需要定时更新。
4)确定数据展示部分的处理逻辑,是每次从服务端请求,还是有缓存到本地,这样才能有针对性的进行相应测试。
5)检查有数据交换的地方,均有相应的异常处理。e.离线浏览
很多应用会支持离线浏览,即在本地客户端会缓存一部分数据供用户查看。1)在无网络情况可以浏览本地数据 2)退出app再开启app时能正常浏览 3)切换到后台再切回前台可以正常浏览 4)锁屏后再解屏回到应用前台可以正常浏览 5)在对服务端的数据有更新时会给予离线的相应提示 f.App更新
1)当客户端有新版本时,有更新提示。
2)当版本为非强制升级版时,用户可以取消更新,老版本能正常使用。用户在下次启动app时,仍能出现更新提示。
3)当版本为强制升级版时,当给出强制更新后用户没有做更新时,退出客户端。下次启动app时,仍出现强制升级提示。
4)当客户端有新版本时,在本地不删除客户端的情况下,直接更新检查是否能正常更新。
5)当客户端有新版本时,在本地不删除客户端的情况下,检查更新后的客户端功能是否是新版本。
6)当客户端有新版本时,在本地不删除客户端的情况下,检查资源同名文件如图片是否能正常更新成最新版本。如果以上无法更新成功的,也都属于缺陷。g.定位、照相机服务
1)App有用到相机,定位服务时,需要注意系统版本差异
2)有用到定位服务、照相机服务的地方,需要进行前后台的切换测试,检查应用是否正常。3)当定位服务没有开启时,使用定位服务,会友好性弹出是否允许设置定位提示。当确定允许开启定位时,能自动跳转到定位设置中开启定位服务。4)测试定位、照相机服务时,需要采用真机进行测试。h.时间测试
客户端可以自行设置手机的时区、时间,因此需要校验该设置对app的影响。--中国为东8区,所以当手机设置的时间非东8区时,查看需要显示时间的地方,时间是否展示正确,应用功能是否正常。时间一般需要根据服务器时间再转换成客户端对应的时区来展示,这样的用户体验比较好。比如发表一篇微博在服务端记录的是10:00,此时,华盛顿时间为22:00,客户端去浏览时,如果设置的是华盛顿时间,则显示的发表时间即为22:00,当时间设回东8区时间时,再查看则显示为10:00。i.PUSH测试
1)检查push消息是否按照指定的业务规则发送 2)检查不接受推送消息时,检查用户不会再接收到push.3)如果用户设置了免打扰的时间段,检查在免打扰时间段内,用户接收不到PUSH。
在非免打扰时间段,用户能正常收到push。
4)当push消息是针对登录用户的时候,需要检查收到的push与用户身份是否相符,没有错误地将其它人的消息推送过来。一般情况下,只对手机上最后一个登录用户进行消息推送。
5)测试push时,需要采用真机进行测试。
5.性能测试 评估App的时间和空间特性 :
1)极限测试:在各种边界压力情况下,如电池、存储、网速等,验证App是否能正确响应。
--内存满时安装App--运行App时手机断电--运行App时断掉网络
2)响应能力测试:测试App中的各类操作是否满足用户响应时间要求。--App安装、卸载的响应时间--App各类功能性操作的影响时间
3)压力测试:反复/长期操作下、系统资源是否占用异常。--App反复进行安装卸载,查看系统资源是否正常--其他功能反复进行操作,查看系统资源是否正常
4)性能评估:评估典型用户应用场景下,系统资源的使用情况。
5)Benchmark测试(基线测试):与竞争产品的Benchmarking, 产品演变对比测试等。6.交叉事件测试
针对智能终端应用的服务等级划分方式及实时特性所提出的测试方法。交叉测试又叫事件或冲突测试,是指一个功能正在执行过程中,同时另外一个事件或操作对该过程进行干扰的测试。如;App在前/后台运行状态时与来电、文件下载、音乐收听等关键运用的交互情况测试等。交叉事件测试非常重要,能发现很多应用中潜在的性能问题。
1)多个App同时运行是否影响正常功能 2)App运行时前/后台切换是否影响正常功能 3)App运行时拨打/接听电话 4)App运行时发送/接收信息 5)App运行时发送/收取邮件
6)App运行时切换网络(2G、3G、wifi)7)App运行时浏览网络
8)App运行时使用蓝牙传送/接收数据
9)App运行时使用相机、计算器等手机自带设备 7.兼容测试
主要测试内部和外部兼容性 1)与本地及主流App是否兼容
2)基于开发环境和生产环境的不同,检验在各种网络连接下(WiFi、GSM、GPRS、EDGE、WCDMA、CDMA1x、CDMA2000、HSPDA等),App的数据和运用是否正确
3)与各种设备是否兼容,若有跨系统支持则需要检验是否在各系统下,各种行为是否一致
--不同操作系统的兼容性,是否适配--不同手机屏幕分辨率的兼容性--不同手机品牌的兼容性 8.回归测试
1)Bug修复后且在新版本发布后需要进行回归测试。
2)Bug修复后的回归测试在交付前、要进行全量用例的回归测试。9.升级、更新测试
新版版发布后,配合不同网络环境的自劢更新提示及下载、安装、更新、启劢、运行的验证测试。
1)测试升级后的功能是否与需求说明一样
2)测试与升级模块相关的模块的功能是否与需求一致 3)升级安装意外情况的测试(如死机、断电、重启)4)升级界面的UI测试 5)不同操作系统间的升级测试 10.用户体验测试
以主观的普通消费者的角度去感知产品或服务的舒适、有用、易用、友好亲切程度。通过不同个体、独立空间和非经验的统计复用方式去有效评价产品的体验特性提出修改意见提升产品的潜在客户满意度。
1)是否有空数据界面设计,引导用户去执行操作。2)是否滥用用户引导。
3)是否有不可点击的效果,如:你的按钮此时处于不可用状态,那么一定要灰掉,或者拿掉按钮,否则会给用户误导 4)菜单层次是否太深 5)交互流程分支是否太多 6)相关的选项是否离得很远 7)一次是否载入太多的数据 8)界面中按钮可点击范围是否适中
9)标签页是否跟内容没有从属关系,当切换标签的时候,内容跟着切换 10)操作应该有主次从属关系
11)是否定义Back的逻辑。涉及软硬件交互时,Back键应具体定义 12)是否有横屏模式的设计,应用一般需要支持横屏模式,即自适应设计 11.硬件环境测试
a.手势操作测试
1)手机开锁屏对运行中的App的影响 2)切换网络对运行中的App的影响 3)运行中的App前后台切换的影响 4)多个运行中的App的切换 5)App运行时关机 6)App运行时重启系统 7)App运行时充电
8)App运行时kill掉进程再打开 b.网络环境
手机的网络目前主要分为2G、3G、wifi。目前2G的网络相对于比较慢,测试时尤其要注意此块的测试。
1)无网络时,执行需要网络的操作,给予友好提示,确保程序不出现crash。2)内网测试时,要注意选择到外网操作时的异常情况处理。
3)在网络信号不好时,检查功能状态是否正常,确保不因提交数据失败而造成crash。
4)在网络信号不好时,检查数据是否会一直处于提交中的状态,有无超时限制。如遇数据交换失败时要给予提示。5)在网络信号不好时,执行操作后,在回调没有完成的情况下,退出本页面或者执行其他操作的情况,有无异常情况。此问题也会经常出现程序crash。c.服务器宕机或出现404、502等情况下的测试
后台服务牵涉到DNS、空间服务商的情况下会影响其稳定性,如:当出现域名解析故障时,你对后台API的请求很可能就会出现404错误,抛出异常。这时需要对异常进行正确的处理,否则可能会导致程序不能正常工作。
12.接口测试
服务端一般会提供JSON格式的数据给客户端,所以我们在服务端需要进行接口测试,确保服务端提供的接口并转换的JSON内容正确,对分支、异常流有相应的返回值。此块测试可以采用itest框架进行测试。最方便的是采用httpclient进行接口测试。进行服务端测试时,需要开发提供一份接口文档。13.客户端数据库测试
1)一般的增、删、改、查测试。
2)当表不存在时是否能自动创建,当数据库表被删除后能否再自建,数据是否还能自动从服务端中获取回来并保存。
3)在业务需要从服务端取回数据保存到客户端的时候,客户端能否将数据保存到本地。
4)当业务需要从客户端取数据时,检查客户端数据存在时,app数据是否能自动从客户端数据中取出,还是仍然会从服务器端获取?检查客户端数据不存在时,app数据能否自动从服务器端获取到并保存到客户端
5)当业务对数据进行了修改、删除后,客户端和服务端是否会有相应的更新。