手机键盘输入法评测方案.doc

手机键盘输入法评测方案

15
2020年4月19日
文档仅供参考，不当之处，请联系改正。
附件：

手机键盘输入法评测方案

全国信息技术标准化技术委员会
中国电子技术标准化研究所
信息处理产品标准符合性检测中心
二〇〇九年五月二十五日

目录
一、 目的 3
二、 范围 3
三、 评测指标 3
四、 实施方法 10
(一) 参评要求 10
(二) 评测过程 11
(三) 参评申请表 12
(四) 承诺书 12

一、 目的
为进行手机键盘输入法产品的评测，受工业和信息化部科技司委托，中国电子技术标准化研究所、全国信息技术标准化技术委员会和信息处理产品标准符合性检测中心特联合编制《手机键盘输入法评测方案》，用于指导手机键盘输入法产品的评测活动。
二、 范围
本次评测活动的对象，是手机键盘输入法。
三、 评测指标
本次评测分为三个部分：标准符合性评测、产品质量评测和实际影响力评测。
1. 标准符合性评测
本项评测的依据为GB/T18031- 《信息技术 数字键盘汉字输入通用要求》。凡参评产品必须符合该标准中的所有规定，否则取消其继续评测的资格。
参评产品在符合GB/T18031- 各项要求的基础上，选取汉字输入平均码长和重码字词键选率两项指标作为度量元，度量模型及公式如下：

Q标=0.7×Q平均码长+0.3×Q重码字词键选率
Q平均码长=1-A/A标
A=参评产品的平均码长
A标=标准中规定的平均码长上限值
Q重码字词键选率=1-A/A标
A=参评产品的重码字词键选率
A标=标准中规定的重码字词键选率上限值
2. 产品质量评测
本项评测的度量模型参考GB/T16260.2 《软件工程 产品质量 第2部分：外部度量》，并根据评测对象进行了适当裁剪。度量模型如下：
Q质=0.6×Q功能性+0.3×Q易用性+0.1×Q其它
Q功能性=0.8×Q功能充分性+0.2×Q计算准确性
Q易用性=0.3×Q易理解性+0.3×Q易学性+0.3×Q易操作性+0.1×Q吸引性
Q其它=0.2×Q软件规模+0.8×Q易改变性
上述公式中各分量的度量方法如下：
2.1. 功能性
2.1.1. 功能充分性
按照下面列出的功能列表对参评产品进行黑盒测试，记录不能正确实现或缺少的功能数，将其与列表中列出的功能总数相比较。
Q功能充分性=1-A/B
A=在评价中检测出的不能正确实现或缺少的功能数
B=评价要求中描述的功能数
功能列表
智能输入
1
词语联想
2
标点符号联想
3
英文单词联想
4
整句输入
5
词语记忆或自造词
6
词频调整
混合输入
7
汉、英、数、符混合输入
多语种

少数民族文
8
蒙文
9
藏文
10
维文
常见外国语
11
英语
12
法语
13
德语
14
俄语
15
西班牙语
16
阿拉伯语

其它语种
17
每多一种，Q值加0.01
字符集支持
18
GB13000.1-1993
19
GB18030- （强制性部分）
自定义功能
20
默认值修改（输入法设置）
21
词库维护
22
界面定制
23
字符集范围设置
信息无障碍功能
24
左手操作者习惯
25
模糊音（或万能键）
26
读音（或笔顺等）互查
27
汉字简繁转换
2.1.2. 计算准确性
测试样本的实际输入过程中，得到的结果与预期的结果之间有不可接受的差别的字数，与测试样本总字数的比。
Q计算准确性=1-A/B
A=记录下的字数
B=样本包含总字数
2.2. 易用性
2.2.1. 易理解性
在规定时间内，评价者阅读参评产品的用户文档后能理解的功能数所占全部功能的比例。
Q易理解性=1-A/B
A=不理解的功能数
B=功能总数
2.2.2. 易学性
Q易学性=0.7×Q功能学习的难易性+0.3×Q帮助的频率
i. 功能学习的难易性
记录评价者从初始状态（对参评输入法完全陌生）到完成规定测试样本的输入所需的时间。
Q功能学习的难易性=1-T/Tmax
T=初始状态到完成输入的时间
Tmax=所有参评产品中T的最大值
ii. 帮助的频率
记录评价者从初始状态（对参评输入法完全陌生）到完成规定测试样本的输入过程中，必须查阅用户文档的次数。
Q帮助的频率=1-A/Amax
A=查阅用户文档以协助完成其任务的事例数
Amax=所有参评产品中A的最大值
2.2.3. 易操作性
Q易操作性=0.6×Q一致性+0.4×Q默认值的可用性
i. 一致性
评价者在评价过程中发现界面风格及操作方式不一致的事例数。
Q一致性=1- A/Amax
A=评价者发现与她们的期望不一致的事例的数目
Amax=所有参评产品中A的最大值
ii. 默认值的可用性
记录参评输入法提供的默认值总数。与评价过程中，评价者希望更改默认值的次数进行比较。
Q默认值的可用性=1-A/B
A=评价者希望更改的默认值
B=默认值总数
2.2.4. 吸引性
评价者对参评产品用户界面的第一印象，及界面风格与操作风格的主观评价。
Q吸引性=A/10
A=评价者打分，按 10分整数制，越接近10越好。
2.3. 其它特性
2.3.1. 软件规模
记录参评输入法占用内存状况。
Q软件规模=1-A/ Amax
A=内存占用量
Amax=所有参评产品的A的最大值
2.3.2. 易改变性
Q易改变性=0.7×Q参数的可修改性+0.3×Q版本控制
i. 参数的可修改性
记录参评产品所提供的维护用数据接口及相关参数的有效性。
Q参数的可修改性=1-A/B
A=维护者无法修改的接口及参数数
B=参评产品提供的接口及参数总数
ii. 版本控制
评价者应能方便的标识出参评产品的修订版本。
Q版本控制=1或0
可标识出版本的，X=1；无法标识版本的，X=0。
3. 实际影响力评测
本项评测的度量元为参评产品装机型号数量及参评产品相关技术支撑国家项目状况。度量公式如下：
Q影响力=0.3×Q装机+0.3×Q项目+0.2×Q专利+0.2×Q签约
Q装机=A/Amax
A=参评产品的装机型号数量
Amax=所有参评产品中A的最大值
Q项目=0.7×Q部委级+0.3×Q地方级
Q部委级= A/Amax
A=参评产品支撑部委级项目数
Amax=所有参评产品中A的最大值
Q地方级= A/Amax
A=参评产品支撑地方级项目数
Amax=所有参评产品中A的最大值
Q专利= A/Amax
A=参评产品核心技术获得专利数
Amax=所有参评产品中A的最大值
Q签约= A/Amax
A=参评产品已签约客户数
Amax=所有参评产品中A的最大值
4. 评测结果
参评产品最终得分按如下公式计算：
Q=0.4×Q标+0.5×Q质+0.1×Q影响力
四、 实施方法
(一) 参评要求
1. 本次评价活动的对象是手机键盘输入法产品。参评厂家必须拥有参评输入法产品的清晰知识产权状况及相关证明材料，并如实填写参评申请表。参评申请表须加盖申请企业公章或有效签字。同时签署承诺书，承诺所提交一切材料的真实性。
2. 参评单位必须在中华人民共和国境内合法注册并存续的相关法人。
3. 参评企业须提供3套完全相同的已安装参评输入法的样机，且样机必须是已获得入网许可的机型。
4. 为考查参评产品在多语种及大字符集方面的性能，参评企业须提供可运行于PC平台上的模拟器。
5. 如参评输入法可支持多种软硬件平台不同的机型，则须提供所有这些机型的列表，及每款机型的入网许可证复印件，以备抽查。
6. 参评企业须提供参评输入法的完整码表一份。格式为TXT，每行一个字及其对应的编码，字与编码之间用空格分隔，字在前，编码在后，输入法能输入的所有汉字都应包含在该文件中。除上述内容外，该文件中不得包含任何其它内容。
7. 参评企业应提供参评输入法的用户文档。用户文档应是随参评手机的正式印刷品，或手机中的联机文件。
(二) 评测过程
本次评测过程中，易用性度量由一般评价者进行，称为“用户性评测”。一般评价者为背景接近的大学在校学生。其它部分的评测由第三方专业检测机构及专家组进行评价，称为“专业性评价”。
评测分为两个独立单元，即智能手机和普通手机。
评价过程的流程如下：
1. 参评企业提交申请资料。
2. 评价活动组织方审核申请资料。
3. 参评产品接收及入库。
4. 由第三方检测机构对参评产品进行评测，易用性及功能性中的多语种支持除外。
5. 由多语种评价专家组对所有参评产品的多语种支持情况进行评价，并记录在多语种评价记录中。多语种评价专家组由少数民族语言文字专家及外国语言文字专家组成。
6. 一般评价者从库中随机抽取参评产品。每个产品由3名评价者分别独立评价。评价者为背景接近的大学在校学生。
7. 由一般评价者对产品的易用性进行评价。
8. 所有参评产品的评价记录均提交给最终专家评审组后，由专家组剔除无效记录，并根据评价要求和评价记录对参评产品进行打分。
9. 所有参评产品打分完毕后，公布评价结果。
参评申请

资格审查

材料入库

专业性评价

用户性评价

专家组评分

公布结果

(三) 参评申请表
见附件一。
(四) 承诺书
见附件二。
附件一、手机输入法参评申请表

手机输入法参评申请表
企业基本信息
企业名称

企业地址

联系人

电话

传真

Email

参评产品信息
须提供的内容：
1、 产品名称
2、 机型
3、 支持字符集
4、 支持语种（包括少数民族文和外文）
5、 面向用户的默认值列表
6、 面向维护者的接口及参数列表
7、 参评产品所能支持的全部操作系统列表
8、 参评产品已安装且已上市销售的全部机型列表及入网证明
9、 参评产品全部知识产权证明材料
10、 参评产品的完整码表
11、 参评产品的总模块（或功能）列表
12、 可经过局部修改而不影响全局的模块（或功能）列表
13、 参评产品或其核心技术支撑部委级科研项目列表及证明材料
14、 参评产品或其核心技术支撑地方级科研项目列表及证明材料
15、 就参评输入法与手机厂商签约总数及证明材料
16、 就参评输入法的本年度实际装机数量及证明材料

附件二、参评承诺书

承 诺 书

本单位承诺，为参与本次手机输入法评价活动而向评测机构提供的一切资料均属实。如有弄虚作假，经查实后由本单位承担一切法律责任。
特此声明。

承诺方：

签 章：

日 期：