效果评测

1. 结果整理(填充17UP评测结果的表格)

a) 18年三月之后的结果为有效数据

b) 评测结果异常(结果为空)的数据可以查看结果日志,如果数据条数较少一般是正常现象,可整体评测完成后删除该条结果,并做记录。如果评测数据量大,集中出现没有结果的情况,可报给申昊检查问题,并记录进入当天的评测进度及问题汇总邮件中

c) 部分分散开的评测结果可使用评测后台:系统配置中的合并评测结果选项进行合并

d) 对于合并的结果进行查看去重,可将整个页面复制到notepad++中 筛选出评测集,在Excel中去重处理,目前需要在后台手动删除重复的评测数据,如重复评测集结果不同,在没有修改过数据统计方式的情况下以时间靠前的一个为准,(去重及筛选未完成的评测集的页面需求已提交申昊,实现后会更方便一些)

e) 可从附件中的js文件中筛选当前语言全量评测集,进行查漏补缺,有遗漏的进行补充评测,结果与之前的进行合并计算,除无结果的评测集外评测完成后补充进入17UP的评测结果表格中

2. 评测

a) 评测竞品:

Swiftkey、Gboard、Facemoji、TouchPal、Cheetah(Typany 、KiKa、BaiduIME、)

b) 评测语言:

表格中未进行填充的语种(后期如有增加需进行添加)

c) 键盘配置

对于没有进行键盘配置的竞品对应的语种,需要进行键盘配置,配置任务以评测正常运行为目的及结束点

d) 评测运行

长时间未评测的输入法,建议评测前进行键位检查的评测检查

e) 评测类型

评测优先进行UP评测集的评测,对于没有UP评测集的语言进行高频句子评测集评测,都没有的可与我联系

  1. 评测计划、进度及问题公示

a) 根据当前的任务指定评测计划

评测是长期任务,穿插在日常工作中即可,根据当前评测任务指定合理的评测计划,有项目任务时,建议每天评测时间不超过1小时,无项目任务时可适当增加安排评测。

b) 每天公示当前的评测进度,包括评测竞品、对应的评测语言、当前语言的评测类型、整体进度(如12/50)、问题

每日进度可填写当天完成的任务及进度,附件添加整体进度表格

问题描述,描写当天评测过程中的所有问题:工具、评测集、其他等,并标注当前处理进度

4. 问题处理:

工具相关的问题可联系评测工具测试开发处理(当前为申昊2018/7/16)

有其他问题可评测项目负责人联系处理(当前为张志洋 2018/7/16)

5. 附件:

1701UP文件存放当前评测的结果

Data.js 可获取当前所有语言评测集文件集合

Csv 文件可用来查看各个语言所对应的语言简码 如英文:en

6. 名词解释:

UP :Uesrprofile 评测集类型简称,为用户真是输入数据

高频句子:采用人际交往中使用最高频的句子,翻译成各种语言后制成的评测集,理想化评测集,参考意义较UP 低,无法评测出纠错相关结果

纠错评测集:专门用于对纠错相关指标进行评测的数据集

7. 邮件公示规范:

a) 评测进度

标题:【进度公示】Typany Android 效果评测

收件人:评测项目负责人(当前为zhangzhiyang

抄送:gimeqa邮件组

内容:当日评测进度,如没有进度,给出没有进度的原因及当前进度,附件添加整体进度

负责评测任务的同学每周五下班前给出下周的评测计划,每日对进度进行汇总总结发送邮件公示

b) 评测计划:

标题:【评测计划】 效果评测

收件人:评测项目负责人(当前为zhangzhiyang

抄送:gimeqa邮件组

内容:下周评测计划

资源链接http://10.134.109.216/resource/pingce.zip

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,561评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,218评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,162评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,470评论 1 283
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,550评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,806评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,951评论 3 407
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,712评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,166评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,510评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,643评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,306评论 4 330
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,930评论 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,745评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,983评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,351评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,509评论 2 348

推荐阅读更多精彩内容

  • 1、通过CocoaPods安装项目名称项目信息 AFNetworking网络请求组件 FMDB本地数据库组件 SD...
    阳明先生_X自主阅读 15,969评论 3 119
  • 做一个善忘的人,潇洒走一生 深圳市2017-4-23- 20:00 越来越现实的社会, 越来越复杂的人心, 在这短...
    平安是福hwj阅读 385评论 0 1
  • 不知从什么时候开始 我们已经无法像孩子一样,肆意大笑 我们急于抵达终点,却忽略了沿途的美丽风景 连出发的起点和初衷...
    拧发条的鸟阅读 256评论 0 0
  • 喜欢和习惯用九宫格打出来都是一样的按键 所以慢慢习惯之后就会开始喜欢了吗?
    花苡漠阅读 315评论 0 0
  • 论文不知道该怎么写的时候,戴上耳机也能听到室友和她的小哥哥温柔地煲电话粥的声音,她说昨晚如果不是顾及我睡觉,他们会...
    七筒妹妹阅读 1,185评论 0 1