|
“做对流程,过程可以复现就可以”那是实习生干的事好不好?~~~~~~~~~~~~~
不,整个科学实验的基础就是这个。可重复性。我猜Amir的目标就是作为第三方独立测试,找出揭示设备最直接素质的最小测试集合。至于他是自己做,还是随便找个人做,以及是不是实习生做,无关紧要。只要过程可以保证结果一致即可。
最没前途的测试就是开发者怎么测你就怎么测,让你测什么你就测什么,结果永远不会发现开发者的问题。
~~~~~~~~~~~~~
如果Amir的测试揭示力不够,有重要的方面没有测试,那是他的测试项目还可以继续提高。但他显然不是厂商让他测啥就测啥,反而是厂商根据他的测试项目尽量做高数据,虽然超过人的听力阈值就没有意义了。如果你对他的测试项目有异议,大可以在论坛上提出来。
一个真正有经验有水平的测试者,会变着法地去发现待测产品的问题,揭示产品的短板,帮助开发者发现自己的疏忽和遗漏。你还会觉得对测试者的要求比开发者低了十万八千里?
~~~~~~~~~~~~~
这不是第三方独立测试的任务,或者说不是Amir的目的。Amir的各种测试中揭示了很多产品的严重问题,在我看来是很有效的。
一套一成不变的测试程序,本来一个脚本就可以解决的问题,还不如直接找厂商要人家产线上的测试结果就完了。这样的评测越来越像个索然无味的流水账。
Shiiit就干脆把脚本生成的AP测试报告直接放官网上自由下载,比ASR的测试项目还多还全面!
~~~~~~~~~~~~~
不一样,需要独立第三方测试,就是验证厂商有没有虚标参数,或者是否有品控问题。
对于ASR测试的有效性,我个人认为简单有效。测试结果一致的,不可能出现听起来有巨大差异的情况。LZ说他的测试结果一致,听起来差异巨大,如果不做恶意猜测,唯一解释是只测试了测试中非常小的一部分。
|
|