小蝶对比：一次30份文件测试复盘
做小蝶对比，与其转述宣传页，不如复盘一次可重复的小样本测试：准备30份脱敏文件，分别记录导入、处理、导出和异常恢复。这个案例不预设哪一版更强，只展示怎样控制变量、设定淘汰线，并把主观的“顺手”变成可核对的数据。
问：这次小蝶对比怎么设定场景？
场景限定为连续处理30份文件，目的是验证高频任务，而不是试玩界面。样本分三组：20份常规文件、5份较大文件、5份带空格或特殊字符的文件；全部使用虚构内容，避免把隐私风险带进测试。
待比较入口必须来自可核验的官方渠道，并记录开发者、版本、设备系统和测试日期。网络环境、文件内容、操作顺序保持一致。若版本不同却混在一起比较，得到的差异可能来自更新，而不是入口本身。
问：测试过程记录哪些数据？
从登录开始计时，依次记录导入成功数、完成处理数、正确导出数和总耗时。遇到失败不立刻重来，先截取错误提示，再测试能否续传、恢复或重新提交。异常处理能力往往比顺利状态更能拉开差距。
每个入口完成三轮，避免一次网络波动左右结论。时间取中位数，不取最快成绩；成功率按正确导出的文件数除以30计算。若结果仍需人工修正，还要把修正时间计入总耗时。
问：怎样确定胜负而不凭感觉？
案例设三条硬线：核心任务成功率低于95%直接淘汰；结果不能导出为后续可用格式直接淘汰；出现无法解释的无关权限申请则暂停测试。过线后，再比较总耗时、点击次数、费用和学习成本。
评分表可以设为成功率40分、结果准确性25分、异常恢复15分、耗时10分、费用10分。界面审美不单独计分，因为它容易放大第一印象，却不一定提高交付效率。
问：这次复盘能得出什么结论？
在没有指定开发者和版本前，负责任的小蝶对比不能给出固定胜者；能确认的是比较方法。30份样本足以暴露格式兼容、批量稳定和异常恢复问题，但不能代替长期测试，也不能证明所有设备表现一致。
通过初测的入口，还应连续使用七天，观察更新、同步、客服响应和订阅变化。最终保留原始记录与导出文件。下次版本升级后重复同一流程，才能判断产品是真的改进，还是只换了界面和宣传说法。
常见问题
小蝶对比为什么要准备30份文件？
单个样本只能证明偶尔可用。30份并非行业标准，但能在控制成本的同时覆盖常规、大文件和特殊命名三类情况。
小蝶对比测试一次就够了吗？
不够。建议同一入口至少完成三轮，耗时取中位数；初测通过后再连续使用七天，观察稳定性和同步问题。
小蝶对比结果应该相信评分还是体验？
先看成功率、正确性、异常恢复和导出能力，再用操作体验辅助选择。主观顺手不能覆盖任务失败或数据无法迁移。