2026年7月14日,下午3点17分,上海静安区某SaaS公司会议室。林芳盯着白板上写满的"分组方案V3",手里的马克笔已经捏了十分钟。
"林姐,研发那边又提意见了,说上次分组用的Excel RAND函数,他们没法复现,质疑结果。"实习生小周小声提醒。
林芳叹了口气。她手头这个A/B测试要分4组,每组200个用户ID,按过往习惯,她得在Excel里写公式、拖拽、排序、再手动核对边界。这已经是本月第三次因为分组问题被研发挑战了——每次都要花半天解释"随机性",而她的解释往往在"你怎么证明不是手抖分错了"面前苍白无力。
今天下午她必须给出一个能让研发闭嘴的分组方案,否则原定周四上线的实验又要延期。
之前是怎么扛的——每月6小时+3场"信任危机"
作为产品经理,林芳从2024年接手这个B端SaaS产品后,A/B测试就成了她的家常便饭。平均每月要做5-6个实验,每个实验涉及用户ID分组。
她的旧流程是:在Excel里用=RAND()生成随机数,然后排序、按顺序切分4段,再复制粘贴到测试平台。听起来简单,但问题一堆:
- 每次分组要1-1.5小时,包括反复核对边界值,生怕用户ID被漏掉或重复。
- 研发不认账。Excel的RAND每次打开都会重新计算,截图存档也没用,研发说"你没法证明你当时用的就是这份数据"。平均每个实验要花30-40分钟跟研发解释、甚至重做分组。
- 她自己的心理负担。有次实验上线后,运营发现转化率异常,第一反应是"分组是不是有偏"。虽然最后排查是版本bug,但那周林芳每天睡不到6小时,反复翻Excel记录。
算下来,每月光分组+解释就耗掉6小时,加上因质疑导致的返工,至少8-10小时。更别说那些没法量化的信任损耗——她明显感觉研发和运营对她提的实验结论,总带着一丝"等等再看"的保留。
换了之后真实变了什么——40分钟搞定,还带"可复现"证据
转机出现在7月14日。林芳在浏览器里搜"随机数生成器"时,翻到了全宝的随机数生成工具(https://suijishu.quan77.cn/)。她本来只是想随便试试,结果发现这工具支持范围、不重复、浮点、批量四种模式,最关键的是——可以设置随机种子,生成后给个固定链接,任何人都能复现同一组随机数。
她当场做了测试:把200个用户ID复制进去,选择"不重复"模式,区间设为1-200,生成4组各50个不重复的序号。全程用了不到3分钟,比Excel快了20倍。
更让林芳惊喜的是,工具生成后自动生成一个带种子的链接,她把链接发到研发群里,对方点了两下就验证了"这组随机数确实是种子12345生成的",当场回了个"OK,可以上线"。
具体变化:
- 分组时间:从每月6小时(5个实验×1.2小时)降至40分钟(5个实验×8分钟),每月省下5小时20分钟。
- 解释时间:从每月3次×30分钟=1.5小时,降至0。研发自己点链接验证,不再需要她解释。
- 返工次数:从每月1-2次降至0。上个月做的那个实验,运营看数据不对,林芳直接把种子链接发过去,对方自己复现了分组,发现是文案问题,再也没怀疑过分组。
使用中的小问题与解决:
- 第一次用的时候,没注意到"不重复"选项,导致生成的序号有重复,分组时漏了3个用户。她摸索了2分钟才找到选项——后来她固定用"不重复+批量"组合,再没出过岔子。
- 生成的链接有时效性,过了7天再点会失效。有次她想给两个月前的一个实验做复盘,发现链接打不开。现在的解决方法是:生成后立刻截屏+保存种子号,或者直接复制生成的数字列表到项目文档里,反正也就几十行。
现在林芳把工具加到了浏览器书签,每次做实验前,先花2分钟生成分组,再把种子链接发到项目群,然后安心去写实验假设。研发那边再也没因为分组问题找过她。
给同样处境的人提个醒——分组严谨性,其实可以"一句话证明"
如果你也是产品、运营或数据分析师,需要经常做用户分组、抽样或随机分配,有几点经验值得参考:
- 别用Excel的RAND做正式分组。它没法复现,一旦被质疑,你百口莫辩。你需要的不是"随机性",而是"可验证的随机性"——随机种子+固定链接是最好的方式。
- 先确认工具支持"不重复"模式。分组场景下,重复的ID会导致严重偏差。我用那个工具第一次就栽在这儿,后来养成习惯:生成后先扫一眼是否有重复值(工具本身也有去重提示)。
- 保存种子号比保存链接更可靠。链接可能过期,但种子号永远有效。你可以在项目文档里写"分组种子:20260714-12345",任何人拿着种子都能复现。
- 批量模式能救命。如果你要分4组,直接生成4组不重复的区间数字,而不是手动切开。省的时间够你多写两行实验假设了。
最后,别把"随机"当成黑箱。当你把分组过程变成任何人可验证的透明操作,你收获的不仅是时间,还有团队对你的信任——这比省下的那20小时值钱得多。
林芳现在每周三下午的例会,不再需要为分组流程辩护。她只是把种子链接贴在需求文档里,然后安静地等研发回复"OK"。那种感觉,比任何KPI都让人踏实。