Shopify 禁止其工程师使用小型、便宜的模型,强制只使用现存最大、最昂贵的模型。
本页为原文的机器翻译，未经人工译者审核。历史信息可能已发生变化。
Shopify 禁止其工程师使用小型、便宜的模型,强制只使用现存最大、最昂贵的模型。
该公司的工程负责人说,即使在遥远的未来,当 Opus 45、GPT55 或 Gemini 35 这样的模型问世(以说明即便模型远远超越今天的水平),政策也将保持不变。始终使用最强的模型,不做妥协。
原因并不是通常意义上的预算问题。Shopify 认为人类工程师的时间是比计算时间昂贵得多的资源...
他的逻辑很简单:为了节省计算成本而使用弱模型的工程师,会得到更可能含有细微、不明显错误的代码。随后同一位工程师要花数小时去定位并修复这个错误。模型成本上的小小节省,在损失的人力时间成本面前被完全抹平。
说实话,我也不止一次亲身经历过,即使是小错误,修复所花的资源也远多于一开始用高质量模型好好规划,那样的模型既能更好地理解需求,也能把它修好。
所以 Shopify 选择为模型多付钱,以便第一轮就得到高质量的代码,并把工程师的时间留给真正需要他们思考的事情,而不是去追捕一个更强的模型根本不会产生的错误。
他们做的另一件有趣的事,是衡量任务的价值,而不是那些其实什么也说明不了的"琐碎"指标(比如多少行代码或多少个 PR)。例如,他举了一个例子:删除 4 行代码为公司节省了 10 万美元。你怎么在各种 DORA 工具里衡量这个?
他的愿望是让公司里每个开发者的能力成倍增长,让人们以为他拥有一支 10 万名开发者的大军,而团队还是今天这个开发团队。
你们怎么看?你们支持便宜的模型还是昂贵的模型?