拾雨 (@c519127) 在 微软 CEO 纳德拉批评 AI 模型公司“双标”:一边主张“合理使用”数据,一边限制他人蒸馏 中发帖
IT之家 7 月 13 日消息,微软 CEO 萨提亚 · 纳德拉(Satya Nadella)日前在 X 平台发文,对包括 Anthropic 在内的 AI 大模型公司训练模型的做法进行了含蓄批评。
[0a1271c1-d078-45c8-a2c7-ce93a08a56ea]
纳德拉表示,一些模型厂商一边主张拥有利用公开数据训练 AI 模型的“合理使用(Fair Use)”权利,一边却反对其他公司通过模型蒸馏(Distillation)学习其模型能力,这种做法存在明显的自相矛盾。
所谓模型蒸馏,是指利用性能更强的大模型输出结果,训练参数更少、能力较弱的新模型。
纳德拉写道:“模型提供商拥有基于公开数据训练模型的合理使用权,这种创新当然十分重要。但我认为,享受这一权利后,却转而对模型蒸馏施加严格限制,并保留利用客户使用数据和交互数据继续学习的权利,这种做法颇具讽刺意味。”
[a...