OpenAI 新语言生成器 GPT-3 非常好但却是完全没有头脑的
OpenAI 在 5 月发表的研究论文中首次描述了 GPT-3。但是上周,它开始向选择访问私人 Beta 的特定用户滴灌该软件。目前,OpenAI 希望外部开发人员帮助其探索 GPT-3 的功能,它计划在今年晚些时候将其转变为商业产品,通过云为企业提供 AI 的付费订阅。GPT-3 是有史以来功能最强大的语言模型。它的前身是去年发布的 GPT-2,当出现开场白提示时,它已经能够吐出令人信服的各种格式的文本流。但是 GPT-3 是一个巨大的飞跃。该模型具有 1750 亿个参数(神经网络在训练过程中尝试优化的值),而 GPT-2 的参数已经是 15 亿。对于语言模型,大小确实很重要。开发者发现 GPT-3 可以生成任何类型的文本,包括吉他标签或计算机代码。GPT-3 的人性化输出和惊人的多功能性是出色工程学的结果,而不是真正的聪明才智。这样的工具有许多新用途,既有好处(从为更好的聊天机器人提供动力到帮助人们编写代码),也有从坏处(从为更好的错误信息机器人提供动力到帮助孩子作弊)。GPT-3 是一个巨大的飞跃,但它仍然是人类制造的工具,具有所有隐含的缺陷和局限性。(MIT Technology Review)