文本汇总旨在从文本中生成准确而简洁的摘要。谷歌大脑和伦敦帝国理工学院的团队最近构建了一个系统，对提取的句子进行抽象摘要的序列到序列（又称为 Pegasus）的预训练后，将谷歌的 Transformers 架构和为抽象文本生成量身定制的预培训目标结合。研究团队表示，它在涵盖新闻、科学、故事、说明、电子邮件、专利和立法法案等 12 项任务中均表现不俗，尤其在在低资源摘要的目标中表现出「令人惊讶」的表现—超过了之前的最高水平。(VentureBeat)