由 Nick Levine、David Duvenaud 和 Alec Radford 领导的研究团队发布了 Talkie 1930,这是一款拥有 130 亿参数的开源大语言模型。该模型完全基于 1931 年之前的英文文本进行训练。 Talkie 1930 专为历史推理和泛化研究而设计。由于训练数据的限制,该模型不具备关于互联网、智能手机或第二次世界大战等现代概念的知识,从而成为研究特定历史语境下大模型行为与泛化能力的重要实验工具。