A Comprehensive Survey on Pretrained Foundation Models: A History from BERT to ChatGPT

  • 类型:arxiv
  • 标识:2302.09419
  • 链接:https://arxiv.org/abs/2302.09419
  • 主题:database
  • 主分类:engineering
  • 形态:survey
  • 被引:750
  • 被引来源:Semantic Scholar
  • S2被引:750
  • OpenAlex被引:154
  • 影响力被引:19
  • TLDR:This survey aims to shed light on the research of the PFMs on scalability, security, logical reasoning ability, cross-domain learning ability, and the user-friendly interactive ability for artificial general intelligence.
  • OpenAlex ID:W4321472314
  • OpenAlex DOI:10.48550/arxiv.2302.09419
  • DOI:10.48550/arxiv.2302.09419
  • DOI来源:OpenAlex
  • 开放获取:green
  • 开放获取链接:https://arxiv.org/pdf/2302.09419
  • OpenAlex更新:2026-08-03
  • 待LLM分类:否
  • 标题中文:预训练基础模型全面综述:从 BERT 到 ChatGPT 的发展历程
  • TLDR中文:本综述旨在阐明 PFMs 在可扩展性、安全性、逻辑推理能力、跨领域学习能力以及面向 AGI 的友好交互能力方面的研究。
  • 来源文件
  • [OpenAlex discover]
  • [S2 enrich]