自2018年Google公布BERT至今,预训练大模型通过三年的发展,以强劲的优化算法实际效果,风靡了NLP为象征的各种AI排行榜与数据测试集。2020年OpenAI公布的NLP大模型GPT-3,完成了千亿元级数据信息主要参数。GPT-3除开具有传统式的NLP能力以外,...