1、百度ERNIE:百度开发的ERNIE(Enhanced Representation through kNowledge Integration)模型,是一种面向中文的预训练语言模型,广泛应用于自然语言处理任务。
2、阿里巴巴的BERTwwm:阿里巴巴基于BERT(Bidirectional Encoder Representations from Transformers)模型开发的中文版本,进一步优化了中文语言理解能力。
3、腾讯的T5CLUE:腾讯基于T5(TexttoText Transfer Transformer)模型开发的中文版本,在多个中文NLP任务中取得了优异的成绩。
4、华为的鹏程·昇腾:华为开发的鹏程·昇腾大模型,是一种面向多模态任务的大型预训练模型。