//
//
//
//
//
//
//
//
//
//
软件Tags:
PaddleNLP 2.0是飞桨生态的文本范畴中心库,具有易用的文本范畴API,多场景的使用示例、和高性能分布式练习三大特色,旨在提高开发者文本范畴的开发功率,并供给基于飞桨2.0中心结构的NLP使命最佳实践。
功用特色:
易用的文本范畴API
供给从数据加载、文本预处理、模型组网评价、到推理加快的范畴API:支撑丰厚中文数据集加载的Dataset API;灵敏高效地完结数据预处理的Data API;供给60+预练习模型的Transformer API等,可大幅提高NLP使命建模与迭代的功率。
多场景的使用示例
掩盖从学术到工业级的NLP使用示例,包括从NLP根底技能、NLP中心技能、NLP系统使用以及相关拓宽使用。全面基于飞桨中心结构2.0全新API系统开发,为开发供给飞桨2.0结构在文本范畴的最佳实践。
高性能分布式练习
基于飞桨中心结构抢先的主动混合精度优化战略,结合分布式Fleet API,支撑4D混合并行战略,可高效地完结超大规模参数的模型练习。