rust bert:Rust本机即用型NLP管道和基于变压器的模型(BERTDistilBERTGPT2等) 源码

鲁伯特 Rust基于Transformer的本机模型实现。 Huggingface的端口,使用板条箱和预处理。 支持多线程标记和GPU推断。 该存储库提供了模型基础架构,特定于任务的负责人(请参见下文)和即用型管道。 当前实现了以下模型: 序列分类 代币分类 问题回答 文字产生 总结 翻译 蒙面LM DistilBERT :check_mark_button: :check_mark_button: :check_mark_button: :check_mark_button: MobileBERT :check_mark_button: :check_mark_button: :check_mark_button: :check_mark_button: 伯特 :check_mark_button: :check_mark_button: :check_mark_button: :check_mark_button: 罗伯塔 :check_mark_button: :check_mark_button: :check_m