HuggingFace提供了一套统一的编码API,由每个模型各自提交实现。由于统一了API,所以调用者能快速地使用不同模型的编码工具。
在学习HuggingFace的编码工具之前,先看一个示例的编码过程,以理解编码工具的工作过程。