Mixtral 发布了他们新版本的分词器

Mixtral 发布了他们新版本的分词器。

这些分词器不仅支持文本与 Tokens 之间的互转，还增添了对工具的解析和结构化对话处理的能力。

还发布了应用程序接口中使用的验证和规范化代码。