HuggingFace Tokenizer 的进化:从分词器到智能对话引擎 如果你用过 Hugging Face 的 Transformers 库,一定对 tokenizer 不陌生。它负责把"人话"变成"机器话"——也就是将文本转换成模 2026-01-15 · aopstudio · NLP HuggingFace LLM tokenizer · 0 评论 · 0 浏览
如何优雅地下载 Hugging Face 模型 如何优雅地下载 Hugging Face 模型 Hugging Face 已经成为事实上的开源模型分发中心,无论是 NLP、CV 还是多模态模型,几乎都可以通过一 2026-01-14 · aopstudio · HuggingFace LLM NLP 人工智能 · 0 评论 · 0 浏览
Jinja 是什么?为什么大模型的聊天模板使用它? 在HuggingFace的模型页面,点击Chat template选项: ![截屏2026-01-12 16.57.17](https://img2024.cnb 2026-01-12 · aopstudio · Jinja LLM NLP Huggingface · 0 评论 · 0 浏览
生动说明Transformer,BERT,预训练模型的含义和关系 很多知识,尽管在学会了之后发现原来是多么的简单,但是当你刚接触的时候则是完全一头雾水。 上一篇文章中我举了Java环境变量的配置例子来说明这一点,那是好几年前我 2022-10-30 · aopstudio · NLP 深度学习 · 0 评论 · 0 浏览