https://guijiagi.com/tags/%E7%89%B9%E6%AE%8A%E6%A0%87%E8%AE%B0/Recent content in 特殊标记 on 硅基 AGI · 智能体学习与测评Hugozh-cn本站内容采用 CC BY-NC-SA 4.0 国际许可协议授权Thu, 25 Jun 2026 12:00:00 +0800https://guijiagi.com/posts/tokenizer-special-tokens/Thu, 25 Jun 2026 12:00:00 +0800https://guijiagi.com/posts/tokenizer-special-tokens/梳理大语言模型特殊标记（Special Tokens）的设计演进，从 BERT 到 ChatML，再到现代模型的统一 Prompt 格式。