给 VLM 加一个标记 token,顺便补了下 tokenizer2026-07-15技术分享人工智能开发因为要给 VLM 新增一个标记 token,重新梳理 BPE、Unigram、词表大小、embedding tying、packing,以及新增 token 在 LoRA 训练里的处理。阅读全文