[Bugfix] 修复多模态tokenizer特殊token拆分逻辑，避免恶意token导致服务异常-MindIE-LLM-AtomGit

Star137

Star137

已合并

[Bugfix] 修复多模态tokenizer特殊token拆分逻辑，避免恶意token导致服务异常 #928

muziyuhui666创建于 4月21日从muziyuhui666/MindIE-LLM： fix/completions-dos-malicious-token 合入到 Ascend/MindIE-LLM： dev

[Bugfix] 修复多模态tokenizer特殊token拆分逻辑，避免恶意token导致服务异常 #928

已合并

muziyuhui666创建于 4月21日

从muziyuhui666/MindIE-LLM fix/completions-dos-malicious-token合入到Ascend/MindIE-LLM dev