Skip to content
TheChatArchiveThe Chat Archive
gpt-3.5-turbo-0613· OpenAIAi2 WildChat-4.8M (AI2)

tokenizer.special_tokens['<bos>'],<bos>是什么标识

  1. User

    tokenizer.special_tokens[''],是什么标识

  2. Assistant

    是tokenizer中用于表示开头的特殊标识符。

tokenizer.special_tokens['<bos>'],<bos>是什么标识 · The Chat Archive