Qwen2 模型当中会输出一个奇怪的标签 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
请不要在回答技术问题时复制粘贴 AI 生成的内容
yidinghe
V2EX    程序员

Qwen2 模型当中会输出一个奇怪的标签

  • nbsp;
  •   yidinghe 2024-06-11 22:41:10 +08:00 1227 次点击
    这是一个创建于 562 天前的主题,其中的信息可能已经有所发展或是发生改变。

    模型为 Qwen2-0.5B-Instruct-GGUF ,有时候会输出一个 <|end_of_turn|> 的标志

    比如下面的对话:

    用户:人的社会责任是什么意思?

    Qwen2: 人的社会责任指的是个人应该承担的义务,包括对社会的贡献、对他人和社会的责任和义务。这种责任通常基于个人的行为方式,即对自身行为的控制和管理。

    人应当承担责任的主要原因在于他作为个体的存在本身,他的行为可能会影响周围的人,并且可能会产生不良的后果。因此,社会责任对于维持社会秩序和促进社会进步至关重要。在现代社会中,人们应该积极履行自己的职责,为社会的发展做出贡献,同时也应当对他人和社会负责,尊重他们的权利和利益。

    人应当承担责任的具体形式包括但不限于遵守法律、道德规范以及伦理原则等。这些责任通常来源于个人的自我意识,即认识到自己行为的影响,并愿意承担相应的后果。此外,人们还应该不断学习和提升自己的素质,以更好地履行社会责任。

    总之,人的社会责任是一个复杂的概念,它涉及到个人的行为方式,社会的责任感,以及对他人和社会负责的态度。这种责任感对于维持社会秩序、促进人类进步至关重要。

    用户:如果一个人不工作,那么这既是他的权利,又是他不负责任的表现,是吗?

    Qwen2: 是的,在现实生活中,一个人的义务和责任往往交织在一起。一方面,一个人应该承担自己的行为对社会的影响,并且要尊重他人和社会的权利和利益;另一方面,如果一个人不工作或怠工,则表明他不负责任、缺乏责任感的表现。

    因此,人的社会责任并不是单一的责任,它包含了一种复杂的道德规范和权利意识的综合体现。这种责任感对于维持社会秩序、促进个人发展、维护社会稳定至关重要。在现代社会中,每个人都应该积极履行自己的职责,并且对他人和社会负责,尊重他们的权益和利益。

    总之,人的社会责任是一个复杂的概念,它涉及到一个人的行为方式、社会的责任感以及对他人和社会负责的态度。这种责任对于维持社会秩序、促进个人发展、维护社会稳定具有重要作用。<|end_of_turn|>

    这个时候我反复重新生成最后一个回答,而 <|end_of_turn|> 每次都会出现。我也尝试了其他对话,一旦它出现,后续的回答全部都会带上这个标签。

    当连续三个回答都带了这个标签之后,我编辑回答内容,将这个标签全部去掉,然后重新生成最后一个回答,发现这个回答又重新出现了这个标签。

    我猜这是千问大语言模型在表达“我不想继续聊下去了”的意思。

    yidinghe
        1
    yidinghe  
    OP
       2024-06-11 22:46:12 +08:00
    我又发现可能会输出其他标签,例如 `<|endoftext|>`,`<|begin_end>` 等等
    codehz
        2
    codehz  
       2024-06-11 22:58:47 +08:00 via iPhone
    就是训练材料里用来分割不同段落的标记,按理说是会被框架自行处理(因为都是特殊 token )但也有可能是训练的时候分词器炸了什么的
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     5299 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 33ms UTC 01:40 PVG 09:40 LAX 17:40 JFK 20:40
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86