Skip to content

<|item_begin|><|item_end|>这两个token可以去掉吗? #40

@Tinystormjojo

Description

@Tinystormjojo

关于OpenOneRec论文中使用的SID:

<|item_begin|><item_a_5028><item_b_6733><item_c_2559><|item_end|>

每个item的前后<|item_begin|><|item_end|>这两个token有什么作用呢?去掉它们会有什么影响吗?

我们考虑到如果去掉,可以大幅增加推理效率。在我们的使用场景中,每个item的格式是固定的,都由3层SID构成,模型能够学习到这个范式。也能正常进行推荐。所以我们对这俩token的作用十分疑惑。

十分感谢~~

Metadata

Metadata

Assignees

No one assigned

    Labels

    No labels
    No labels

    Projects

    No projects

    Milestone

    No milestone

    Relationships

    None yet

    Development

    No branches or pull requests

    Issue actions