GATNE icon indicating copy to clipboard operation
GATNE copied to clipboard

关于多类节点,模型评价的问题

Open Aliang-CN opened this issue 5 years ago • 3 comments

你好: 两类节点,user和item节点都添加到里面,我是想着把user节点和item的节点分开算auc,例如评价user节点,两个user消费同一个item算正样本,然后负样本随机采样;评价item节点,两个item被同一个user消费算正样本,然后负样本随机采样。你觉得这样评价可行吗?

Aliang-CN avatar Nov 24 '20 06:11 Aliang-CN

Hi @Aliang-CN,

有一个小问题就是,如果一个item连接了过多的user,比如1000个,那么这1000个user之间你都认为是正样本?这样的话,可能不是很可行。

cenyk1230 avatar Nov 25 '20 09:11 cenyk1230

那这个随机采样吧

Aliang-CN avatar Nov 27 '20 01:11 Aliang-CN

Hi @Aliang-CN,

有一个小问题就是,如果一个item连接了过多的user,比如1000个,那么这1000个user之间你都认为是正样本?这样的话,可能不是很可行。

按照兄弟这么讲,其实最好的评价还是评价user和item之间相似,例如点击了就正样本,随机采样就负样本。感觉评价user和user之间,或者item和item之间都有点难评价。

Aliang-CN avatar Dec 02 '20 01:12 Aliang-CN