Bokai Lin

loss_function

1

Hello, may I ask where the RMSE loss_function with weighted L (i) mentioned in Science Paper is provided?

I have been following your valuable work and have gone through your code. However, I noticed that some variables, such as "regrets," are not explained in the paper. I was...

请问有关数据集是开源的吗？

6

我注意到了你们开创性的工作，我想知道你们的 synthesized CoM data是开源的吗？

有个bug运行不起来

1

我注意到你们chat.py文件里面219行： get_func = text_processor.get_func(inputs, **inputs_dic) if hasattr(text_processor, 'get_func') else get_masks_and_position_ids_default 可是如果我一开始没有输入图，image_position < 5，那么inputs_dic不会被赋值text_processor(new_prompt) （205行）,就会报错“在变量定义之前使用” 请问这个怎么解决啊，谢谢

关于测试集里面是否含有usr/item prf的疑问

1

我对你们的工作很感兴趣！我借用了你们的项目尝试了下现在流行的一些多模态表征融入的方法。我发现加入了这些方法之后，在验证集上的效果都比不加多模态表征的情况要好，但是在测试集上却大大不如验证集。我看了下github issue。如果都是3:1:1取的，难道在验证集和测试集的效果应该差不多吗？还是说测试集上没有多模态的表征但是验证集上有，所以才导致了这种情况？