YL-9

Results 1 comments of YL-9

> 1. 顺序对结果没有影响,计算是等价的 > 2. global_h_q 已经做过[旋转](https://github.com/thunlp/InfLLM/blob/main/inf_llm/attention/context_manager.py#L745)了,global_h_k 没做 rope 相当于旋转 0 度 > > 如果只需要对应论文算法的代码,[初始](https://github.com/thunlp/InfLLM/blob/init/inf_llm/attention/context_manager.py)版本会好读一些,目前的版本优化了性能。 好的感谢! 请问你们有没有做过对 global_h_k 做旋转的相关实验呢