MetaRunning
Results
2
comments of
MetaRunning
同希望增加
> > RT > > 使用加速方法,简单的可以试试vllm:https://github.com/LlamaFamily/Llama-Chinese/tree/main/inference-speed/GPU/vllm_example 好的,多谢。我试下看下效果。