您好!请问如何推理这个模型呢?我看vllm和sglang上目前只有QQQLinearMethod,没有MOE相关的
QQQLinearMethod
· Sign up or log in to comment