请问如何部署呢?

#1
by chenda7 - opened

您好!请问如何推理这个模型呢?我看vllm和sglang上目前只有QQQLinearMethod,没有MOE相关的

Sign up or log in to comment