소스 검색

Fix `load_model` missing argument (#377)

Hamid Shojanazeri 1 년 전
부모
커밋
5edd1a2cc4
1개의 변경된 파일1개의 추가작업 그리고 1개의 파일을 삭제
  1. 1 1
      examples/chat_completion/chat_completion.py

+ 1 - 1
examples/chat_completion/chat_completion.py

@@ -61,7 +61,7 @@ def main(
     else:
         torch.cuda.manual_seed(seed)
     torch.manual_seed(seed)
-    model = load_model(model_name, quantization)
+    model = load_model(model_name, quantization, use_fast_kernels)
     if peft_model:
         model = load_peft_model(model, peft_model)
     if use_fast_kernels: