Parcourir la source

Enable PETALS_8BIT_BACKWARD by default

Aleksandr Borzunov il y a 2 ans
Parent
commit
eb580973da
1 fichiers modifiés avec 1 ajouts et 1 suppressions
  1. 1 1
      src/utils/convert_8bit.py

+ 1 - 1
src/utils/convert_8bit.py

@@ -3,7 +3,7 @@ import os
 import bitsandbytes as bnb
 import torch
 
-PETALS_8BIT_BACKWARD = bool(int(os.environ.get("PETALS_8BIT_BACKWARD", 0)))
+PETALS_8BIT_BACKWARD = bool(int(os.environ.get("PETALS_8BIT_BACKWARD", 1)))
 
 
 def replace_8bit_linear(model, threshold=6.0):