vahe1994 1 gadu atpakaļ
vecāks
revīzija
154476c100
1 mainītis faili ar 1 papildinājumiem un 0 dzēšanām
  1. 1 0
      src/petals/server/from_pretrained.py

+ 1 - 0
src/petals/server/from_pretrained.py

@@ -98,6 +98,7 @@ def load_pretrained_block(
             set_module_tensor_to_device(block, param_name, "cpu", value=param, dtype=param.dtype)
 
     logger.info(f"Loaded {model_name} block {block_index}")
+    print(block.self_attn.q_proj.weight)
     return block