Răsfoiți Sursa

Expose BloomTokenizerFast in petals.client

Aleksandr Borzunov 2 ani în urmă
părinte
comite
31c4ef0c34
1 a modificat fișierele cu 2 adăugiri și 0 ștergeri
  1. 2 0
      src/petals/client/__init__.py

+ 2 - 0
src/petals/client/__init__.py

@@ -1,3 +1,5 @@
+from transformers import BloomTokenizerFast
+
 from petals.client.inference_session import InferenceSession
 from petals.client.remote_model import DistributedBloomConfig, DistributedBloomForCausalLM, DistributedBloomModel
 from petals.client.remote_sequential import RemoteSequential, RemoteTransformerBlock