dbaranchuk 3 роки тому
батько
коміт
e8f84e7747
1 змінених файлів з 1 додано та 2 видалено
  1. 1 2
      src/bloom/model.py

+ 1 - 2
src/bloom/model.py

@@ -584,8 +584,7 @@ class BloomForSequenceClassification(BloomPreTrainedModel):
                 )
 
         pooled_logits = logits[torch.arange(batch_size, device=logits.device), sequence_lengths]
-        pooled_logits = self.pooled_dropout(pooled_logits)
-
+        
         loss = None
         if labels is not None:
             if self.config.problem_type is None: