bert-medium-pretrained-finetuned-squad
anas-awadalla
Pregunta y respuesta
Este modelo es una versión ajustada de anas-awadalla/bert-medium-pretrained-on-squad en el conjunto de datos squad. Alcanza los siguientes resultados en el conjunto de evaluación: Pérdida: 0.0973, 'exact_match': 77.95648060548723, 'f1': 85.85300366384631.
Como usar
El siguiente conjunto de hiperparámetros se utilizó durante el entrenamiento:
learning_rate: 5e-05
train_batch_size: 16
eval_batch_size: 16
seed: 42
optimizer: Adam con betas=(0.9,0.999) y epsilon=1e-08
lr_scheduler_type: linear
num_epochs: 3.0
Funcionalidades
- Fine-tuning en el conjunto de datos SQuAD
- Pérdida: 0.0973
- 'exact_match': 77.95648060548723
- 'f1': 85.85300366384631
Casos de uso
- Responder preguntas basadas en el conjunto de datos SQuAD