distilbert-base-uncased-finetuned-squad
Shyamkant
Pregunta y respuesta
Este modelo es una versión ajustada de distilbert-base-uncased en un conjunto de datos desconocido. Logra los siguientes resultados en el conjunto de evaluación: Pérdida: 2.0306.
Como usar
Actualmente, este modelo no tiene suficiente actividad para ser desplegado en Inference API (sin servidor) aún. Aumente su visibilidad social y vuelva a intentarlo más tarde, o despliegue en Inference Endpoints (dedicado).
Hiperparámetros de entrenamiento
learning_rate: 2e-05
train_batch_size: 16
eval_batch_size: 16
seed: 42
optimizer: Adam con betas=(0.9,0.999) y epsilon=1e-08
lr_scheduler_type: linear
num_epochs: 0.1
Funcionalidades
- Transformers
- TensorBoard
- Safetensors
- Generado desde Trainer
- Pérdida de entrenamiento: 3.0323
- Pérdida de validación: 2.0306
- Modelos base: distilbert/distilbert-base-uncased
- Finetuning
Casos de uso
- Respondedor de preguntas
- Modelos de inference dedicados