deberta-base-combined-squad1-aqa-and-newsqa-1epoch

stevemobs
Pregunta y respuesta

Este modelo es una versión ajustada de stevemobs/deberta-base-combined-squad1-aqa en el dataset None. Este modelo se ha entrenado para tareas de Preguntas y Respuestas usando los Transformers de Hugging Face con PyTorch y TensorBoard. Alcanza una pérdida de 0.6851 en el conjunto de evaluación.

Como usar

Aprendizaje y Evaluación:

Tasa de aprendizaje: 2e-05
Tamaño del lote para entrenamiento: 12
Tamaño del lote para evaluación: 12
Semilla: 42
Optimizador: Adam con betas=(0.9,0.999) y epsilon=1e-08
Tipo de programador de tasa de aprendizaje: lineal
Número de épocas: 1

Resultados del entrenamiento:

  • Pérdida de validación: 0.6851

Funcionalidades

Pregunta y Respuesta
Transformers
PyTorch
TensorBoard

Casos de uso

Responder preguntas basado en contexto
Tareas de Preguntas y Respuestas automáticas en aplicaciones NLP
Mejora de sistemas de atención al cliente mediante modelos de P&R