deberta-base-combined-squad1-aqa

stevemobs
Pregunta y respuesta

Este modelo es una versión ajustada de microsoft/deberta-base en el conjunto de datos None. Logra los siguientes resultados en el conjunto de evaluación: Pérdida: 0.9442.

Como usar

Este modelo es un modelo de respuesta a preguntas (Question Answering) que usa PyTorch y TensorBoard. Los siguientes hiperparámetros fueron utilizados durante el entrenamiento:

learning_rate: 2e-05
train_batch_size: 12
eval_batch_size: 12
seed: 42
optimizer: Adam with betas=(0.9,0.999) y epsilon=1e-08
lr_scheduler_type: linear
num_epochs: 2

Funcionalidades

Ajustado del modelo microsoft/deberta-base
Resultados en el conjunto de evaluación:
Pérdida: 0.9442

Casos de uso

Respuesta a preguntas en texto
Aplicaciones de enseñanza automática
Búsqueda de información