textattack/distilbert-base-uncased-CoLA

Modelo de clasificación de texto afinado con el conjunto de datos glue utilizando la biblioteca nlp. El modelo fue entrenado durante 5 épocas con un tamaño de lote de 64, una tasa de aprendizaje de 3e-05 y una longitud máxima de secuencia de 128. Dado que se trataba de una tarea de clasificación, se entrenó con una función de pérdida de entropía cruzada. La mejor puntuación que alcanzó el modelo en esta tarea fue 0.8235858101629914, medida por la precisión del set de evaluación, encontrada después de 2 épocas.