DictaBERT-Large: Una suite BERT-Large de última generación para hebreo moderno

dicta-il
Pregunta y respuesta

Modelo de lenguaje de última generación para hebreo, disponible aquí. Este es el modelo BERT-large ajustado finamente para la tarea de preguntas y respuestas utilizando el conjunto de datos HeQ.

Como usar

from transformers import pipeline

oracle = pipeline('question-answering', model='dicta-il/dictabert-large-heq')

context = 'בניית פרופילים של משתמשים ... בגלל שדרוג תוכנה. לאחר שהנושא פורסם, הם ביטלו מיד את השימוש בהן.'
question = 'כיצד הוגבל המידע שניתן להשיג באמצעות העוגיות?'

oracle(question=question, context=context)

Output:
{
"score": 0.9999945163726807,
"start": 101,
"end": 114,
"answer": "באמצעות חקיקה"
}

Funcionalidades

Modelo BERT amplio ajustado finamente para el hebreo moderno
Soporta la tarea de preguntas y respuestas
Basado en el conjunto de datos HeQ
Implementación utilizando Transformers y PyTorch
Referencia en arXiv: 2308.16687

Casos de uso

Responder preguntas sobre un contexto en hebreo moderno
Investigaciones académicas sobre procesamiento de lenguaje natural para hebreo
Desarrollo de aplicaciones que requieran comprensión de textos en hebreo