Преобразование естественного языка в SQL-запросы

Это веб-приложение создано для преобразования естественного языка в SQL-запросы. Оно работает на основе двух современных трансформерных моделей:

GEMMA 2B
Deepseek Coder 1.3B
Обе модели были дообучены на 3000 строках данных и протестированы на 100 отдельных строках. Для оценки эффективности этих моделей использовались следующие метрики:

BLEU Score
SCAR BLEU Score
EM Ratio
BLEU Score анализирует вероятность совпадения n-грамм и проверяет, соответствует ли предсказанный текст исходному тексту по n-граммам. EM Ratio (Exact Match Ratio) проверяет, точно ли предсказанный запрос совпадает с исходным запросом.