{ "cells": [ { "cell_type": "code", "execution_count": null, "metadata": {}, "outputs": [ { "name": "stdout", "output_type": "stream", "text": [ "Загружено 167 записей\n" ] }, { "data": { "text/html": [ "
| \n", " | message_id | \n", "original_text | \n", "strict_question | \n", "real_question | \n", "
|---|---|---|---|---|
| 0 | \n", "130738 | \n", "Итальянский суд принял решение экстрадировать ... | \n", "Какое решение приняло итальянское судопроизвод... | \n", "Что там с Кузнецовым — его в Германию выдадут ... | \n", "
| 1 | \n", "129361 | \n", "Пять пассажиров автобуса №793 пострадали в ДТП... | \n", "Сколько пассажиров автобуса №793 пострадали в ... | \n", "Сколько человек в автобусе 793 пострадали, ког... | \n", "
| 2 | \n", "133468 | \n", "Владимир Путин утвердил концепцию государствен... | \n", "Кто утвердил концепцию государственной миграци... | \n", "Кто там утвердил новую миграционную концепцию ... | \n", "
| 3 | \n", "123139 | \n", "Генпрокуратура и Минюст подали в Верховный суд... | \n", "Какое юридическое действие предприняли Генерал... | \n", "Что Генпрокуратура и Минюст сделали с сатанист... | \n", "
| 4 | \n", "129894 | \n", "Обломки дрона обнаружили польские пограничники... | \n", "Где и кем был обнаружен непилотируемый летател... | \n", "Что там польские пограничники нашли рядом с Бе... | \n", "
| \n", " | index | \n", "question | \n", "answer | \n", "is_valid | \n", "relevance_score | \n", "completeness_score | \n", "factual_accuracy_score | \n", "
|---|---|---|---|---|---|---|---|
| 0 | \n", "0 | \n", "Какое решение приняло итальянское судопроизвод... | \n", "Итальянский суд принял решение экстрадировать ... | \n", "True | \n", "1.0 | \n", "1.0 | \n", "1.0 | \n", "
| 1 | \n", "1 | \n", "Сколько пассажиров автобуса №793 пострадали в ... | \n", "Пять пассажиров автобуса №793 пострадали в ДТП... | \n", "True | \n", "1.0 | \n", "1.0 | \n", "1.0 | \n", "
| 2 | \n", "2 | \n", "Кто утвердил концепцию государственной миграци... | \n", "Владимир Путин утвердил концепцию государствен... | \n", "True | \n", "1.0 | \n", "1.0 | \n", "1.0 | \n", "
| 3 | \n", "3 | \n", "Какое юридическое действие предприняли Генерал... | \n", "Генпрокуратура и Минюст подали в Верховный суд... | \n", "False | \n", "0.5 | \n", "0.5 | \n", "1.0 | \n", "
| 4 | \n", "4 | \n", "Где и кем был обнаружен непилотируемый летател... | \n", "Обломки дрона обнаружили польские пограничники... | \n", "True | \n", "1.0 | \n", "1.0 | \n", "1.0 | \n", "