деплоид.Сбор и проверка данных
Сведения о компаниях со ссылками на источники
Собирать сведения о компании вручную — значит открывать страницы, выписывать факты и проверять ссылки. Я связал эти шаги в процесс, где у утверждений сохраняются источники.
Внутренняя системаПроблема
Сведения разбросаны по сайтам, а утверждения ИИ сложно проверить.
Что я сделал
Сделал сбор страниц, подготовку досье и проверку утверждений по источникам. Подтверждённые сведения передаются на следующий этап подготовки текста, вместе со ссылками.
Нажмите на действие, чтобы посмотреть, что происходит на этом шаге.
Сохраняются материалы с открытых страниц компании.
Как это устроено
Источник рядом с фактом
Для утверждения сохраняются адрес страницы и подтверждающий фрагмент. Ссылка проверяется вместе с содержанием, на которое она указывает.
Проверка отдельным шагом
Сбор сведений и проверка цитат разделены. Неподтверждённое утверждение можно отклонить до подготовки итогового текста.
Работа по этапам
Материалы и промежуточные результаты сохраняются. При разборе ошибки можно посмотреть, на каком шаге возникло расхождение.
Технические подробности+
Python, SQLite, обработка HTML и вызовы языковой модели. Проверяется наличие цитаты в исходном тексте и соответствие утверждению. Автоматическая проверка снижает конкретные риски, но не заменяет содержательное чтение важных фактов человеком.
- Python
- SQLite
- HTML
- LLM
- Проверка источников