Исследователь создал «Google для археологов»

Археолог Алекс Брандсен использовал метод глубокого обучения для разработки поисковой системы AGNES, способной точно находить информацию в огромных массивах оцифрованных археологических отчётов. Его защита диссертации запланирована на 15 февраля.

Современные поисковые системы в архивах могут искать только по общим ключевым словам или названиям PDF-файлов, что заставляет учёных вручную просматривать тысячи документов. Новая система решает эту проблему. Её создание стало особенно актуальным после Мальтийского договора (1992), который обязывает проводить археологические исследования перед строительством, что привело к появлению тысяч отчётов ежегодно только в Нидерландах.

Брандсен обучил языковую модель распознавать слова в отчётах, различать синонимы и контексты. Например, система отличает артефакт «топор» от одноимённой фамилии. Тестирование AGNES на базе данных кремаций раннего Средневековья показало, что она нашла на 30% больше объектов, чем смог собрать за всю жизнь эксперт по этому периоду.

В настоящее время доступна черновая версия AGNES с точностью поиска около 80%. В качестве постдока Брандсен планирует повысить точность системы и расширить её функционал, добавив поддержку поиска на других языках.