С 20 сентября по 20 октября проходил крупнейший техно-баттл страны — Лидеры Цифровой Трансформации. В команду SR Data вошел преподаватель курса «Нейронные сети и их применение в научных исследованиях» Никита Беляков. Он выступил ML-инженером под руководством Игоря Кожелина.
Команда выбрала кейс по определению геопривязки и адресов зданий на фото с дронов, беспилотников и камер домов.
«Мы сделали базу данных по МО и Москве, через трансформер нуб модель dino v3 satellite pretrain прогнали всю эту базу данных в эмбеддинги, и потом поиском по базе данных этой выдавали топ наиболее похожих полученных эмбеддингов картинок и их геолокацию и впихивали это как дополнительный промпт для deepseekv3. Дополнительно подавали именно bbox'ы - области детекции отдельных домов на картинке, задетектированных через модель yolov8. Я на начальных этапах занимался моделью детекции домов как раз и интеграцию ее с языковой моделью. Потом обрабатывал всю базу данных Москвы и МО в сжатое представление через dino v3 и писал поиск наиболее похожих локаций по этой базе данных эмбеддингов», — поделился Никита Беляков.
Церемония награждения прошла 25 октября в кластере Ломоносов.
