Български пробив: INSAIT пусна най-мащабната публична 3D база данни за изкуствен интелект

Институтът за компютърни технологии и изкуствен интелект (INSAIT) към Софийския университет „Св. Климент Охридски“ е създал най-голямата в света отворена 3D база данни за модели с изкуствен интелект, които разбират едновременно естествен език и пространствени отношения, съобщиха от университета.

Проектът включва SceneSplat-49k – най-мащабната публично достъпна колекция от висококачествени и сложни 3D сцени във формат Gaussian Splatting, както и SceneSplat-Benchmark – платформа за оценка на модели за Language Gaussian Splatting. В базата данни са включени 48 856 реконструирани сцени от реалния свят, както на закрито, така и на открито. Над 12 000 от тях съдържат и езикови характеристики, което позволява обучение на модели, които свързват текстови описания с обекти и отношения в 3D.

От INSAIT посочват, че проектът е реализиран с изчислителен ресурс от 861 GPU-дни. Новата технология цели да преодолее ключов проблем в развитието на 3D AI – липсата на достатъчно мащабни и качествени данни, които да позволят на системите да „разговарят“ с 3D среда чрез естествен език и да разбират семантични и пространствени зависимости директно в три измерения.

SceneSplat-Benchmark въвежда и по-реалистични условия за измерване на качеството на моделите, като включва 1060 сцени и 325 семантични класа и тества алгоритмите директно в 3D, вместо да разчита на 2D проекции.

Проектът е резултат от международно научно сътрудничество между INSAIT и университети като Амстердамския университет, ETH Цюрих, „Джонс Хопкинс“, Университета в Пиза и други. Според Софийския университет разработката е важна стъпка към следващото поколение 3D AI системи с приложения в роботиката, виртуалната и добавената реалност, както и в по-естественото взаимодействие между хора и машини.

INSAIT е открит през 2022 г. по инициатива на проф. Мартин Вечев в партньорство с ETH Zurich и EPFL, като институцията продължава да развива проекти, които позиционират България на картата на високите технологии.