Алгоритми машинного навчання відтворюють міста в 3D за допомогою лише зображень

Місто Цюріх, Швейцарія, було реконструйоване у тривимірному форматі з використанням мільйонів зображень і відеозаписів. Платформа Varcity, розроблена дослідниками з Швейцарської вищої технічної школи Цюріха, витягує з величезних обсягів даних зображення і використовує алгоритми для автоматичного зшивання їх разом.

Існують мільйони зображень кожного великого міста світу, багато з яких знаходяться у відкритому доступі в Інтернеті. Команда ETH Цюріх зрозуміла, що може зібрати ці дані – від стандартних фотографій, зроблених туристами, до відео, що транслюються через публічні веб-камери, і використовувати тріангуляцію для детального відтворення регіонів.

“Ми об’єднали всі джерела, щоб отримати повне уявлення про місто”, – сказав Хайко Ріменшнайдер, керівник проекту Varcity, в інтерв’ю Digital Trends. “Чим більше даних про місцевість, тим точнішими стають наші моделі”.

Попередній Наступний

Команда використовувала алгоритми машинного навчання, розроблені протягом п’яти років в рамках проекту Європейської дослідницької ради, які напівавтоматично аналізують зображення і створюють приблизний ескіз міста. “Ручна робота художника з 3D-моделювання взагалі не задіяна, – сказав Ріменшнайдер. “Це робить рішення масштабованим для всього міста”.

Потім вони доповнюють моделі знаннями про місцевість, про яку йдеться. “Маючи знання – знову ж таки, автоматично виведені – про те, яка частина 3D-моделі є будівлею, яка – поверхом, а яка – вікном чи балконом, можна стиснути дані або абстрагувати їх у мультяшну, але все ж таки 3D-версію”, – сказав пан Ріменшнайдер. Ідея абстрагування полягає у тому, щоб допомогти приховати обличчя та об’єкти для збереження приватності. “Таким чином, навіть якщо дані загубляться в дикій природі, конфіденційність буде збережена”, – сказав він.

Цюріхська модель призначена для демонстрації алгоритмів, які підтримують Varcity. Дослідники вважають, що їхня платформа може допомогти проектувати більш розумні та придатні для життя міста.

“Існує низка застосувань, таких як міське планування, архітектурний дизайн, моделювання дорожнього руху, автономна навігація та туристичне керівництво, а також планування реагування на катастрофи”, – сказав Ріменшнайдер.

Для демонстрації своєї моделі дослідники створили короткий відеоролик, який вони покажуть в одному з кінотеатрів Цюріха в п’ятницю.

Рекомендації редакції

• AMD повертає 3D V-Cache в Ryzen 7000 – але є один нюанс
• Революційний чіп AMD 3D V-Cache може бути запущений дуже скоро
• Боротьба з футбольними травмами за допомогою надрукованих на 3D-принтері гіперперсоналізованих щитків
• NASA тестує 3D-принтер, який використовує місячний пил для друку в космосі
• Кращі 3D-принтери вартістю до 500 доларів

Source: digitaltrends.com