City: Saint Petersburg Novosibirsk Kazan Language: Русский English

Photogrammetry (3D Reconstruction)
Saint Petersburg / spring 2021, посмотреть все семестры

Enroll in the course to get notifications and to be able to submit home assignments.
Register to enroll now Login

Фотограмметрия позволяет по большому числу (от сотен до десятков тысяч) фотографий одной и той же неподвижной сцены/объекта получить трехмерную модель.

Примеры применения: сшивка спутниковых снимков, построение карт и ортофотопланов, создание трехмерных моделей городов, сканирование замков/статуй/предметов искусства для сохранения культурного наследия, построение цифровых моделей людей/объектов для игровой/кино-индустрии, различная аналитика (здоровье растительности в сельском хозястве, мониторинг ЛЭП, поиск трещин в мостах/огромных трубах ядерных реакторов).

В рамках курса рассказываются и в формате домашних заданий предлагаются для реализации ключевые этапы фотограмметрической обработки: от поиска и сопоставления ключевых точек на фотографиях и определения взаимного расположения этих фотографий (Multiple View Geometry) до построения попиксельных карт глубины фотографий и реконструкции цветной высокодетальной полигональной модели поверхности (Multi-View Stereo).

От слушателей ожидается знание алгоритмов, структур данных и C++. Рекомендуются (но не обязательны) базовые навыки разработки на видеокартах, т.к. многие этапы обработки будут обсуждаться в т.ч. через призму как это ускорить (и часто окажется что ответ - видеокарты), но в домашках достаточно выполнить задание на обычном C++.

Date and time Class|Name Venue|short Materials
09 February
20:00–21:30
Локальные ключевые точки SIFT, Lecture Конференция в zoom, Онлайн slides,  videofiles
16 February
20:00–21:30
Сопоставление ключевых точек (методы фильтрации, склейка панорам), Lecture Конференция в zoom, Онлайн slides,  videofiles
23 February
20:00–21:30
Определение взаимного расположения пар камер, Lecture Конференция в zoom, Онлайн video,  files
02 March
20:00–21:30
Уточнение расположения камер и их калибровок (Bundle Adjustment), Lecture Конференция в zoom, Онлайн slides,  videofiles
09 March
20:00–21:30
Карты глубины: ректификация стереопары, SGM (Semi-Global Matching), Lecture Конференция в zoom, Онлайн slides,  videofiles
16 March
20:00–21:30
Карты глубины: PatchMatch, Lecture Конференция в zoom, Онлайн slides,  videofiles
23 March
20:00–21:30
Обнаружение 3D проводов, Lecture Конференция в zoom, Онлайн slides,  videofiles
30 March
20:00–21:30
Фильтрация и объединение карт глубины в облако точек, реконструкция 3D модели из облака точек (Poisson), Lecture Конференция в zoom, Онлайн slides,  videofiles
06 April
20:00–21:30
Реконструкция 3D модели (Delaunay triangulation + Graph min-cut), Lecture Конференция в zoom, Онлайн slides,  videofiles
13 April
20:00–21:30
Самая лучшая лекция. Реконструкция 3D модели вариационными методами. Out-of-core, Lecture Конференция в zoom, Онлайн slides,  videofiles
20 April
20:00–21:30
Построение текстуры, Lecture Конференция в zoom, Онлайн slides,  videofiles
27 April
20:00–21:30
Автоматическое планирование 3D съемки с дрона, Lecture Конференция в zoom, Онлайн slides,  videofiles
21 May
20:00–21:30
Консультация перед экзаменом, Seminar Конференция в zoom, Онлайн files