Компьютерное зрение в Гараже
ПАНДАН,2024
Кураторы: Иван Бибилов и Екатерина Юшкевич

Актуальность
Сотрудник музея современного искусства "Гараж" о сканировании:
"В Архиве «Гаража» весь процесс занимает обычно около месяца, само сканирование идет 2 – 2,5 недели, остальное время – проверка материала, доработки"
"Стоимость зависит от объемов и форматов, обычно от 300 000 р. за несколько десятков тысяч листов. В стоимость включено не только услуги сканировщика, но и завоз – вывоз оборудования. Плохо проходит распознавание некоторых машинописных текстов, есть издания с плохой раскрываемостью, слишком крупные объекты (больше 2х1,5 м) тоже нельзя отсканировать."

Исследователь ряда Музеев г. Йошкар-Олы
"За два года сотрудники музея создали карточки и справочники на 2000 экспонатов из общего 200 000 количества объектов. Главной проблемой является нехватка кадров и специального оборудования. До сих пор в музее не проводится оцифровка музейных объектов при помощи специального сканера."

Проект студентов МГУ "Музей в кармане" - "...мы написали проект и получили оборудование на 10 миллионов рублей. Сначала мы думали, что это рутинная работа: сканирую-обрабатываю-раскладываю файлы по папочкам. Но внезапно процесс нас увлек."


Цель:
- разработать недорогое и быстрое решение для музейной оцифровки

Планируемые результаты:

- два направления работы:

"технологическое" - разработка кода для сборки единого "полотна" изображения

сейчас написан код, позволяющий быстро собирать кадры из видео в целое изображение
Но в нем есть некоторые проблемы
следующий этап - улучшение качества кода, разметка отсканированного изображения

"физическое" - поиск наилучших настроек для качественной съемки объекта

сейчас тестирование гипотез для выявления наилучших условий для съемки
следующий этап - съемка объектов для сканирования с наилучшими параметрами

Этапы работы
1
Сделать обзор существующих сканеров
Найти примеры хорошего и плохого сканирования и объяснить чем мы отличаемся в лучшую сторону
2
Сбор материалов
Снять в Гараже плакаты для пробного сканирования
3
Провести эксперименты с настройками камеры
Найти наиболее подходящие настройки, чтобы сканирование получилось более точным
4
Код
Доработать существующий код

Мы съездили в Гараж и сделали пробную съемку трех плакатов - в прошлом году проект был сосредоточен на сканировании карт, в этом году мы решили расширить возможности сканера и продолжить выполнять запрос музея (отсканировать как можно больше существующих в Гараже экспонатов из разных материалов).
Что мы делали?
- С помощью конструкции снимали на телефон видео плакатов полосками;
- Пробовали разные настройки камеры;
- Собирали видео в полноценный плакат кодом (брали кадры из видео и склеивали в единый плакат)
Проблемы
  • Однотонные цвета
    При однотонном цвете алгоритм наложения изображений работает с проблемами
  • Глянцевая поверхность
    При использовании света ламп глянцевая поверхность создает блики, которые искажают качество скана
  • Стабилизация
    Изменения положения телефона при съемке затрудняют склеивание
Съемка | тесты
Настройки
Выбор наилучших настроек и их влияние на сканирование
VS
Сравнение съемки на iPhone и Samsung
Фото VS Видео
видео - поток кадров, с помощью кода мы выбираем некоторые
VS фото - уже сфокусированные выстроенные кадры

Свет
Выбор наилучшего света: вспышка, общий свет, темнота, свет от ламп, кольцевая лампа
Фильтры
Есть проблемы, которые можно решить наложением фильтров



Преимущества нашей конструкции
(как мы можем решить существующие проблемы)
Следующие этапы работы
1
Гараж
Съездить в Гараж и в Москве, и в Санкт-Петербурге. Отснять новый материал для сканирования и продолжить работу с ним.
2
Разметка
Сделать разметку отсканированного материала (код + репозиторий, где это будет храниться).
3
Интервью
Взять интервью у нескольких музеев про сканирование.
4
Камера
Продолжить работать с настройками камеры и искать наилучший результат съёмки, с которым получится качественное сканирование.
Наша команда
  • Мария Мальцева
  • Дарья Полыгалова
  • Анастасия Чернова
Made on
Tilda