Поиск материала осуществлялся в архивах
и библиотеках г. Санкт-Петербурга.
Основным местом для работы была выбрана Российская национальная библиотека (Московский пр-т., 165 корпус 2, Санкт-Петербург), так как для посещения отдела микроформ не требовалась предварительная запись или заказ дел.

1 этап

2 этап

В проекте мы работаем с видео, но чтобы получить окончательный PDF-файл нам необходимо работать
с отдельными кадрами.
Для этого мы сначала извлекаем из видео все кадры. Затем нам нужно получить кадры, относящиеся к одному развороту и выбрать из данных групп лучшие. Изначально мы применяли метод кластеризации DBSCAN, но позже мы нашли лучший и более быстрый метод детекции разворотов на основе контрастности кадров.

3 этап

Загружаем полученные кадры в Roboflow и размечаем наш датасет.
Для более детальной информации о разметке данных в Roboflow и последующего обучения, советуем ознакомиться со статьей.

YOLO (You Only Look Once) — архитектура нейронных сетей с открытым исходным кодом, предназначенная для детекции объектов на изображении. Мы использовали YOLOv5 (5 версию), которая реализована на PyTorch.
Датасет, который мы получили в Roboflow, мы разделяем на два (учебный и тренировочный),
и после проведения всех настроек запускаем обучение, а затем детекцию. У YOLOv5 достаточно богатый функционал, который также позволяет визуализировать процесс
и результат обучения

4 этап

Для улучшения качества изображения использовались различные алгоритмы CV,
к примеру, convertScaleAbs, normalize, MORPH_CLOSE, подробнее о которых можно узнать в документации OpenCV. Помимо улучшения качества изображения, мы работали над распознаванием текста на изображении при помощи Tesseract-OCR

5 этап

Для удобства пользователей и простоты реализации мы использовали библиотеку AIOgram. Как и весь наш проект, библиотека написана на Python 3.7, но также с использованием asyncio и aiohttp. При написании бота можно отметить хороший и удобный функционал, который также облегчает использование бота при работе с ним и, конечно, высокую скорость обработки запросов.

Создание telegram-бота

КАК ПОЛЬЗОВАТЬСЯ ТЕЛЕГРАМ-БОТОМ