На пути использования смартфона в качестве гиперспектральной камеры

Спектральная реконструкция из RGB-изображений – одна из актуальных задач вычислительной фотографии, но на сегодняшний день даже самые современные алгоритмы не обеспечивают приемлемую точность. Любопытно, что в этой задаче современные мобильные устройства открывают новую возможность повышения качества реконструкции за счёт использования изображений сразу с нескольких камер. Это даёт почву для создания мобильной гиперспектральной камеры для широкого круга пользователей. В работе исследован вопрос достижимой точности при использовании одновременно нескольких одинаковых камер в сочетании с различными спектральными фильтрами. Предложено два алгоритма для поиска оптимальных фильтров для случаев обучения линейной регрессии и полносвязной нейронной сети в качестве алгоритма реконструкции. В результате вычислительных экспериментов было установлено, что в случае 4 камер и 4 фильтров точность реконструкции в три раза выше, чем при восстановлении из RGB-изображений.