Как исправить смещение панорамы, вызванное повторяющимися узорами

Пара контрольных точек сообщает программе сшивания, что две отмеченные позиции соответствуют одной и той же детали сцены. Повторяющиеся окна, плитки или декоративные панели создают неоднозначность: два угла могут выглядеть одинаково, но принадлежать разным объектам. В документации PTGui описана именно такая проблема сопоставления. Поддержка PTGui / FAQ

Затем оптимизатор работает с заданными соответствиями. В пояснении по оптимизации на PanoTools сказано, что оптимизатор не анализирует фотографии, чтобы установить, действительно ли отмечены одинаковые детали. Он корректирует геометрию изображений, сводя эти координаты друг с другом. Поэтому визуально правдоподобный набор ложных совпадений может направить выравнивание в неверную сторону. Оптимизация — вики PanoTools.org

Отсюда следует полезный диагностический вывод: если область перекрытия смещена примерно на одно окно, плитку или панель, проверьте, не перешли ли совпадения на соседний повтор узора. Считайте такое смещение поводом для проверки, а не доказательством причины.

Перед редактированием сохраните отдельную копию проекта сшивания. Отметьте, где виден дефект, и определите два исходных снимка, охватывающих эту область. Начните с одной области перекрытия, чтобы можно было связать каждое изменение с его результатом.

Откройте таблицу контрольных точек проекта. В таблице Hugin перечислены точки всего проекта; их можно сортировать по столбцам, а выбор строки открывает соответствующую пару изображений. После геометрической оптимизации в столбце Distance указывается оставшееся расхождение выравнивания в пикселях. Однако после команды «Fine-tune all Points» в этом столбце вместо этого отображаются значения корреляции. Перед интерпретацией проверьте, какая операция сформировала эти значения. Таблица контрольных точек Hugin

Проверяйте в таком порядке:

1. Откройте пару снимков, на которой виден дефект.
2. Сначала изучите точки с наибольшей геометрической ошибкой.
3. Проверьте остальные совпадения, в том числе те, что выглядят удачными.
4. Сравните характерные детали за пределами повторяющегося узора.
5. Убедитесь, что снимки действительно перекрываются в каждой предполагаемой точке совпадения.

Последняя проверка особенно важна, поскольку непосредственная задача — установить соответствие. Хороший числовой результат не позволяет определить, какую из одинаково выглядящих панелей действительно сняла камера.

В Hugin выберите проблемные фотографии на вкладке Control Points. Для сопоставления одинаковых деталей на перекрывающихся изображениях используйте обычные контрольные точки. В руководстве рекомендуется не менее трёх хорошо распределённых точек для оценки ориентации изображений; для оценки дисторсии объектива нужны более обширные, хорошо распределённые данные. Вкладка Control Points в Hugin

Выбирайте детали, идентичность которых можно установить по окружению. Например, отметьте угол панели рядом с характерным следом на поверхности, неровным стыком или местом, где заканчивается повторяющийся узор. Обычный угол тоже подойдёт, если его можно однозначно проследить от общего ориентира.

Для каждой подозрительной пары воспользуйтесь этой памяткой:

Что вы наблюдаете	Что делать
Оба маркера указывают на одну и ту же неподвижную деталь	Оставьте пару и проверьте остальные ошибки.
Маркеры указывают на соседние повторы узора	Переместите ошибочно поставленный маркер или замените пару.
Невозможно установить, какой повтор имеется в виду	Удалите неоднозначную пару и найдите характерный ориентир.
Важная часть области перекрытия не содержит совпадений	Добавьте туда проверенные соответствия.

Такой порядок действий соответствует рекомендации PTGui сохранять правильно размещённые точки и удалять ошибочные соответствия, а не применять произвольный порог ошибки. Поддержка PTGui / FAQ

Распределяйте новые точки по всей пригодной области перекрытия, а не размещайте их все на одном небольшом элементе. В Hugin можно вручную выбрать соответствующие позиции, скорректировать их и добавить пару. Функция Fine-tune ищет в локальной окрестности; проверьте результат, чтобы маркер остался на нужном повторе узора. Вкладка Control Points в Hugin

Чтобы точно размещать точки в Hugin, отключите auto add при проверке возможных совпадений. Можно позиционировать оба маркера, уточнить их положение, а затем нажать A, чтобы добавить пару. В FAQ Hugin описан этот порядок действий и сочетание клавиш F для локальной подстройки. FAQ Hugin

После исправления совпадений повторно выполните геометрическую оптимизацию. В Hugin этот процесс описан как корректировка ориентации изображений и параметров объектива до совмещения контрольных точек. В документации для большинства случаев рекомендуются готовые варианты оптимизации; там также предупреждают, что оптимизация большего числа параметров, чем необходимо, может привести к проблемам. Вкладка Optimiser в Hugin

Для контролируемого исправления сначала оставьте текущие настройки объектива и исправьте только соответствия. Выполните оптимизацию и сравните проблемную область перекрытия с сохранённой версией. Это способ диагностики: если за раз менять только один тип входных данных, результат проще интерпретировать.

Если проверенные совпадения по-прежнему расходятся в разных частях области перекрытия, проверьте геометрическую модель. Неверные параметры объектива могут мешать выравниванию, а для расчёта дисторсии нужны точки, распределённые по соответствующей области. В руководстве PanoTools эти проблемы модели рассматриваются отдельно от неточного размещения точек. Оптимизация — вики PanoTools.org

Не включайте все доступные параметры только ради уменьшения средней ошибки. В документации оптимизатора Hugin объясняется, что перенос и другие дополнительные переменные применяются в конкретных случаях и при определённых условиях. Используйте эти настройки, только если того требует геометрия съёмки. Вкладка Optimiser в Hugin

Представим панораму декоративной стены, облицованной плиткой. На двух соседних фотографиях видны несколько одинаковых квадратных панелей. В предварительном просмотре сшитой панорамы верхний край выглядит непрерывным, но характерный неровный стык появляется дважды. Это гипотетический диагностический пример, а не результат измерений в программе.

Сначала найдите этот стык на обоих исходных снимках. Допустим, один маркер контрольной точки находится на панели непосредственно рядом с ним, а соответствующий маркер на другом снимке — на одну панель дальше. Замените эту пару совпадением на самом стыке. Проверьте все остальные пары в этой области перекрытия на такую же ошибку со сдвигом на один повтор.

Затем добавьте проверенные детали в верхней и нижней частях общей области, где есть различимые элементы. Повторно выполните оптимизацию, после чего осмотрите стык и посчитайте панели между двумя общими ориентирами. Проверка подсчётом даёт визуальный критерий, не зависящий от указанной оптимизатором ошибки.

Если стык стал непрерывным, но в другом месте результат ухудшился, проверьте оставшиеся соответствия и геометрические предположения. Не считайте всю область перекрытия исправленной только потому, что теперь совмещён один ориентир. Этот пример показывает, как вместе работают идентификация деталей, пространственное распределение точек и визуальная проверка.

Повторяющийся узор может быть лишь частью проблемы. Параллакс возникает, когда положение близких и удалённых деталей относительно друг друга меняется между снимками. Движение объектов в сцене также может создавать несовместимые соответствия. В руководстве PanoTools объясняется, почему любое из этих условий может помешать единому геометрическому решению выровнять все отмеченные детали. Оптимизация — вики PanoTools.org

Если на одной глубине выравнивание улучшается, а на другой ухудшается, проверьте параллакс. В FAQ Hugin рекомендуется выбрать части сцены, которые нужно совместить, и использовать контрольные точки на объектах примерно на одинаковом расстоянии, если сохраняется заметный параллакс. Оставшиеся разрывы может потребоваться исправить ретушью. FAQ Hugin

Если общая область содержит только неразличимые повторы, учитывайте это ограничение. Поищите различимые детали на соседних областях перекрытия, которые помогут определить положение изображений. Если по имеющимся фотографиям невозможно установить соответствие, не считайте предполагаемое совпадение проверенным. Практичным следующим шагом может стать изменение кадрирования или новая съёмка с более характерными общими деталями.

Когда геометрия вас устраивает, с помощью масок можно управлять тем, какой исходный снимок будет использован в проблемной области. В документации Hugin объясняется, что маски включения и исключения помогают блендеру выбрать шов. Они служат подсказками для блендера, поэтому результат нужно проверить. Вкладка Mask в Hugin

Например, можно исключить небольшой остаточный разрыв с одной фотографии, если другая фотография чётко покрывает ту же область. Сначала проверьте покрытие: в документации Hugin предупреждают, что исключение области без замещающего покрытия может оставить в панораме пустое место. Вкладка Mask в Hugin

Создайте тестовый рендер и осмотрите исправленную область перекрытия в полном размере. Воспользуйтесь этим заключительным визуальным списком:

• Характерные ориентиры встречаются один раз и остаются непрерывными.
• Последовательность повторяющихся элементов соответствует исходным снимкам.
• Линии, проходящие через область перекрытия, не смещаются и не раздваиваются.
• Верхняя и нижняя части области перекрытия остаются цельными.
• Маскированные области полностью покрыты изображением.
• Соседние области перекрытия по-прежнему выглядят правильно после оптимизации.

Завершайте работу, когда повторяющиеся элементы соответствуют нужным физическим деталям, а швы на рендере выглядят цельно при предполагаемом размере просмотра. Сохраните исправленный проект вместе с результатом, чтобы любой оставшийся локальный дефект можно было связать с исходной парой снимков и контрольными точками.

• Поддержка / FAQ — программа для сшивания PTGui
• Вкладка Control Points в Hugin — вики PanoTools.org
• Таблица контрольных точек Hugin — вики PanoTools.org
• Вкладка Optimiser в Hugin — вики PanoTools.org
• Оптимизация — вики PanoTools.org
• FAQ Hugin — вики PanoTools.org
• Вкладка Mask в Hugin — вики PanoTools.org