FastRawViewer 1.5: поддержка TIFF и PNG (technology preview)

Настоящим хочется известить общественность, что поддержка файлов TIFF/PNG в FastRawViewer – готова для показа изумленной публике.

Ссылки для скачивания

Пока вы читаете тот текст, который ниже, вы можете потихоньку и скачивать

Ссылки устарели, берите тут: https://blog.lexa.ru/2019/03/17/fastrawviewer_15_grid_overlay_zoom_in_limit.html

История изменений:

• 1.5.0-1438: исправлена ошибки с показом Lab-файлов если настройка Raw processing space была установлена не в sRGB
• 1.5.0-1441:
  • Исправлена ошибка (с возможным падением) при показе превьюшек файлов в том случае, когда размер файла (или встроенного в него превью) в точности равен размеру показываемой на экране превьюшке.
  • Исправлена ошибка с показом PNG-файлов, в которых объявлен альфа-канал, но libpng его не находит (не спрашивайте как это, сам пока не вполне понял).
  • Добавлены скрытые настройки (см. ниже раздел Дополнительные настройки) для поддержки странных TIFF-файлов от пленочных сканеров.
  • Добавлена поддержка для RGB/TIFF сжатых Adobe Deflate с Predictor=2 (так сохраняли какие-то старые версии фотошопа)
• 1.5.0-1442: Детектор "TIFF/RAW" ошибочно напускался на все файлы, не только на *.TIF
• 1.5.0-1443:
  • Улучшена обработка tiled TIFF: в этом формате поддерживаются RGB/Grayscale, 8/16 bit, integer, будем улучшать до полной поддержки.
  • Обнаружена и исправлена (очень давняя) недоделка: тег tiff:Orientation теперь читается из XMP-блоков, встроенных в JPEG-файлы (и пишется туда же, если это включить)
  • Исправлена ошибка при групповой установке XMP-параметров (поворот, рейтинг, метка): в некоторых случаях это действие было (ошибочно) запрещено.
  • Исправлена ошибка: на совсем некорректных TIFF-файлах программа могла падать.

Поддержка форматов файлов

• PNG: 8/16bit, Grayscale, RGB, Palette.
  Корректной/полноценной поддержки прозрачности и/или альфа-канала нет, FRV - инструмент фотографа, а не дизайнера.
• TIFF/BigTIFF:
  • RGB/RGBA: 8/16 bit integer, 16/32 floating point (нормализованные 0-1, впрочем никаких других FP увидеть пока не удалось)
  • Grayscale: 8/16 bit int. 16/32 floating point
  • LAB (CIELAB TIFF): 8/16 bit integer
  • И некоторые другие форматы (особо не тестировались): palette, инвертированные grayscale.
  • TIFF-файлы Photoshop с встроенными слоями: показывается сгенерированное фотошопом композитное превью (полноразмерное), информация о слоях игнорируется.
  • Поддержки CMYK нет и не планируется: для показа CMYK нужен полноценный color management, а это невозможно для нужной скорости показа.
  • Методы сжатия: стандартные TIFF (Uncompressed,RLE, LZW), Adobe Deflate, Deflate.
• Цветовые данные: читаются и применяются как встроенные ICC/ICM-профили, так и теги Primaries/WhitePoint/Gamma (при отсутствии тега Gamma, считается что gamma = 2.2 для целочисленных файлов и 1.0 для floating point)
• Метаданные EXIF
  • TIFF: извлекаются и показываются
  • BigTIFF/PNG: не извлекаются и не показываются, но планируем сделать до релиза.
• Метаданные XMP
  Поскольку FastRawViewer пишет XMP-данные в sidecar-XMP файлы, а ни одна другая протестированная программа их не читает для TIFF/PNG (а писать в сами файлы мы не хотим из соображений безопасности), то было принято тяжелое, но неизбежное решение: поддержки XMP для TIFF/PNG нет, а именно:
  • У TIFF/PNG файлов нет рейтингов-меток (они не читаются, их нельзя назначить)
  • Повороты средствами FRV для TIFF/PNG файлов не поддерживаются, для TIFF читается тег Orientation, а у PNG и такого нет.
  • Соответствующие пункты меню/действия (XMP rating, XMP label, rotate) – недоступны для TIFF/PNG-файлов.

Настройки FastRawViewer, связанные с TIFF/PNG

Для новых пользователей: настройки доступны через

• Mac: Menu – FastRawViewer – Preferences, или Command-,
• Windows: Menu – File – Customize – Preferences, или Ctrl-P

Включение поддержки, режимы декодирования

Вкладка Preferences – RAW+JPEG переименована в Preferences – File formats, ее новый вид показан на картинке справа.

Добавились:

• Галочки PNG files support, TIFF files support. Их включение автоматически добавляет *.PNG и *.TIF/*.TIFF в список воспринимаемых расширений.
• В группе Non-RAW file decode priorities добавились строчки для Lone PNGs, Lone TIFFs с вариантами:
  • On file open – файл декодируется при попытке открытия
  • On prefetch – файл декодируется заранее.

Поддержка TIFF и PNG по умолчанию включена, режим On prefetch для этих файлов включен по умолчанию, если на компьютере больше 14GB памяти.

Для файлов с расширением TIF производится автоматическое определение TIFF или RAW (.TIF-файлы писали кэноновские «единички» первой версии).

Файлы TIF/PNG не объединяются в пару с JPG (даже если это RAW-файлы Canon 1D, но эти камеры и не умели снимать RAW+JPEG).

Производительность и лимиты

Поскольку TIFF/PNG файлы могут быть любого размера (и в байтах, и в пикселях), пришлось ввести ограничения.

На вкладке Preferences – Performance (справа) появился отдельный раздел File size limits в котором задаются предельные размеры (в мегапикселях)

• Показываемых файлов (PNG files size limit, TIFF files size limit).
  Если у файла размер больше, то FRV откажется его показывать, увеличивайте лимит, если нужно.
• Файлов, для которых генерируются превьюшки  (PNG/TIFF thumbnail generation limit).
  Если размер файла больше, то вместо превьюшки будет иконка «Dimensions too large»).

Кроме того, в группе Other performance settings появилась новая настройка Generate high-quality thumbnails. Если ее отключить, качество превьюшек будет хуже, но генерируются они заметно быстрее.

Thumbnail cache

Про долгоживущий кэш превьюшек я уже писал, но повторю еще раз.

Настройки кэша превьюшек показаны на картинке справа.

• Группа Thumbnail/Metadata fetched – настраивается
  • Thumbnail prefetch depth: сколько превьюшек кроме тех, что уже показаны на экране будет строится заранее.
  • Thumbnail decoder thread count: в сколько потоков они будут строиться (на HDD-дисках советуем стандартную настройку уменьшать до 2-3, для SSD – ставить от количества ядер CPU до удвоенного количества ядер).
• In-memory thumbnail/metadata cache
  • Thumbnail cache size – сколько превьюшек держать в памяти
  • Metadata cache size – метаданные (EXIF, XMP, итп) какого количества файлов держать в памяти.
• Disk thumbnail cache – кэш превьюшек на диске (рекомендуем располагать его ТОЛЬКО на SSD-дисках)
  • Thumbnail database path – путь к папке, где будет файл кэша
  • Database size limit – лимит размера кэша превьюшек
  • Stored thumbnail size: либо текущий размер (тогда при изменении размера показываемых превьюшек кэш «устареет»), либо максимально возможный размер превьюшек (тогда кэш на диске будет больше).
  • Image compression: как именно сжимать сохраняемые превьюшки.
  • Save cached thumbnails if…: самое важное место: в дисковый кэш кладутся только такие превьюшки, на построение которых было потрачено много времени (соответственно, перестраивать их каждый раз – долго). Если вы хотите класть в дисковый кэш ВСЕ, уменьшите эту настройку до нуля.
  • Mark cached thumbnails with red dot: если включить эту настройку, вы увидите, что взято из кэша, а что – перестроено на лету.

Дополнительные (скрытые) настройки

Для поддержки всяких сканерных (от пленочных сканеров) TIFF-файлов были добавлены нижеописанные скрытые (т.е. они не ставятся через диалог Preferences) настройки.

На всякий случай напомню, что эти настройки ставятся через registry/defaults (Windows/Mac) (лучше - при закрытом FastRawViewer) и начинают действовать при перезапуске FRV.

AdditionalTIFFExts - дополнительный список расширений (кроме *.tif *.tiff), воспринимаемых как TIFF-файлы

Изменение настройки:

• Windows: Скопируйте файл C:\Program Files\LibRaw\FastRawViewer\scripts\AdditionalTIFFextenstionSample.reg куда-нибудь в укромное место, отредактируйте по вкусу: список расширений можно задавать как *.EXT1 *.EXT2, можно как .EXT1 .EXT2, можно просто EXT1 EXT2, разделитель пробел.
  Далее жмякните по этому (отредактированному) файлу дабл-кликом, запустится RegistryEditor, импортирует вашу настройку.
• Mac:  выполните в терминале команду:
  defaults write com.libraw-llc.FastRawViewer Prefs.AdditionalTIFFExts "*.fff *.yyy"
  Где *.fff .*yyy - те расширения, которые вы хотите считать TIFF-файлами

Если файлы *.fff указано считать TIFF-файлами, то

1. Они не будут склеиваться в пару RAW+JPEG
2. Они будут тестироваться "а не RAW ли это" при показе и/или генерации превьюшки, т.е. спокойно можно смешивать *.fff от Имаконовского сканера и *.fff от камеры Hasselblad H3D (или любой другой).

NonBayerTiffIsNotRaw

Суть проблемы: некоторые TIFF-файлы (например, монохромные со сканеров) одновременно являются и RAW-файлами в том смысле, что библиотека LibRaw считает их вполне подходящими и корректными RAW-файлами (и такие файлы делались, например, камерой Kodak DCS 760M - это обычные линейные TIFF-файлы)

Если включить настройку NonBayerTIFFIsNotRAW, то FastRawViewer перестанет считать RAW-файлами такие TIFF-файлы, в которых находятся "не байеровские" данные, а будет считать их TIFF-файлами.

Включение этой настройки не сломает поддержку Canon 1D/1Ds, но скорее всего сломает Kodak 760M и подобные монохромные камеры, порождавшие файлы *.tif

Установка/выключение: Скриптами NonBayerTIFFIsNotRAW/NonBayerTIFFIsMaybeRAW соответственно (см. руководство, раздел "Дополнительные настройки", там написано как пользоваться скриптами дополнительных настроек)

Полезные мелочи

Если вы хотите перестроить превьюшки для всей текущей папки, используйте Menu – File – Reload – Fetch thumbnails for current folder (Ctrl-Shift-F на Windows, Command-Shift-F на Mac).

Если у вас включен Disk thumbnail cache, то «Fetch thumbnails…» построит превьюшки для всех файлов в папке (и сохранит те из них, время генерации которых было больше чем «Save cached thumbnails if…»).

Если дисковый кэш выключен, то будет построено не больше превьюшек, чем 80% кэша в памяти (т.е. 400 из 500 для настроек по умолчанию).

Если вы хотите очистить дисковый кэш, используйте Menu – File – Reload – clear thumbnails cache.

Мы не рекомендуем использовать большие значения в Thumbnail prefetch depth для автоматического фонового построения всех превьюшек в папке за исключением случая «очень мощный компьютер с очень быстрым SSD-диском».  Лучше вызовите явную команду построения превьюшек (Fetch thumbnails for current folder) и дождитесь ее завершения.

При сохранении TIFF-файлов из Photoshop мы рекомендуем включать опцию Save Image Pyramid: для таких файлов превьюшки строятся многократно быстрее (т.к. не нужно читать полноразмер, в файле есть варианты в ¼, 1/16, 1/64… по разрешению).

Color Management

На Windows-системах, Color Management у FastRawViewer по умолчанию выключен: у очень большой части Windows-пользователей установлены совершенно негодные профили дисплея, если их использовать, то будет хуже. Чтобы Color Management включить, просто включите галочку Enable Color Management

На маках ситуация с профилями гораздо лучше – и там Color Management по умолчанию включен.

Выключенный Color Management эквивалентен настройкам «все в sRGB» (RAW processing space, Ccolor space for thumbnails, Color space for untagged files).

Настройки Color Management (см. справа) не изменились, ничего нового не добавилось, на TIFF/PNG файлы существующие настройки действуют следующим образом:

• RGB и Grayscale:
  • при полноэкранном показе применяется встроенный профиль
  • превьюшки: показываются без индивидуального Color Management (иначе было бы слишком медленно), считается что все файлы – в одном цветовом пространстве, задаваемом настройкой Color space for thumbnails (и из него – конвертируется в экранное цветовое пространство одинаковым способом для всех файлов).
  • Превьюшки для floating point файлов – конвертируются из гаммы 1 в гамму 2.2
  • Если у файла нет профиля, используется ‘Color space for untagged files’
• LAB:
  • При полноэкранном показе производится конверсия в RAW processing color space (и из него – в дисплейный профиль)
  • Для превьюшек – производится конверсия в Color space for thumbnails (и из него – в дисплейный профиль).
    Внимание: превьюшки LAB-tiff пишутся в кэш превьюшек уже в RGB-формате. Если вы меняете color space for thumbnails, то старые превьюшки будут показываться неверно, мы рекомендуем использовать Menu - File - Reload - Clear thumbnails cache (увы, но убрать из кэша только превью Lab-файлов сейчас нельзя).
  • Конверсия LAB – RGB производится с absolute colormetric intent т.е. сжатия охвата нет, загамутные цвета – оказываются на краю рабочего цветового пространства (в реальности применяется конверсия Lab – xyz и затем конверсия xyz – RGB матричным профилем с обрезкой результатов, выходящих за диапазон 0-1).

Прочие (мелкие) изменения

• Добавлена поддержка ICC-профилей для монохромных JPEG файлов (для PNG и TIFF – тоже, конечно).
• JPEG-кэш теперь не так агрессивно пре-фетчит файлы
• Уменьшен объем памяти, используемой JPEG cache
• Shortcuts: добавлена вкладка ‘Folders handling’ и на нее перенесены операции с папками.

Планы

Хочется заранее предупредить: мы делаем вьюер для фотографов, поэтому поддерживаем те форматы, которые встречаются в практике фотографов. Нельзя исключить, что мы добавим поддержку PSD/PSB-файлов, есть некоторое желание добавить HEIC.

Но вот что мы точно не будем делать, так это поддержку GIF, BMP (Targa, SVG, WebP, JP2 и прочих 700+ графических форматов): есть программы которые умеют именно миллион форматов (не вдаваясь в их особенности и детали), пользуйтесь ими.