#вычислительная_фотография — Public Fediverse posts

Конвейеры формирования изображений. Часть 2: Баланс белого и преобразование к стандартному наблюдателю

С вами снова Егор Ершов, руководитель группы «Цветовая вычислительная фотография» в AIRI и заведующий сектором репродукции и синтеза цвета ИППИ РАН. Я продолжаю свой цикл статей по мотивам лекций по вычислительной фотографии, и в прошлый раз мы приступили к разбору типичных конвейеров формирования изображения, заложенных в наши профессиональные камеры и мобильные телефоны. Типичный пайплайн — от нажатия кнопки затвора до сохранения файла — довольно внушителен по количеству шагов, грубо его можно разделить на подготовку сырого RAW‑изображения и последующую обработку программными средствами. В предыдущей статье мы успели рассмотреть лишь первые два шага — регистрация света и дебайеринг, на этот раз поговорим про баланс белого и переход в пространство стандартного наблюдателя. Приятного чтения!

https://habr.com/ru/companies/airi/articles/1032886/

#баланс_белого #cie_xyz #стандартный_наблюдатель #вычислительная_фотография

Концепция цифровой фотографии. Часть 2

Продолжаем наш рассказ о концептуальных отличиях цифровой фотографии и тех новшествах, что принесли нам изобретения компании Kodak во второй половине XX века. Заодно и сам Kodak вспомним.

https://habr.com/ru/companies/beget/articles/987994/

#фото #цифровое_фото #фотография #CCD #вычислительная_фотография #full_frame #кроп #матрица #RAW #Photoshop

Концепция цифровой фотографии. Часть 2

Продолжаем наш рассказ о концептуальных отличиях цифровой фотографии и тех новшествах, что принесли нам изобретения компании Kodak во второй половине XX века. Заодно и сам Kodak вспомним.

https://habr.com/ru/companies/beget/articles/987994/

#фото #цифровое_фото #фотография #CCD #вычислительная_фотография #full_frame #кроп #матрица #RAW #Photoshop

Концепция цифровой фотографии. Часть 2

Продолжаем наш рассказ о концептуальных отличиях цифровой фотографии и тех новшествах, что принесли нам изобретения компании Kodak во второй половине XX века. Заодно и сам Kodak вспомним.

https://habr.com/ru/companies/beget/articles/987994/

#фото #цифровое_фото #фотография #CCD #вычислительная_фотография #full_frame #кроп #матрица #RAW #Photoshop

Концепция цифровой фотографии. Часть 1

Вряд ли Стивен Сассон, инженер компании Kodak, понимал, какой гвоздь вбивает в крышку гроба своего работодателя. В 1975 году он представил новейшую разработку: устройство на CCD-матрице, разрешением 100 на 100 светочувствительных элементов. Устройство могло фиксировать яркость по каждому элементу и записывало результат на магнитную пленку. Это событие считается важнейшей вехой в появлении цифровой фотографии. Появление “цифры” резко изменило сам подход к фото. И дело не только в том, что появилась возможность моментально смотреть результат съемки или делать неограниченное число кадров. Изменилась сама концепция фотографии. Именно про это мы и поговорим сегодня. Обсудим техническую реализацию цифровых камер, особенности их конструкции, затронем обработку. И, конечно же, уделим время вычислительной фотографии. Добро пожаловать в мир без пленок!

https://habr.com/ru/companies/beget/articles/987992/

#фото #цифровое_фото #фотография #CCD #вычислительная_фотография #full_frame #кроп #матрица #RAW #Photoshop

Концепция цифровой фотографии. Часть 1

Вряд ли Стивен Сассон, инженер компании Kodak, понимал, какой гвоздь вбивает в крышку гроба своего работодателя. В 1975 году он представил новейшую разработку: устройство на CCD-матрице, разрешением 100 на 100 светочувствительных элементов. Устройство могло фиксировать яркость по каждому элементу и записывало результат на магнитную пленку. Это событие считается важнейшей вехой в появлении цифровой фотографии. Появление “цифры” резко изменило сам подход к фото. И дело не только в том, что появилась возможность моментально смотреть результат съемки или делать неограниченное число кадров. Изменилась сама концепция фотографии. Именно про это мы и поговорим сегодня. Обсудим техническую реализацию цифровых камер, особенности их конструкции, затронем обработку. И, конечно же, уделим время вычислительной фотографии. Добро пожаловать в мир без пленок!

https://habr.com/ru/companies/beget/articles/987992/

#фото #цифровое_фото #фотография #CCD #вычислительная_фотография #full_frame #кроп #матрица #RAW #Photoshop

Концепция цифровой фотографии. Часть 1

Вряд ли Стивен Сассон, инженер компании Kodak, понимал, какой гвоздь вбивает в крышку гроба своего работодателя. В 1975 году он представил новейшую разработку: устройство на CCD-матрице, разрешением 100 на 100 светочувствительных элементов. Устройство могло фиксировать яркость по каждому элементу и записывало результат на магнитную пленку. Это событие считается важнейшей вехой в появлении цифровой фотографии. Появление “цифры” резко изменило сам подход к фото. И дело не только в том, что появилась возможность моментально смотреть результат съемки или делать неограниченное число кадров. Изменилась сама концепция фотографии. Именно про это мы и поговорим сегодня. Обсудим техническую реализацию цифровых камер, особенности их конструкции, затронем обработку. И, конечно же, уделим время вычислительной фотографии. Добро пожаловать в мир без пленок!

https://habr.com/ru/companies/beget/articles/987992/

#фото #цифровое_фото #фотография #CCD #вычислительная_фотография #full_frame #кроп #матрица #RAW #Photoshop

Lens Blur Fields: нейросетевая ФРТ на службе улучшения фотографий и идентификации камеры

Оптическое размытие или функция рассеяния точки — собирательное название для множества эффектов деградации изображения. В их числе — расфокусировка, дифракции и аберрации. Характер ФРТ крайне сложно калибровать, поскольку она меняется в зависимости от положения на сенсоре, настройки фокуса, расстояния до объекта и даже конкретной области на плоскости изображения. Поэтому любые попытки точно описать размытие реальной камеры сталкиваются с необходимостью измерять слишком большое количество параметров, что на практике выполнить почти невозможно. Метод Lens Blur Fields предлагает новое решение: использовать многослойные перцептроны, которые обучаются представлять ФРТ в виде непрерывной функции высокой размерности ( arXiv:2310.11535 ). Такая модель способна обобщать по всем параметрам сразу и восстанавливать плавные изменения ФРТ вместо того, чтобы хранить её в виде разрозненной таблицы замеров. В теории это значит, что метод Lens Blur Fields позволит не только сделать очередной красивый фильтр с боке, но и различать экземпляры камер по снимкам с них.

https://habr.com/ru/articles/947862/

#машинное_обучение #функция_рассеяния_точки #исследования #научные_работы #вычислительная_фотография #боке #смартфоны #фотографии_на_смартфоны #iPhone #Lytro

Конвейеры формирования изображений. Часть 1: Регистрация света и дебайеринг

Приветствую! Я, Егор Ершов, руководитель группы «Цветовая вычислительная фотография» в AIRI и заведующий сектором репродукции и синтеза цвета ИППИ РАН, продолжаю выкладывать статьи по мотивам своих лекций по вычислительной фотографии. Наша глобальная задача, напомню, разобраться, как сделать так, чтобы камера сотового телефона достаточно хорошо смогла уловить цвета, а монитор или принтер — их передать. Прошлые три текста были посвящены общей теории цвета, описанию зрительной системы, а также стандартам и цветовым пространствам (их можно прочесть тут , тут и тут ). Теперь же я расскажу непосредственно о конвейерах (или пайплайнах) формирования изображения — какая именно магия происходит внутри сенсоров, начиная с момента нажатия на кнопку затвора и заканчивая сохранением изображения в галерее. Приятного чтения!

https://habr.com/ru/companies/airi/articles/968126/

#фильтр_байера #пиксели #фототехника #пайплайны #обработка_изображений #вычислительная_фотография #фотография

Цветовая вычислительная фотография. Часть 1: Теория цвета

Приветствую! Меня зовут Егор Ершов, я руковожу группой «Цветовая вычислительная фотография» в AIRI, а также заведую сектором репродукции и синтеза цвета ИППИ РАН. Область моих научных интересов касается способов регистрации и обработки изображений, что в той или иной степени касается любого человека, кто хоть раз пользовался камерой, монитором или проектором. Вычислительная фотография лежит на стыке сразу нескольких дисциплин: физики, физиологии, компьютерных наук. Из‑за этого в ней ещё много сложного, но вместе с тем интересного и неизвестного. Я подготовил полноценный курс по алгоритмам вычислительной фотографии для МФТИ и ВШЭ, но мне также хотелось бы поделиться со всеми желающими его материалами в текстовом формате. Этот курс посвящен как феномену цвета, механизмам его восприятия, исследованию зрительной системы человека, так и непосредственно алгоритмам цветовой вычислительной фотографии. Но в этой статье я бы хотел в общих чертах обрисовать проблему регистрации изображений, а также дать введение в теорию цвета, которая потребуется в дальнейших частях.

https://habr.com/ru/companies/airi/articles/901284/

#цвет #камера #камера_смартфона #обработка_изображений #теория_цвета #вычислительная_фотография

Концепция цифровой фотографии. Часть 2

Продолжаем наш рассказ о концептуальных отличиях цифровой фотографии и тех новшествах, что принесли нам изобретения компании Kodak во второй половине XX века. Заодно и сам Kodak вспомним.

https://habr.com/ru/companies/beget/articles/987994/

#фото #цифровое_фото #фотография #CCD #вычислительная_фотография #full_frame #кроп #матрица #RAW #Photoshop

Концепция цифровой фотографии. Часть 1

Вряд ли Стивен Сассон, инженер компании Kodak, понимал, какой гвоздь вбивает в крышку гроба своего работодателя. В 1975 году он представил новейшую разработку: устройство на CCD-матрице, разрешением 100 на 100 светочувствительных элементов. Устройство могло фиксировать яркость по каждому элементу и записывало результат на магнитную пленку. Это событие считается важнейшей вехой в появлении цифровой фотографии. Появление “цифры” резко изменило сам подход к фото. И дело не только в том, что появилась возможность моментально смотреть результат съемки или делать неограниченное число кадров. Изменилась сама концепция фотографии. Именно про это мы и поговорим сегодня. Обсудим техническую реализацию цифровых камер, особенности их конструкции, затронем обработку. И, конечно же, уделим время вычислительной фотографии. Добро пожаловать в мир без пленок!

https://habr.com/ru/companies/beget/articles/987992/

#фото #цифровое_фото #фотография #CCD #вычислительная_фотография #full_frame #кроп #матрица #RAW #Photoshop

Цветовая вычислительная фотография. Часть 1: Теория цвета

Приветствую! Меня зовут Егор Ершов, я руковожу группой «Цветовая вычислительная фотография» в AIRI, а также заведую сектором репродукции и синтеза цвета ИППИ РАН. Область моих научных интересов касается способов регистрации и обработки изображений, что в той или иной степени касается любого человека, кто хоть раз пользовался камерой, монитором или проектором. Вычислительная фотография лежит на стыке сразу нескольких дисциплин: физики, физиологии, компьютерных наук. Из‑за этого в ней ещё много сложного, но вместе с тем интересного и неизвестного. Я подготовил полноценный курс по алгоритмам вычислительной фотографии для МФТИ и ВШЭ, но мне также хотелось бы поделиться со всеми желающими его материалами в текстовом формате. Этот курс посвящен как феномену цвета, механизмам его восприятия, исследованию зрительной системы человека, так и непосредственно алгоритмам цветовой вычислительной фотографии. Но в этой статье я бы хотел в общих чертах обрисовать проблему регистрации изображений, а также дать введение в теорию цвета, которая потребуется в дальнейших частях.

https://habr.com/ru/companies/airi/articles/901284/

#цвет #камера #камера_смартфона #обработка_изображений #теория_цвета #вычислительная_фотография

Цветовая вычислительная фотография. Часть 1: Теория цвета

Приветствую! Меня зовут Егор Ершов, я руковожу группой «Цветовая вычислительная фотография» в AIRI, а также заведую сектором репродукции и синтеза цвета ИППИ РАН. Область моих научных интересов касается способов регистрации и обработки изображений, что в той или иной степени касается любого человека, кто хоть раз пользовался камерой, монитором или проектором. Вычислительная фотография лежит на стыке сразу нескольких дисциплин: физики, физиологии, компьютерных наук. Из‑за этого в ней ещё много сложного, но вместе с тем интересного и неизвестного. Я подготовил полноценный курс по алгоритмам вычислительной фотографии для МФТИ и ВШЭ, но мне также хотелось бы поделиться со всеми желающими его материалами в текстовом формате. Этот курс посвящен как феномену цвета, механизмам его восприятия, исследованию зрительной системы человека, так и непосредственно алгоритмам цветовой вычислительной фотографии. Но в этой статье я бы хотел в общих чертах обрисовать проблему регистрации изображений, а также дать введение в теорию цвета, которая потребуется в дальнейших частях.

https://habr.com/ru/companies/airi/articles/901284/

#цвет #камера #камера_смартфона #обработка_изображений #теория_цвета #вычислительная_фотография

Цветовая вычислительная фотография. Часть 1: Теория цвета

Приветствую! Меня зовут Егор Ершов, я руковожу группой «Цветовая вычислительная фотография» в AIRI, а также заведую сектором репродукции и синтеза цвета ИППИ РАН. Область моих научных интересов касается способов регистрации и обработки изображений, что в той или иной степени касается любого человека, кто хоть раз пользовался камерой, монитором или проектором. Вычислительная фотография лежит на стыке сразу нескольких дисциплин: физики, физиологии, компьютерных наук. Из‑за этого в ней ещё много сложного, но вместе с тем интересного и неизвестного. Я подготовил полноценный курс по алгоритмам вычислительной фотографии для МФТИ и ВШЭ, но мне также хотелось бы поделиться со всеми желающими его материалами в текстовом формате. Этот курс посвящен как феномену цвета, механизмам его восприятия, исследованию зрительной системы человека, так и непосредственно алгоритмам цветовой вычислительной фотографии. Но в этой статье я бы хотел в общих чертах обрисовать проблему регистрации изображений, а также дать введение в теорию цвета, которая потребуется в дальнейших частях.

https://habr.com/ru/companies/airi/articles/901284/

#цвет #камера #камера_смартфона #обработка_изображений #теория_цвета #вычислительная_фотография

Вычислительная фотография как предчувствие: от фейковой Луны до смерти реальности

Введение: Оптический обман трудящихся Насмотревшись на фото в сетевых обзорах, я решил приобщиться к технологическому чуду и приобрел фотофлагман Vivo X200 Ultra. В рамках тестов поставил перед собой задачу, амбициозную и бессмысленную одновременно: снять Луну. В автоматическом режиме «Пейзаж» результат поражает: кратеры, тени, объем. Но стоило переключиться в Pro-режим (честный RAW, без вмешательства алгоритмов), как магия исчезла. Вместо небесного тела — мутное пятно. Мы давно знаем, что Samsung, начиная с модели S22 Ultra (и другие производители), «дорисовывают» Луну. Но давайте зададимся вопросом не моральным, а техническим: возможен ли такой снимок физически? Или мы окончательно перешли в эру, где изображение не обязано коррелировать с реальностью?

https://habr.com/ru/articles/991316/

#ar #симулякры #вычислительная_фотография #постмодерн #фотография

RAW — единственный оригинал фотографии. Всё остальное постобработка

В эпоху смартфонов искусство фотографии почти утеряно. Фотография стала массовым явлением, а большинство современных фотографов-любителей даже не слышали о таких понятиях, как выдержка или баланс белого. И не знают, какие манипуляции цифровая камера в смартфоне выполняет, чтобы сгенерировать картинку. Да, именно сгенерировать , потому что итоговый результат на экране кардинально отличается от того, что «видит» светочувствительный сенсор. В более профессиональных цифровых камерах и некоторых топовых смартфонах информация сохраняется в формате RAW — в виде значений яркости, снятых с матрицы. Это «цифровой негатив», который мы можем конвертировать в RGB и отредактировать как угодно, сохранив исходник. Вот где начинается искусство современного цифрового фотографа — в обработке RAW.

https://habr.com/ru/companies/ruvds/articles/1010432/

#вычислительная_фотография #формат_RAW #ПЗС #редакторы_RAW #цифровой_негатив #OpenRAW #предсказание_будущего #фмльтр_Байера #Darktable #ruvds_статьи

Lens Blur Fields: нейросетевая ФРТ на службе улучшения фотографий и идентификации камеры

Оптическое размытие или функция рассеяния точки — собирательное название для множества эффектов деградации изображения. В их числе — расфокусировка, дифракции и аберрации. Характер ФРТ крайне сложно калибровать, поскольку она меняется в зависимости от положения на сенсоре, настройки фокуса, расстояния до объекта и даже конкретной области на плоскости изображения. Поэтому любые попытки точно описать размытие реальной камеры сталкиваются с необходимостью измерять слишком большое количество параметров, что на практике выполнить почти невозможно. Метод Lens Blur Fields предлагает новое решение: использовать многослойные перцептроны, которые обучаются представлять ФРТ в виде непрерывной функции высокой размерности ( arXiv:2310.11535 ). Такая модель способна обобщать по всем параметрам сразу и восстанавливать плавные изменения ФРТ вместо того, чтобы хранить её в виде разрозненной таблицы замеров. В теории это значит, что метод Lens Blur Fields позволит не только сделать очередной красивый фильтр с боке, но и различать экземпляры камер по снимкам с них.

https://habr.com/ru/articles/947862/

#машинное_обучение #функция_рассеяния_точки #исследования #научные_работы #вычислительная_фотография #боке #смартфоны #фотографии_на_смартфоны #iPhone #Lytro

Lens Blur Fields: нейросетевая ФРТ на службе улучшения фотографий и идентификации камеры

Оптическое размытие или функция рассеяния точки — собирательное название для множества эффектов деградации изображения. В их числе — расфокусировка, дифракции и аберрации. Характер ФРТ крайне сложно калибровать, поскольку она меняется в зависимости от положения на сенсоре, настройки фокуса, расстояния до объекта и даже конкретной области на плоскости изображения. Поэтому любые попытки точно описать размытие реальной камеры сталкиваются с необходимостью измерять слишком большое количество параметров, что на практике выполнить почти невозможно. Метод Lens Blur Fields предлагает новое решение: использовать многослойные перцептроны, которые обучаются представлять ФРТ в виде непрерывной функции высокой размерности ( arXiv:2310.11535 ). Такая модель способна обобщать по всем параметрам сразу и восстанавливать плавные изменения ФРТ вместо того, чтобы хранить её в виде разрозненной таблицы замеров. В теории это значит, что метод Lens Blur Fields позволит не только сделать очередной красивый фильтр с боке, но и различать экземпляры камер по снимкам с них.

https://habr.com/ru/articles/947862/

#машинное_обучение #функция_рассеяния_точки #исследования #научные_работы #вычислительная_фотография #боке #смартфоны #фотографии_на_смартфоны #iPhone #Lytro

Lens Blur Fields: нейросетевая ФРТ на службе улучшения фотографий и идентификации камеры

Оптическое размытие или функция рассеяния точки — собирательное название для множества эффектов деградации изображения. В их числе — расфокусировка, дифракции и аберрации. Характер ФРТ крайне сложно калибровать, поскольку она меняется в зависимости от положения на сенсоре, настройки фокуса, расстояния до объекта и даже конкретной области на плоскости изображения. Поэтому любые попытки точно описать размытие реальной камеры сталкиваются с необходимостью измерять слишком большое количество параметров, что на практике выполнить почти невозможно. Метод Lens Blur Fields предлагает новое решение: использовать многослойные перцептроны, которые обучаются представлять ФРТ в виде непрерывной функции высокой размерности ( arXiv:2310.11535 ). Такая модель способна обобщать по всем параметрам сразу и восстанавливать плавные изменения ФРТ вместо того, чтобы хранить её в виде разрозненной таблицы замеров. В теории это значит, что метод Lens Blur Fields позволит не только сделать очередной красивый фильтр с боке, но и различать экземпляры камер по снимкам с них.

https://habr.com/ru/articles/947862/

#машинное_обучение #функция_рассеяния_точки #исследования #научные_работы #вычислительная_фотография #боке #смартфоны #фотографии_на_смартфоны #iPhone #Lytro