БЛОГ / КОММЕНТАРИИ

Подделывает ли смартфон Samsung Луну?

гаджеты фотография

09.03.2023 10:00

Комментарии 88

Современные технологии суперразрешения (при помощи нейросетей) делают нечто среднее между показыванием изображения как есть и вклеиванием заготовки Луны. Вполне вероятно, что они используются и, в таком случае, может иметь место определённое "читерство", если опция неотключаемая.

Dims12

12.03.23 23:45

0 0

На хабре habr.com
Профильные эксперты пояснили в ответах на Reddit, что для фотографии Луны нужно отключить в смартфоне Samsung опцию в настройках камеры под названием «Оптимизация сцены», чтобы Луна получалась в реальном видео, без доработки деталей с помощью ИИ.

Ivan1999

12.03.23 20:54

0 1

Свеженькое исследование - www.reddit.com

таки подделывает.

lexey111

12.03.23 18:24

0 1

Cобственноручно снял вчера около 11 вечера на S22ultra.
Не догадался снять поведение самого телефона надругой аппарат.

Поведение такое себе, практически полностью отметает версии "вот такие у нас крутые камеры".
1. Срабатывает только на 100х увеличении и на еденичку меньше (а то!)
2. Луна должна попасть в центр экрана. (При большом увеличении SGS рисует дополнительный визор, который помагает коректировать положение смартфона). Если Луна не в центре это просто большой яркий шарик.
3. Как только объект попадает в фокус, он с задержкой в пол секунды или даже меньше, "магически" првращается в глобус Луны и далее остается таковым, даже если телефон слегка гуляет.
4. Если повернуть телефон, так что объект выйдет из кадра, магия исчезает и надо начинать все сначала.
5. Никакие объекты не мешают опознанию и "фокусировке". В кадре вполне себе реальная ветка дерева именно такая как она есть в жизни.
6. Сам объект плавает, в комментарии - еще один кадр. То же место, то же время, вот только Луна почему-то "пергаментная"

Мое заключение (Не гинеколог, но посмотреть могу):
- очень маленькая нейросеть узкого преминения. Вполне может жить прямо в самом чипе камеры, опазновать Луну по набору параметров (размер относительно кадра, яркость относительно фона, градации светимости, предположительная фаза луны в зависимости от даты/времени/часового пояса, показание акселометров).
- Картинка не то чтобы заменяется, а скорее творчески вытягивается/докрашивается.

Круто чо.

mmikhail

10.03.23 21:42

0 2

Фазу луны проще "снять" с формы светящегося предмета. Дата время тут скорее для корректировки тех самых семи градусов сдвига Луны, да и она может быть совсем не обязательна, слишком уж не заметна разница.

mmikhail

xoxol

10.03.23 23:33

0 0

предположительная фаза луны в зависимости от даты/времени/часового пояса, показание акселометров).

а если перевести дату на недельку, и время подкорректировать соответственно положению Луны на ту дату?
Интересно, фазу сдвинет или честно нарисует?
Но это нужно заранее включить режим полёта, перевести часы и календарь и, для верности, перезагрузиться.

xoxol

mmikhail

10.03.23 22:11

0 0

mmikhail

10.03.23 21:43

0 0

Тю, Луна...а звёзды?
Canon PowerShot A450, выставил выдержку, автоматический спуск, положил на землю.

joit

09.03.23 20:01

0 2

Ага, щаззз...Alpha Centauri and its surroundings captured by the Digitized Sky Survey 2 telescope in the Atacama Desert, Chile. Credit: ESO/Digitized Sky Survey 2 Acknowledgement: Davide De Martin

Что ж вам, фото Леонарда Хофстедера каждый раз прикладывать? 😉

Bаsil IV

joit

10.03.23 07:55

0 3

С какого расстояния снимали?

Примерно 4,5 световых года. 😉

Bаsil IV

aldor

10.03.23 07:54

0 2

Телескопом Digitized Sky Survey 2 в пустыне Атакама, Чили.
Приколист...

joit

aldor

10.03.23 07:42

0 0

Ага, щаззз...
Alpha Centauri and its surroundings captured by the Digitized Sky Survey 2 telescope in the Atacama Desert, Chile. Credit: ESO/Digitized Sky Survey 2 Acknowledgement: Davide De Martin

www.google.com

joit

Bаsil IV

10.03.23 07:40

0 0

С какого расстояния снимали?

aldor

Bаsil IV

10.03.23 01:27

0 2

Альфа Центавра, снятая на Huawei.

Bаsil IV

joit

09.03.23 22:37

1 1

Смартфон не хранит миллионы изображений луны и прочее.

1) Но там есть нейросеть, которая улучшает качество изображения. Эта нейросеть тренировалась на миллионах изображений, среди них было очень много изображений луны. А во время тренировки изображения подвергаются аугментации - вырезаются кусочки, к кусочкам применяются поворот, масштабирование и пр. Это еще больше увеличивает разнообразие изображений с которыми сталкивалась нейросеть. Таким образом нейросеть ну очень много изображений луны видела определенно точно, учитывая популярность этого объекта для фотографии.
2) Скорее всего там сверточная нейросеть (может конечно и более новая на визуальных трансформерах, но принцип там похожий). Сверточные сети по сути сравнивают в разных масштабах паттерны и находят характерные особенности. Таким образом там содержатся в свертках и кусочки луны, и формы носа и пр. и пр.
3) Обмануть нейросеть чесноком не получится - это может быть похоже только для человека, для нейросети это два совершенно разных объекта.

На этом же признаки работают сети увеличения разрешения, раскрашивания - они запоминают информацию о том, как устроен мир, распознают паттерн на реальном изображении и изменяют изображения привнося знания реального мира.

А вот если в обучающую выборку добавить непоравданно большое количество изображений луны, то луну она будет фотографировать очень хорошо.

masepi

09.03.23 19:54

1 9

фотографировать

"фотографировать"

Ivkyd

masepi

09.03.23 20:53

0 1

Да Луна сама-то апще голограмма, чего уж спорить о самсунге! )

SGR

09.03.23 18:00

0 1

Вот и Юрий Лоза говорит то же самое! 😂

Рекорд Надоев

SGR

09.03.23 18:24

0 1

Луна всегда повернута к Земле одной стороной потому нужна только одна подробная фотка полной Луны, а там с учетом координат и времени высчитывается фаза и убирается лишнее. AI вносит вносит поправки на цвет, свет, дымку, облачность и демонстрируется приличное фото. ИМХО вполне такое может быть . Фотка заходящего Солнца в Таиланде вчера. S21 Ultra

Esher

09.03.23 17:08

2 3

Я думал тоже луна получится. Ан нет...

Имею право

Esher

09.03.23 19:06

0 0

Луна всегда повернута к Земле одной стороной

Если либрации, с амплитудой около 7 градусов, что довольно прилично.

Smog on the water

Esher

09.03.23 17:16

0 3

А что все так любят фотографировать Луну? Зачем только из-за нее так заморачиваться?

Darze

09.03.23 16:50

1 0

И все фото в полнолуние, а там и не такое причудится 😁

Vblshnya

09.03.23 14:45

0 1

Дифракционный предел для объектива 5 мм около полминуты дуги т е вся Луна по диаметру около 60 пикселей. Если разрешение явно больше, стоит задуматься

Zoo

09.03.23 14:00

1 2

Доверять экспертности автора по имени Raymond Wong, неспособного просто сделать фото Луны отличным оборудованием, я бы не стал.

AshShor

09.03.23 13:33

0 9

Интересно это будет тогда, когда фотография будет сделана телефоном "с рук" безо всякой фиксации аппарата.
В идеале, утром, с похмелья. )))

IlyaSh

09.03.23 12:41

0 2

Снято с рук безо всякой фиксации аппарата. Mi 11 Ultra. Но вечером и трезвым.

Подтверждаю. Вот с аналогичного устройства, с рук, снято вечером и утром:

Алекс У

bahamapapa

09.03.23 15:36

0 0

Но вечером и трезвым.

Очень сложные условия съёмки 😄

Michaell

bahamapapa

09.03.23 15:20

0 3

Снято с рук безо всякой фиксации аппарата. Mi 11 Ultra. Но вечером и трезвым.

bahamapapa

IlyaSh

09.03.23 12:52

0 1

Похоже, народ взволновался вовсе не какими-то там смартфонами с ИИ, а дрянной фоткой с телевика на сони.

TimeWaster

09.03.23 12:28

0 10

на сколько

"насколько"

Рекорд Надоев

Lepkovskiy

09.03.23 23:47

0 0

Это, очевидно, чтоб лишний раз наглядно продемонстрировать, на сколько же прекрасно снимают современные телефоны по сравнению с бесполезными вымирающими фотоаппаратами.

Lepkovskiy

TimeWaster

09.03.23 18:44

0 3

Да пофиг на Луну, пусть научатся женские лица подставлять 😄 Технология описана у Н. Носова в "Незнайке на воздушном шаре".

igori-san°

09.03.23 11:47

0 0

Мне кажется, наиболее универсальным решением было бы все-таки натренировать модель ML на работу с изображениями а-ля "Луна в кадре". В этом случае и никаких изображений Луны в чистом виде хранить не надо, и решение будет работать с приемлемым результатом в других похожих случаях.

Smog on the water

09.03.23 11:19

0 2

Ну как бы да, телефон финальное изображение же не показывается при съемке. А при сохранении уже нейронка может дорисовать узнаваемые объекты.

DS^

Smog on the water

09.03.23 20:10

0 0

Я проверял как-то этот расхожий баян, отключил в телефоне инет и GPS, снимал с опоры в ясную ночь и параллельно смотрел в телескоп с 60-кратным увеличением - никакой вклейки замечено не было.

Pistolero_Z

09.03.23 11:10

0 0

И с тех пор верите, что у вас в телефоне эквивалент 60и кратного телескопа?
Ну,.. Отлично. Теперь попробуйте фотку, ну, к примеру, Сатурна телефончиком сделать, чтобы так же, как в телескопе получилось...

Goga

Pistolero_Z

09.03.23 15:34

2 2

SONY A7RIII + 100-400GM + 1.4X Teleconverter, 560 mm, 1/320 sec, f/8, ISO 100
Дело не в телефоне, а кривых руках "Sony A7R III с телевиком 600 мм".

Konstantinus

09.03.23 11:07

0 35

Вот да, я тоже офигел от этого фото. У меня на Canon 200D с максимально бюджетным зумом на 250 мм получилось как-то так в свое время.

Shmu-Hadron

Konstantinus

11.03.23 00:35

0 1

Дело не в телефоне, а кривых руках

Я тоже удивился, увидев этот мутный блин, снятый на отличную камеру с отличным объективом.

Regs

Konstantinus

09.03.23 11:45

0 14

Смартфон хранит миллионы изображений Луны в зависимости от географических координат, также он хранит изображения различных фаз Луны для этих координат? Смешно. А всякие помехи, а облака?

Достаточно текстуры той части Луны, которая видна с Земли, причём в не очень высоком разрешении. Координаты снимающего известны, дата известна. Наложить сохранённую текстуру на реальный снимок с учётом всех теней и помех — элементарная же задача.

Bаsil IV

09.03.23 11:04

1 8

С момента как прошел слух, что луна не настоящая, луну на телефон стали снимать чуть не в каждом обзоре.

да, собственно, уже нашли - habr.com

Goga

aldor

12.03.23 19:10

0 0

а они уже ищут?

С момента как прошел слух, что луна не настоящая, луну на телефон стали снимать чуть не в каждом обзоре.

aldor

Goga

12.03.23 16:43

0 0

Причем с учетом количества людей, которые специально будут его искать, найдется максимум через неделю.

а они уже ищут?

Процедурная генерация - oldest trick in the book.

причём здесь процедурная генерация? Дал-и и миджорни - блидинг эдж нейронауки.

Goga

aldor

11.03.23 23:09

0 0

Причем с учетом количества людей, которые специально будут его искать, найдется максимум через неделю.

а они уже ищут?

Goga

aldor

11.03.23 23:06

0 0

это генеративная сеть

Процедурная генерация - oldest trick in the book.

"улучшить блин до Луны" существенно проще.

Тогда рано или поздно найдется блин, который будет улучшен до Луны, изначально Луной не являясь. Причем с учетом количества людей, которые специально будут его искать, найдется максимум через неделю.

aldor

Goga

11.03.23 21:58

0 0

Нейронный фильтр-улучшайзер построит вам в лучшем случае "какую-то поверхность, напоминающую лунную".

это смотря как сеточку натренировать. "Какую-то поверхность" как раз сложнее - это генеративная сеть, а "улучшить блин до Луны" существенно проще.

Goga

aldor

11.03.23 14:12

0 0

а накладывать на снятый нерезкий блин нейронный фильтр-улучшайзер

Нейронный фильтр-улучшайзер построит вам в лучшем случае "какую-то поверхность, напоминающую лунную". А это Луна, там каждая ямка больше ста метров известна поименно.

aldor

Goga

10.03.23 21:24

0 0

достаточно видимой стороны в более-менее среднем разрешении. Всё.

Не всё. Потому что в зависимости от угла падения солнечных лучей поверхность Луны выглядит очень по-разному. Особенно в районе терминатора, где освещение горных пиков и стен кратеров можно подделать, только построив 3D модель Луны.

aldor

Bаsil IV

10.03.23 21:22

0 0

не вклеивать Луну из огромной базы данных

Почему из огромной-то? Опять же: достаточно видимой стороны в более-менее среднем разрешении. Всё.

Bаsil IV

Goga

10.03.23 08:55

0 0

Тогда уж проще GPS не выключать,

жпс жрёт, собака, много.
На самом деле, конечно же, нет необходимости в такой паранойе и очевидное решение - не вклеивать Луну из огромной базы данных, а накладывать на снятый нерезкий блин нейронный фильтр-улучшайзер. Решение и по памяти небольшое и не требует танцев с бубном вокруг часов-координат-наклонов.

Goga

aldor

10.03.23 08:39

0 0

Но не знаю насколько параноидальны разработчики 😄

Тогда уж проще GPS не выключать, а просто сделать вид, что выключил.

aldor

Goga

10.03.23 01:24

0 0

Хм, как бы поступил я на месте разработчиков? 😄

Не вые**вался и использовал дату и время, установленные вручную. Потому что все равно каждый второй въедливый задрот, который включит авиарежим перед трансатлантическим перелетом, сходя с трапа первым делом снимет луну, чтобы доказать, что разработчики не на того напали.

aldor

Bаsil IV

10.03.23 01:20

0 2

Включите авиарежим, выключите GPS, и вот уже телефону "известны" исключительно та дата и время, которые вы ему вручную установите.

У телефона есть дата и время, полученные пять мирут назад от сети, и дата и время, только что выставленные вручную при включенном авиарежиме. Хм, как бы поступил я на месте разработчиков? 😄

Bаsil IV

aldor

09.03.23 22:40

0 1

и вот уже телефону "известны"

я бы делал так - в железном rtc хранил "доверенное" время, полученное из жпс или сотовой вышки, в все юзерские установки - как дельту относительно доверенного источника. Тогда образец будет существовать с хорошей точностью несколько месяцев. Но не знаю насколько параноидальны разработчики 😄

Goga

aldor

09.03.23 22:14

0 3

Дата и время известны всегда

aldor

Bаsil IV

09.03.23 16:29

1 1

Откуда они известны? Я снимал на huawei P30 pro в авиарежиме, со всеми выключенными внешними передатчиками. Из разных точек. Ничего не меняется вообще, луна такая же четкая и глазами видна ровно также.

Дата и время известны всегда. Гироскоп тоже есть. Телефон всегда знает, где вы (хотя бы примерно, точности плюс-минус сто километров вполне достаточно), какая сейчас фаза и куда направили камеру. Вряд ли вы после включения авиарежима перемещались на десятки тысяч километров, чтобы заметить разницу и серьёзно сбить с толку электронику.

Я на всякий случай подчеркну, что не утверждаю, что телефон делает именно так. Просто я не вижу больших проблем действительно так сделать. Учитывая, что при демонстрации супер-мега-зумов нам всегда показывают луну, самый простой объект для электронной ретуши, как минимум, сомнения обоснованы.

Bаsil IV

mrdoggy

09.03.23 13:33

2 6

mrdoggy

Bаsil IV

09.03.23 13:23

1 0

Ну и я еще снова поэкспериментирую с Луной

Ты там осторожнее, Алекс! 😄

Humanoid

09.03.23 10:59

0 6

А почему из разных уголков Земли вдруг Луна выглядит по-разному? Плоская Земля и плоская Луна - как-будто с одного ковра фотографируешь другой ковер. Не вижу причин, по которой компании не смогли бы вмонтировать статичное круглое изображение в ИИ.

Hipster

09.03.23 10:59

3 2

Странное исследование, на мой взгляд. Камера не приняла зубчик чеснка за Луну как доказательство, что телефон не дорисовывает картинку - серьезно? Чего все так зациклились именно на Луне? Нарисуйсте случайные патерны на куске фанеры, сфоткайте его с такого расстояния, при котором картинка займет столько же пикселей как Луна и посмотрите, что там получится на выходе. Вангую, что совсем не то, что с Луной.

Opiskelija

09.03.23 10:57

0 12

А почему нельзя такую луну нарисовать-то? Телефон зная гепопозицию, дату и др. данные места съемки может сгенерировать подходящее изображение луны.

DS^

09.03.23 10:55

0 4

Вычтет провода и облака из луны, как фильтр наложения в фотошопе. Позицию луны можно сверять по гироскопам, компасу и GPS чтобы понять что камера у вас направлена

Чем только люди не заморочатся для создания фото, лишь бы просто не сфотографировать)

TimeWaster

DS^

09.03.23 14:25

0 5

Вычтет провода и облака из луны, как фильтр наложения в фотошопе. Позицию луны можно сверять по гироскопам, компасу и GPS чтобы понять что камера у вас направлена на луну. Ну и камера всё таки что-то узнаваемое должны передать. При сложности определения можно не накладывать луну, а снимать как есть.
Это в теории, естественно. )

DS^

BOFH

09.03.23 12:07

0 3

Провода, мошек и облака, закрывающие луну, он тоже из данных места съемки возьмет?

А камера ему на что? 😄

Keeper

BOFH

09.03.23 11:24

0 7

Провода, мошек и облака, закрывающие луну, он тоже из данных места съемки возьмет?
А если там фонарь примерно в месте предполагаемого расположения луны?

BOFH

DS^

09.03.23 11:18

1 0

Луна из разных уголков Земли смотрится по-разному

Смотрится? Именно смотрится? То есть глазом можно заметить разницу?

Пафнутий Залипако

09.03.23 10:50

6 2

Луна из разных уголков Земли смотрится по-разному

Расстояние между Луной и Землей составляет более 100 лунных радиусов. Можно посчитать это точно, но навскидку мне кажется, что разрешения смартфонной оптики элементарно недостаточно, чтобы выявить разницу между двумя фотографиями Луны, сделанных одновременно из двух диаметрально противоположных точек Земли.

P.S. Здесь нужно принять во внимание, что база в виде диаметра Земли значительно больше, и здесь уже соотношение не 1/100, а ближе к 4/100, что уже достаточно много. Поэтому, лучше все-таки посчитать.

Smog on the water

09.03.23 10:19

2 3

Кстати, я таки посмотрел суточную либрацию, и если сравнивать взгляд двух диаметрально противоположных наблюдателей, то это соответствует повороту Луны на величину около 1 градуса. С одной стороны, хоть такое смещение и весьма мало, но в камеру смартфона все-таки будет заметно. С другой стороны, из-за нехватки разрешающей способности камеры, края лунного диска будут оставаться кашей из размазанных пикселей, и повороты будут в большей степени похожи на смещение плоской картинки из стороны в сторону, как если бы Луна была плоской с разретушированными краями.
Ну и в конечном итоге, величина суточной либрации оказывается в 7 раз меньше, чем месячные по широте и долготе. Так что мы в любом случае можем говорить о том, что исходное утверждение про "смотрится по-разному" было неверным.

Smog on the water

an_private

09.03.23 16:04

2 2

А Луна видна одновременно из двух диаметрально противоположных точек Земли?

Строго говоря, конечно нет. Но я несколько упростил, предполагая Луну у горизонта и отсутствие необходимости прям таки в строгой синхронизации. Нам же тут важнее, какова будет максимальная разница в угле зрения. В принципе, можем даже считать, что фотографируют с двух низкоорбитальных спутников, которые крутятся вокруг Земли в плоскости лунной орбиты - лишние 100км тут особо разницы не сделают.

Smog on the water

Witalij

09.03.23 10:45

1 4

Конечно, так можно еще и либрацию Луны учитывать, вообще никаких проблем.

Smog on the water

an_private

09.03.23 10:43

0 2

двумя фотографиями Луны, сделанных одновременно из двух диаметрально противоположных точек Земли.

А Луна видна одновременно из двух диаметрально противоположных точек Земли?
Мне почему-то кажется, что Земля будет закрывать Луну в одной из точек.

Witalij

Smog on the water

09.03.23 10:42

0 1

По большому счету ничего не мешает запихнуть в память не плоскую фотографию, а проекцию на шар и крутить её до совпадения с реальностью (или просто просчитать - как луна будет выглядеть из данных координат в данное время суток и повернуть её на нужный угол).

an_private

Smog on the water

09.03.23 10:41

0 8

и та же Луна, снятая на Sony A7R III с телевиком 600 мм.

А чего так нерезко? Или с рук?
Я вот баловался с 200мм когда-то на APS-C cо штатива - и то резче вышло (это уже пережатый фэйсбуком вариант)

Michaell

09.03.23 10:14

0 8

У меня вот есть пример аж 2006 года. На древнюю мыльницу (Canon PowerShot A620), прислоненную к китайской подзорной трубе за три копейки.

Lepkovskiy

Michaell

09.03.23 12:43

0 7

Резкость мимо или облачность там была. Я на 300 / 350 мм "сруки" Луны тоже без проблем делал и на кроп и на ФФ сони, она же яркая + стаб. А вот резкость да... надо внимательно следить, куда попадает.

Trilobyte

Michaell

09.03.23 12:11

0 0

Ivkyd

Michaell

09.03.23 11:57

0 2

Какой еще Терминатор? О чем вы? 😄

Наверное, другая модель

BOFH

fuksito

09.03.23 11:13

1 2

Какой еще Терминатор? О чем вы? 😄

fuksito

IB_temp

09.03.23 10:53

2 1

Я тоже снимал Луну на Соню кроп 6500 с обьекивом 300 мм. И получалось лучше.

Филин

Michaell

09.03.23 10:37

0 0

Терминатор получился шикарно!
День выбрал здорово

IB_temp

fuksito

09.03.23 10:35

0 7

Тоже показалось странным. Видимо с рук и еще это кроп с большего кадра. Видимо чтобы телефон был на уровне с DSLR в ревью.

Для примера нормальный DSLR прикрепляю

NIKON Z 7 + 600mm f/4 + 1.4x TC @ 850mm, ISO 64, 1/125, f/6.3