Hello everyone, ребят, к какому уровню сложности может относиться задачка

по отделению облаков от неба для видео? (от 1 до 10,)
*в условиях смены времени суток
*при неизменной точке съёмки
*(материалов для обучения сотни часов)
по первым гуглам, или диалогу с Claude не нашли опенсорсов на эту тему, м.б. всё проще, я пока нуб
*на выходе просто видео чб маска

если будет что сказать на эту тему - пишите, любому отклику буду рад, я пока только на берегу пытаюсь осмыслить -- куда дальше гуглить. С уважением, спасибо

)

два случайных видео примера + чб маска (это как желанный результат, только фотошопкастом.png, а не backgroundsubtraction.mov))

очень сложная история, прорабатывали с ГосГидрометом. нужно учитывать, что облака могут быть на разных высотах и для этого нужно точное определение их положения. + вопросы световых искажений. Есть атлас по облакам, в интернете можно поискать, там порядка 1000 страниц на чтение. небольшой пример. https://meteo-geofak.narod.ru/clouds/glava1.htm

Да-да, я видел даже чьи-то phd по алгоритмам классификации обалков(вид с земли, есть ещё вид со спутников, но это другая задача) от 21 года, и детектить их стало осбенно трудно, когда я понял что в моменте они светлее неба, а через Хминут небо светлее чем они, вооот. Вы всё круто вы пишите мне, но я подумал (ща не смейтесь pojzlysta): - а нельзя ли сделать допустим динамический Clean Plate? Просто вручную скрафтить гариент похожий на чистое небо длинной от 00.00 до 23.59 (на базе цветов и светол предыдущей недели, глазами пипеткой измерять, отрисовать и смонтиовать в видео, во всяком случае в рамках недели-месяца, время дня и ночи не сильно изменится, а уже на май новый рисовать, если актуально) - ну а всё что имеет движение сразу классифицировать как облока - плюс на посте м.б. вычет "дымки" какое-то существует джаст импровизация

А нужно в реальном времени или, например, прогнать накопленное за день?

в основном прогноз строиться на перспективу с учетом накопленных "знаний", типа завтра утром будет дождь.

я думаю попросят рилтайм в итоге, но там и темпы движения облаков "1 пиксель в 30 секунд", это не казалось проблемой, да и лаг в пару минут не проблема в данном случае

А детектить тоже по вебкамере кам-вхорщицы?

Мне кажется что завтра будет дождь все же лучше покажет метеостанция 🤔

это обсуждаемо, но всё равно я выше 4к "типа вебки" не получу на выходе (скорее всего) ps понимать бы ещё что просить и почему

https://www.semanticscholar.org/paper/Ground-Based-Cloud-Detection-Using-Automatic-Graph-Liu-Zhang/28edd36e888b31da6985a27c2b20a4c135d05491 Можно тут что-то найдется

мне нейронка совала эту работу в списке, я тогда дилетантски подумал что "ну какой 15-й год..", сейчас понимаю, что и это не осмысляю, м.б. есть что-то для нубов ещё догуглю и вернусь к ней же

Там внизу есть цитирования из других работ, более свежих.

Когда уже люди поймут, что не в пикселях дело?

все правильно, важна "жирность пикселя" и матрица. Можно для примера взять камеру "мыльницу" и проф. камеру того-же разрешения, разницы будет очень сильной.

Да и не только в этом дело

там сотни аргументов :) все от матрицы зависит в любом случае.

А об интерфейсе почему-то тоже никто особо не задцмывается