169 похожих чатов

Я напишу про задачу. Она под жестоким NDA, но мы

же все здесь коллеги?
Есть запись с лазера, который фиксирует движение (или не-движение) бактерий. Файлы огромные - 700+ мегабайт восьмизначных интегеров на одну запись. Предположение - если краказябры не двигаются, фоновый шум дает больше нормальности, чем если они двигаются. Данные очень шумные, да. Это неплохо совпадало с контролем, более 50%, во всяком случае.

6 ответов

18 просмотров

я не очень понимаю задачу, честно говоря может, вам проще какую бинарную штуку типа "двигается / не двигается"? и тогда тут проверка на нормальность не нужна или критерий "не двигается" очень неявный?

Evgeny-Vlasov Автор вопроса
Philipp Upravitelev
я не очень понимаю задачу, честно говоря может, ва...

Он ппц какой неявный, в этом-то и проблема. Нам и нужно было обнаружить - двигается или нет.

Тестов масса, для некоторых из них есть обязательная презумпция нормальности данных, если данные не нормальные то и тест может неточно считать свои тест статистики типа t-value, chi^2 или F Ну вот и балансируй что лучше: проверять что твой выбранный тест хорошо может сделать «замер» на этих данных основываясь на нормальности или стоит поискать другой тест который может более точно свои тест статистики посчитать на основании данных которые у тебя есть. Это всё блин искусство уже Комментарий чудика с реддита бредовый потому что это все в конечном счёте относительно, как и выбор Альфы и соотношения ошибки типа 1 и типа 2. Сказать что в этом вопросе есть однозначность и есть сама ошибка мне кажется

Ivan K
Тестов масса, для некоторых из них есть обязательн...

плюсую, выбор метода и анализ распределения - это всегда творческая часть работы аналитика, нет жестких и однозначных критериев

Evgeny Vlasov
Он ппц какой неявный, в этом-то и проблема. Нам и ...

Можно попробовать обучить нейросетку аутоэнкодер на шуме (где точно нет бактерий или они дохлые), а затем погонять с живыми, в стиле детекции аномалий

Evgeny-Vlasov Автор вопроса
Mr.britva
Можно попробовать обучить нейросетку аутоэнкодер н...

Я думал об этом, но я на том проекте был простой кодопис на фрилансе, а мой профессор любит гуд олд статистикс. Сейчас они так и делают, наверняка. Это было несколько лет назад, тогда нейросети были не так на слуху, и удобных инструментов типа тензорфло 2.0 еще не было. Да и главная задача была получить следующий раунд, для чего быстрый грязный хак был то что надо :)

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта