169 похожих чатов

На самом деле со стороны очень захватывающая штука. Не знаю

как каждый день этим заниматься, но когда читаешь про все эти эмбеддинги, хвост встает.

Как, например, понять что значит произвольное слово, проанализировав кучу документов? Всё довольно просто - достаточно посмотреть, с кем оно тусуется. Например, "линукс", "ядро", "прыщи". Или "пхп", "анскилл", "неудачник". Туда-сюда, получается выделить синонимы, то слово, которое повторяется чаще всего ставишь главным синонимом, остальные "меряешь" им - например, "джун" почти всегда "нищеброд", у него допустим вес в 0.75 нищеброда, но не каждый нищеброд джун, поэтму сам нищеброд это только 0.1 джуна.

Но стоп, какие синонимы, если в тексте у нас есть склонения спряжения опечатки? Всё просто: надо привести слово к исходной форме. Что мы делаем? Да втупую отрезаем окончание. Яблоки, яблоко, яблоком - да поебать, "яблок" и всё. Короче, запускаешь спарк, работадель платит штуку баксов за пятнадцать минут серверов, необходимых для твоего оружия возмездия, хуяк - "видел" и "вижу" не шмогли объединиться, реколл и пресижен говно. Но ты все равно это заливаешь как есть, а сам читаешь про леммаизацию да качаешь pymorphy, пока никто не узнал что ты штуку баксов за просто так спалил.

А потом хуяк и короче феминитивы пошли. Не кодер, а кодерка. Чем они различаются? Кодерка короче всё то же самое, только по женским штукам угорает. Все весы одинаковые, только гендер в противоположную сторону ушел. И ты такой эврика! Надеваешь свои солнцезащитные очки, берешь снова этот датасет, выкидываешь гендер, еще больше синонимов! А потом просто играешься, переворачивая гендер у слов и прибавляя возможных опций регистрации у фейсбука.

1 ответов

4 просмотра

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта