169 похожих чатов

Коллеги, есть теоретический вопрос по R. Почему unique() работает значительно быстрее

на отсортированном векторе?

17 ответов

24 просмотра

unique реализован на C, код в аттаче. Но даже глядя в код сложно сказать как это будет именно в машине — в зависимости от настроек компилятора могут включиться simd инструкции. В целом, это общее правило — сортированные данные получают новое свойство — отношение между элементами, являющиеся свойством позиции. Сортировка — это базовый алгоритм, не имеющий никакого отношения к R. Алгоритмов сортировки существует масса.

Igor-Yegin Автор вопроса
Andrew Panov
2600 строк, мама мия!!

И что удивляет? Там все достаточно прозрачно. + не один unique /* .Internal( duplicated(x, incomparables, fromLast, nmax)) [op=0] .Internal( unique(x, incomparables, fromLast, nmax)) [op=1] .Internal(anyDuplicated(x, incomparables, fromLast )) [op=2] */ + параметризация + разные типы + всякие юникоды + построение хешей... Это снаружи выглядит как одна строчка. а потом начинается R vs Python...

Что хорошо в R? Есть вопрос по функционалу — открываем исходники, получаем ответ. Все открыто, главное читать уметь. Гении могут сделать свои полезные мегадобавки.

Serg Gini
Вроде везде так

объясните происходящее R 2^65 #> [1] 3.689349e+19 as.integer(2^65) #> [1] NA #> Warning message: #> NAs introduced by coercion to integer range python print(int(2 ** 66)) 73786976294838206464

Igor-Yegin Автор вопроса

Я поэтому и спросил здесь, потому что не был сил и времени читать самому

Serg Gini
Вроде правильно посчитал)

что именно правильно? какова битность чисел?

Ilya Shutov
что именно правильно? какова битность чисел?

В питоне другой подход к арифметике - там считай везде big int

Serg Gini
В питоне другой подход к арифметике - там считай в...

что такое big int? что значит "считай"? если непонятно как ведет себя инструмент — с таким только на скамейке сидеть, в люди показываться нельзя.

Ilya Shutov
объясните происходящее R 2^65 #> [1] 3.689349e+19...

Я с подобным столкнулся в паре С - Питон. Выяснил, что в Питоне "арифметика произвольной точности" или как-то похоже называется. И получается, что по факту нет ограничения на число типа int. Зато в Си этот счётчик на int прокрутился по кругу без ошибки и начал считать сначала.

Ilya Shutov
unique реализован на C, код в аттаче. Но даже гляд...

Тут на помощь придёт Кнут и Кормен, Алгоритмы сортировки

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта