Битрикс для разработчиков
Чат экстремального погром...
Qt
symfony
Ansible
Unity Engine: вопрос - от...
Nuxt.js | Vue SSR
Боты на Telegraf
Data Science Chat
Android Architecture
QA — русскоговорящее сооб...
DBA - русскоговорящее соо...
Tarantool
Unreal Engine
☁️ AWS_RU
Blender_ru: вопрос-ответ.
MongoDB Russian
Yandex Cloud - Официальны...
Git
Big Data Science :: AI / ...
pro.kafka
3ds Max
DevsHelper
1C
Вокруг да около Zigbee
Android Declarative
freebsd_ru
Atlassian Community - Rus...
Чат про Fusion 360 и 3D
ru_gitlab
OctoberCMS
Godot Engine (Russian)
MySQL
Yii Framework 2
Data Engineers
Чат Tableau
Cinema 4D
Software Design/Architect...
Evolution CMS
Odoo talks & fun
pro.buildsystems
Webpack — русскоговорящее...
Yii Framework 3
QA juniors
RUSCADASEC community: Киб...
ru_hashicorp
Grafana Loki
VictoriaMetrics_ru
Google Cloud Platform_ru
.NET Group
DevSecOps - русскоговорящ...
![Netbeans [RU]](https://image.telq.org/channel_avatar_1102508152_467588515831589735_mini.jpeg){kind=avatar}
Netbeans [RU]
А как Спарк понимает как делить данные между нодами?
4 ответов
18 просмотров
В вашем случае если вы jdbc коннектором пользуетесь, там можно настроить количество сплитов, чтобы параллельно вычитывало. Но даже если вы одним воркером все делаете, по памяти упасть не должно (если вы условно дамп в паркет делаете) - там все будет на итераторах с буфферизацией и все 32 гигабайта вам не нужно никогда в памяти метериализовывать
Niyazi
Garagashli
Автор вопроса
Artem
В вашем случае если вы jdbc коннектором пользуетес...
В вашем случае если вы jdbc коннектором пользуетес...
я думал при записи происходит полная материализация
Mikhail Kuznetsov
я думал при записи происходит полная материализаци...
я думал при записи происходит полная материализаци...
В памяти? А зачем? Записали одну row group, сбросили буффер и дальше поехали
Похожие вопросы
Обсуждают сегодня
Всем привет. Нужна платная консультация от тех, кто сталкивался с октябрём в кластере или шарит оч хорошо в цмс.
Проблема следующая: после переноса в кластер октябрь начал ...
wl
Добрый день, не подскажите, если в OC-V3 поменять страндартную директорию /storage/ на /storage2/ - не будет сильно много проблем ?
Max Dubovsky
'frakturBold' => ['𝖆', '𝖇', '𝖈', '𝖉', '𝖊', '𝖋', '𝖌', '𝖍', '𝖎', '𝖏', '𝖐', '𝖑', '𝖒', '𝖓', '𝖔', '𝖕', '𝖖', '𝖗', '𝖘', '𝖙', '𝖚', '𝖛', '𝖜', '𝖝', '𝖞', '𝖟', '𝕬', '𝕭', '𝕮', '𝕯'...
Roma
а я честно сказать не понимаю - нахуя идти учиться на вышку или еще куда-либо и при этом нихуя не делать, типа зачем ? просто корку получить, а нахуй она нужна тогда ?
Eugene Неелов
Каким то образом можно определить ширину экрана пользователя перед загрузкой partial-а?
Надо рассчитать ширину кадров слайдера для ресайза картинок для container-fluid.
Point 111
зараз якщо створити файл core/custom/define.php з текстом
<?php
const NO_SESSION = true;
можна позбутися сесійних кукі (що зручно, щоб не показувати людям банери про збір та в...
Artur Kyryliuk
А сколько часов мак держит зарядку в рабочем режиме?
Например мой Redmi Mac (просто наклейка от айфона осталась, налепил) по началу держал часов 5 с парой открытых штормов и ...
Ross
я бы даже сказал не размер резюме, а слова, которые там написаны, потому что резюме может быть на несколько десятков страниц из-за 20 летнего опыта работы, но там в опыте буде...
Eugene Неелов
так а я не могу просто новый сделать ?
я пробовал не прокатило но может чето упускаю
Максим
Ребят, было ли у вас так, что переменные в WebApp —tg-viewport-height, —tg-viewport-stable-height после метода expand не обновляются, а остаются в размерах, как было до expand...
Black