170 похожих чатов

React — русскоговорящее с...

Android Developers

Vue.js — русскоговорящее ...

Telegram Developers

Node.js — русскоговорящее...

DevOps — русскоговорящее ...

JavaScript Noobs — сообще...

Angular - русскоговорящее...

Верстка сайтов HTML/CSS/J...

Kubernetes — русскоговоря...

Битрикс для разработчиков

MODX. Русскоязычное сообщ...

pgsql – PostgreSQL

iOS Developers — русского...

ClickHouse не тормозит

Rust — русскоговорящее со...

JavaScript — русскоговоря...

React Native — русскогово...

Docker — русскоговорящее ...

HTML/CSS — русскоговоряще...

Python beginners

🐧 RU.UBUNTU — Официальное...

Kotlin Community

Чат экстремального погром...

Scala User Group

Клуб Vue.js-разработчиков

Xamarin Developers (MAUI,...

Svelte [svelt] - All abou...

Системное администрирован...

Nuxt.js | Vue SSR

var chat = new Chat();

Data Science Chat

Ассемблер

Android Architecture

Laravel для начинающих

Церковь метрик

QA — русскоговорящее сооб...

R (язык программирования)

Big Data Science :: AI / ...

Delphi & Lazarus

Solidity Development

Evolution CMS официальное...

pro.net (former COM+)

OpenStreetMap RU

Visual Studio Code — русс...

GraphQL — русскоговорящее...

IDE и редакторы — русског...

OpenCartForum - 🇺🇦🇪🇺Чат O...

Angular.js (1.x) — русско...

Flutter Developers — русс...

AI / Искусственный Интелл...

Laravel Framework Russian...

Чат — Верстка Сайтов и Фр...

Java Underground

Natural Language Processi...

SqlCom.ru - сообщество MS...

Delphi Community

Server Side Swift Develop...

Autohotkey_RU ( v1 & v2 )

PHP DevConf KZ🇰🇿

pro.rb (Ruby/Rails / RU)

Odoo talks & fun

Software Design/Architect...

AndroidDev Pro:: Професси...

WordPress for developers

PowerShellRus - о Powersh...

Эльбрусы и с чем их едят

Java/Kotlin and more

pro.buildsystems

Python для анализа данных

Скрипты Гугл, Таблицы, Go...

Compiler Development

firebase_ru — русскоговор...

RU.CRYPTOGRAPHY — Криптог...

pro.osdev - os developmen...

Это RabbitMQ

GameDev for Web

PostgreSQL (English)

Tilda Developers

RU.Docker — Официальное Р...

Emacs — русскоговорящее с...

FreePascal & Lazarus

Язык программирования Jul...

WordPress – русскоговорящ...

ReasonML и OCaml

WebAssembly — русскоговор...

ansible — русскоговорящее...

Сrystal Lang — русскогово...

Clojure — русскоговорящее...

macOS Developers — русско...

use Perl or die;

FORTH и родственные ЯП

Natural Language Processi...

Sequelize - community (en...

Elm Lang сообщество разра...

WordPress CodeRun

ReactiveX - русскоговорящ...

PureScript — русскоговоря...

Эликсир и Вунш

Node.js — русскоговорящее сообщество

Всем привет! Сталкивался кто-то с обработкой большого буфера (200+м)? Проблема

такая - нужна обаработка бинарных данных больших обьемов. Есть стрим, из которого идут бинарные данные, данным может быть очень много 3-5гб. Buffer нет возможности .atach данных, т.к. обьем входящих не известен. Buffer.concat - очень плохо, идет копирование области памяти, что занимает много ресурсов. DataView - отличный доступ по getFloat32, getFloat64, getUint32 , но опять проблема - нет расширения. Uint8Array - аналогичная ситуация, нет возможности разширить, либо делать копирование памяти. String - проблема с бинарным доступом

#backend #javascript #node.js #programming #russian

0

05.11.2020

7 ответов

29 просмотров

Не совсем понятно, обработка тоже потоковая? Если нет, то возможно подойдёт вариант пушить чанки в обычный массив, а затем Buffer.concat(chunks)

0

05.11.2020

Dolgovec Автор вопроса

Потоковость не важна, про concat описывал выше - так и делаю, но ОЧЕНЬ много занимает ресурсов, т.к. идет копирование памяти

0

05.11.2020

Странно, а вы сoncat вызываете один раз, или каждый раз когда чанк из стрима прилетает?

0

05.11.2020

screenshot

https://nodejs.org/api/buffer.html#buffer_static_method_buffer_from_arraybuffer_byteoffset_length

0

05.11.2020

Dolgovec Автор вопроса

Атачей идет очень много. Например, идет 10к блоков объектов, каждый допустим по 100кб, потом идет 1к блоков текстур, каждый по 5-20мб

0

05.11.2020

Dolgovec Автор вопроса

Есть еще у кого-то предложения как это сделать может?

0

05.11.2020

Алексей Попов

Если не устраивает вариант, который предлагали (складывать в массив), можно написать код на плюсах

0

05.11.2020

Похожие вопросы

Node.js — русскоговорящее сообщество / Серёжа

Подписаться

Оцените плиз схему для учебного проекта интернет-магазина. Меня интересует насколько эта схема будет эффективна для реализации фильтрации товаров по множеству параметров ? У ...

#backend #javascript #node.js #programming #russian

08.10.2023

0

76 ответов

Node.js — русскоговорящее сообщество / createSlice()

Подписаться

Ребята такой вопрос, с помощью Node.js можно полностью заменить Backend для iOS направления? И можно ли писать бек на ноде для мобилок?

#backend #javascript #node.js #programming #russian

19.11.2023

1

60 ответов

Node.js — русскоговорящее сообщество / Андрей

Подписаться

Ребят, привет. Подскажите, пожалуйста, делаю запрос на апишку биржи, чтобы получить курсы. Пишу на nestjs и использую axios (т.к. как понимаю это стандарт в nestjs). В общ...

#backend #javascript #node.js #programming #russian

01.09.2023

0

71 ответов

Node.js — русскоговорящее сообщество / createSlice()

Подписаться

Ребят у меня вопрос, у меня Backend коллега сделал такой запрос для оформления заказа, есть интернет магазин и есть корзина ( это на фронте ), и то что фронт кидает только оди...

#backend #javascript #node.js #programming #russian

26.10.2023

0

59 ответов

Node.js — русскоговорящее сообщество / Pavel

Подписаться

блек акула, вы объявили мне байкот?) Что за странные смайлики почти по каждым моим комментарием?)

#backend #javascript #node.js #programming #russian

22.08.2023

0

71 ответов

Node.js — русскоговорящее сообщество / Andriy F

Подписаться

Подскажите, по какому принципу в "стратегиях"(играх) типа "Веселая ферма" устроено несколько миллионов таймеров? Допустим я "запустил стройку" или "посадил морковку" и мне гов...

#backend #javascript #node.js #programming #russian

13.10.2023

0

56 ответов

Node.js — русскоговорящее сообщество / Виталий

Подписаться

То есть пусть все в одной очереди на ядро толкаются?)

#backend #javascript #node.js #programming #russian

09.10.2023

0

58 ответов

Node.js — русскоговорящее сообщество / Alexey Ermakov

Подписаться

я не понимаю, чего вы доказать пытаетесь сейчас. что вместо подходящего инструмента лучше прихерачить к ноде что-то сбоку?

#backend #javascript #node.js #programming #russian

09.10.2023

0

55 ответов

Node.js — русскоговорящее сообщество / Vitaliy

Подписаться

Добрый вечер, вопрос к знатокам eventLoop в node.js почему после setImmediate выполняется моем случае всегда раньше чем стадия i/o ? сначала я запускаю вызов асинхронных опера...

#backend #javascript #node.js #programming #russian

07.10.2023

0

49 ответов

Node.js — русскоговорящее сообщество / Aртур It

Подписаться

Интересный вопрос в этом же направлении как устроены бэкенды игр? Шутеров например какая информация туда передается? Типо игрок39393 совершил какое то действие и это передаетс...

#backend #javascript #node.js #programming #russian

06.06.2023

0

70 ответов

Смотреть еще

Node.js — русскоговорящее сообщество

Подписаться

Вопросов 68440

Ответов 151611

Участников 9643

Telegram @nodejs_ru

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?

Rꙮman Yankꙮvsky

А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...

30500 за редактор? )

Владимир

а через ESC-код ?

Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится

У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...

Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...

Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...

Ребят в СИ можно реализовать ООП?

https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...

Карта сайта