с токенами через запятую и я так понял прочитать её адекватно в стрим с чанками по токенам нельзя.
В итоге у меня получается что-то вроде Chunk(11,12,13,1),Chunk(4,15,16,17) в какой-то момент.
Есть ли средства чтобы пофиксить такой сплит по чанкам?
Что значит адекватно? В чем проблема с приведенным примером чанков?
14 хотелось бы иметь целиком в одном чанке
Обсуждают сегодня