Подскажите, пожалуйста. Использую fread. Если данных в какой-то

Question

Подскажите, пожалуйста. Использую fread. Если данных в какой-то

строке меньше, чем колонок, то fill=T спасёт. А вот если идёт строка, в которой полей больше чем колонок, то дополнительных колонок не добавляется. Как победить? Надо почитать csv, у которого не все колонки имеют имена, не известно сколько колонок.
Гугл по быстрому не помог(

#programming #r #russian

0

10.02.2021

6 ответов

8 просмотров

Анатолий Автор вопроса

Andrey
Возможно, эти дополнительные поля в одну колонку п...

Чтение останавливается с сообщением Stopped early on line 1002. Expected 23 fields but found 25. Consider fill=TRUE and comment.char=. Fill не помогает(

0

10.02.2021

Evgeniy

"неизвестно сколько колонок" - это какой-то плохой csv, по идее должно быть в каждой строке одинаковое число незакавыченных запятых (или какой там разделитель) можно попробовать сначала определить сколько максимально колонок в файле (построчным подсчетом запятых через средства командной строки), а потом задать colClasses для fread

0

10.02.2021

Andrey

Анатолий
Чтение останавливается с сообщением Stopped early...

Я с таким при помощи awk как-то справлялся.

0

10.02.2021

Анатолий Автор вопроса

Evgeniy
"неизвестно сколько колонок" - это какой-то плохой...

Попробовал. ColClasses не добавляет "лишних" колонок, если не видит данных для них в начале файла. Проблему решил написанием вручную в csv названий недостающих колонок (мда:/) и разговором с создателем csv чтобы так больше не делал. Странно, что нет готового решения "из коробки"

0

10.02.2021

Артём Клевцов

Анатолий
Попробовал. ColClasses не добавляет "лишних" коло...

Нет решения, потому описанный кейс не про CSV. Есть вполне себе стандарт обмена данными в формате CSV: https://tools.ietf.org/html/rfc4180 Описанный файл не подпадает под определение CSV. Within the header and each record, there may be one or more fields, separated by commas. Each line should contain the same number of fields throughout the file. Spaces are considered part of a field and should not be ignored. The last field in the record must not be followed by a comma. Код пакетов/утилит для работы с CSV пишется с опорой на стандарт. Покрыть все аномалии, а твой случай именно аномалия, не возможно.

0

10.02.2021

Andrey · Accepted Answer

Andrey

Возможно, эти дополнительные поля в одну колонку просто читаются? Тогда их можно разделить по своему усмотрению

0

10.02.2021

169 похожих чатов

Подскажите, пожалуйста. Использую fread. Если данных в какой-то

6 ответов

Похожие вопросы