выгружаются из 1С в csv, далее обрабатываются в excel с помощью сводных таблиц. Объемы данных - до 500 тыс строк и 100 столбцов
Вопрос: в каком фрмате лучше настроить автоматический ежедневный вывод данных из 1С, чтобы затем обрабатывать их в R и выводить в Shiny? CSV не нравится из-за медленности и проблем с разными "веселыми" символами в данных.
Самый реалистичный вариант - txt, csv Если в данных есть иерархии - то JSON/XML Идеалистичный и скорее всего нереализуемый средствами 1С - бинарный формат R, который подтягивается c помощью load()
А в какую-нибудь базу данных закидывать данные - не вариант? по моему опыту - это самый правильный путь.
Можно, как ни странно, попробовать xlsx. Это спасёт от проблем с китайским и некоторыми другими сложными проблемами в кодировках. Но я его на больших объемах не использовал, так что могут быть трудности.
Обсуждают сегодня