parquet

Я использую spark. Я хочу сохранить значение 2.484, которое повторяется...

Документ для чтения "Запись и чтение потоков". Там использовали следующий...

Когда я пытаюсь записать файл партера, используя pandas.Timestamp в качестве...

Как мне прочитать разделенный файл паркета в R со стрелкой (без искры)...

В документации я нашел, как создать Glue table в формате JSON, но я не...

У меня есть файл паркета, который содержит идентификатор, характеристики...

Может ли neo4j читать файлы паркета напрямую каким-либо образом? У меня...

У меня есть данные, хранящиеся в S3 в виде файлов паркета с разделами....

Я загрузил запись из таблицы кустов через программу spark, данные успешно...

Я без проблем преобразовал файл паркета в панды, но у меня возникли проблемы...

Создал паркетный файл в Spark. Вот фрагмент кода parquet_file_name = os.path.join(partition,...

Я пытаюсь предварительно компрометировать разделы для некоторых запросов...

У меня есть RDD в памяти. Я хотел бы сгруппировать RDD с помощью некоторой...

У меня есть текстовые данные, хранящиеся в формате паркета в HDFS в метафоре...

Я пытаюсь загрузить таблицу из mysql в hive, используя -hive-import в формате...

Прежде всего, я новичок в этом форуме, и я новичок в парке и стараюсь понять...

Я пытаюсь сериализовать данные csv в формате Паркета с использованием Avro...

Как конвертировать json в паркет в потоковом режиме с помощью Spark? Acutually...

Текущие исходные данные находятся на Hive. Я хочу сделать соединение нескольких...

Я пытаюсь преобразовать сообщение kafka, которое является огромным RDD...

Привет, я читаю файлы паркета в контексте искры, а затем объединяю схему...

У меня есть файл Parquet (созданный Drill), который я пытаюсь прочитать...

Я хочу написать файл паркета в автономной java, в локальной файловой системе...

Мы получаем разновидности JSON/XML в качестве входных данных, где схема...

У меня есть локальный искробезопасный кластер https://github.com/gettyimages/docker-spark,...

Я хочу преобразовать свой входной файл (xml/json) в паркет. У меня уже...

Я вижу множество примеров того, как конвертировать файлы Avro в Parquet,...

Я запускаю дистрибутив CDH (версия 5.6.0) с Impala (версия 2.4.0). У меня...

Я пытаюсь получить доступ к вложенным атрибутам json файла, хранящимся...

Я могу успешно преобразовать CSV файл в файл Parquet, но файл Parquet разбит...

Я не уверен в концепции печати стоп-кадра. При загрузке паркетного файла,...

Когда я регулярно обновляю данные в файл паркета, затраченное время будет...

Я новичок в NIFI, мой прецедент - читать из порта и писать в формате hdfs...

Хотя Impala намного быстрее, чем Hive, мы использовали Hive, потому что...

Я пытаюсь разными способами запросить запись в массиве записей и отобразить...

Я знаю, что в Scala вы можете читать в паркетном файле следующим образом:...

Я работаю с некоторыми алгоритмами, которые требуют интенсивных вычислений...

Я могу загружать файлы csv в hbase, а также играть с java api. Я также...

У меня есть мои события, поступающие из Kinesis, которые нужно обогатить....

Я пишу файл паркета в s3. Я должен знать размер блока s3, поэтому я могу...

Индексная страница произошла в паркет 2.0, как ее использовать в искровом...

Я сохранил файл паркета на Spark, используя DataFrame.saveAsParquet()....

С pyspark я сохранил данные в паркетные файлы без метаданных. Из-за следующей...

Я попытался преобразовать существующий файл avro в паркет. Но выходной...

Я пытаюсь прочитать таблицу DynamodDB с помощью Apache Spark. Ниже приводится...

Есть ли способ создать вложенные данные в куст из не-вложенных данных ...

Я хочу сбросить только определенный столбец в каком-либо текстовом файле,...

Я новичок в spark/pyspark и должен интегрировать его в конвейер. Мне удалось...

Есть ли какое-либо преимущество в создании разделов Hive при использовании...

Я пытаюсь сохранить DataFrame в папке паркета Amazon S3, используя дату...