Вопросы по теме 'hive'

hive - как удалить внешнюю таблицу улья вместе с данными
Я использую drop table <table_name> Если я воссоздаю таблицу с той же схемой и именем, я верну старые данные. Следует ли мне удалить каталог таблицы из файловой системы hdfs, чтобы полностью избавиться от данных?
52941 просмотров
schedule 07.05.2024

Загрузка большого csv в hadoop через Hue сохранит только блок размером 64 МБ
Я использую Cloudera quickstart vm 5.1.0-1 Я пытаюсь загрузить свой csv объемом 3 ГБ в Hadoop через Hue, и до сих пор я пробовал: - Загрузите csv в HDFS и, в частности, в папку, называемую наборами данных, расположенную в / user / hive / datasets -...
3659 просмотров
schedule 07.04.2024

hive 0.14: невозможно вставить данные в поддерживаемую ACID таблицу без сегментов
В hive 0.14 у меня есть таблица с транзакцией, поддерживаемой ACID. create table HiveTest (EmployeeID Int,FirstName String,Designation String, Salary Int,Department String) clustered by (department) into 3 buckets stored as orc TBLPROPERTIES...
3645 просмотров
schedule 20.05.2024

Hive не может найти файл из распределенного кеша в EMR
Я пытаюсь запустить UDF в Hive, который в основном должен сканировать внешний файл csv, используя значение из таблицы в качестве другого аргумента. Я использую запрос: add jar s3://bucket_name/udf/hiveudf.jar; add FILE hdfs:///myfile/myfile.csv;...
185 просмотров
schedule 03.05.2024

Использование spark sql DataFrameWriter для создания внешней таблицы Hive
В рамках процесса интеграции данных, над которым я работаю, мне необходимо сохранить Spark SQL DataFrame в качестве внешней таблицы Hive. Мои ограничения на данный момент: В настоящее время ограничено Spark 1.6 (v1.6.0) Необходимо сохранить...
2551 просмотров

Почему Apache Hive XPath возвращает только первое совпадение?
Мне нужна помощь с XML с помощью Hive. У меня есть столбец строки куста с содержимым XML, и мне нужно вернуть все вхождения определенного тега. Я использую xpath_string(columnname, '//tagname/text()') , но он возвращает только первое вхождение...
93 просмотров
schedule 29.03.2024

объединить два столбца, и в одном столбце есть пространство
У меня есть таблица: клиент и три столбца. Я хочу выбрать первый ненулевой столбец. Выберите объединение идентификаторов (столбец A, столбец B) от клиента. Ожидаемый результат должен быть: 101 AABB. Фактический результат - 101...
409 просмотров
schedule 01.05.2024