Как применить раздел к таблице куста, которая уже разделена. Я не могу получить разделенные данные в папку после загрузки данных.
Как применить раздел к таблице кустов, которая уже разделена
03.06.2015
- Пожалуйста, добавьте больше деталей, например, 1. Существует ли старый раздел. 2. Создан ли новый раздел для существующих столбцов или добавлены какие-либо новые столбцы? 3. Как вы загружаете данные после создания нового раздела. Они могут определять способ загрузки данных в разделы. Подробнее см. здесь. относительно изменения таблиц, столбцов и разделов 04.06.2015
Ответы:
1
Первое правило разделения в улье заключается в том, что столбец разделения должен быть последним столбцом в данных. поскольку данные уже разделены, скажем, мы разделяем данные по полу M / F, внутри каждого из каталогов будут созданы два каталога: пол = M и пол = F, соответствующие гендерные данные будут доступны, и последний столбец снова в этих данных будет быть половой.
Если вы хотите снова разделить данные в секционированной таблице, используйте вставку в выбор и убедитесь, что последний столбец, который вы используете, является столбцом раздела, который вы хотите использовать для секционированных данных.
04.06.2015
2
Вы добавили раздел вручную с помощью команды Hdfs? В этом случае хранилище метаданных не будет отслеживать добавляемые разделы, если вы не укажете «изменить таблицу, добавить раздел»… попробуйте это
MSCK REPAIR TABLE table_name;
Если это не так, попробуйте удалить разделы и снова создать разделы. Для этого используйте команду alter table. но вы потеряете данные. и значение вашего столбца разбиения должно быть указано как последний столбец в случае, если вы делаете динамическую вставку раздела.
04.06.2015
Новые материалы
Кластеризация: более глубокий взгляд
Кластеризация — это метод обучения без учителя, в котором мы пытаемся найти группы в наборе данных на основе некоторых известных или неизвестных свойств, которые могут существовать. Независимо от..
Как написать эффективное резюме
Предложения по дизайну и макету, чтобы представить себя профессионально
Вам не позвонили на собеседование после того, как вы несколько раз подали заявку на работу своей мечты? У вас может..
Частный метод Python: улучшение инкапсуляции и безопасности
Введение
Python — универсальный и мощный язык программирования, известный своей простотой и удобством использования. Одной из ключевых особенностей, отличающих Python от других языков, является..
Как я автоматизирую тестирование с помощью Jest
Шутка для победы, когда дело касается автоматизации тестирования
Одной очень важной частью разработки программного обеспечения является автоматизация тестирования, поскольку она создает..
Работа с векторными символическими архитектурами, часть 4 (искусственный интеллект)
Hyperseed: неконтролируемое обучение с векторными символическими архитектурами (arXiv)
Автор: Евгений Осипов , Сачин Кахавала , Диланта Хапутантри , Тимал Кемпития , Дасвин Де Сильва ,..
Понимание расстояния Вассерштейна: мощная метрика в машинном обучении
В обширной области машинного обучения часто возникает необходимость сравнивать и измерять различия между распределениями вероятностей. Традиционные метрики расстояния, такие как евклидово..
Обеспечение масштабируемости LLM: облачный анализ с помощью AWS Fargate и Copilot
В динамичной области искусственного интеллекта все большее распространение получают модели больших языков (LLM). Они жизненно важны для различных приложений, таких как интеллектуальные..