Google позволяет изменять номер сиквенции в BigQuery для обновляемых данных

Google выпустила механизм смены номера сиквенции в BigQuery

Google объявил о выпуске новой функции в BigQuery, которая позволит пользователям менять номер сиквенции таблицы для обновляемых наборов данных. Эта функция позволит пользователям контролировать изменение формы таблицы с течением времени, что поможет в реализации таких сценариев использования, как:

• Смена первичного ключа таблицы
• Изменение схемы таблицы с удалением или добавлением столбцов первичного ключа
• Коррекция ошибок данных в столбце первичного ключа
• Удаление дубликатов строк в обновляемом наборе данных

Как это работает?

Номера сиквенции являются уникальными идентификаторами строк в таблицах BigQuery, которые упорядочиваются по столбцам первичного ключа. При вставке новых строк в таблицу BigQuery присваивает им номер сиквенции на основе последнего известного максимума.

Преимущества

Механизм смены номера сиквенции предоставляет несколько преимуществ:

• Контроль изменения схемы таблицы: Пользователи могут свободно менять схему таблицы без необходимости удаления и повторного создания данных.
• Управление ошибками данных: Ошибки данных в столбце первичного ключа можно исправить без удаления и повторного создания данных.
• Эффективность удаления дубликатов: Дубликаты строк в обновляемом наборе данных можно удалить с помощью операции слияния, а не путем перестроения всей таблицы.

Ограничения

Функция смены номера сиквенции имеет некоторые ограничения:

• Она доступна только для таблиц с наборами данных, настроенными для обновления.
• Она не поддерживается для таблиц с внешними схемами.
• Она не перестраивает всю таблицу, поэтому любые изменения в схеме вне столбцов первичного ключа должны быть выполнены отдельно.

Как использовать?

Чтобы использовать механизм смены номера сиквенции, необходимо выполнить следующие действия:

1. Создать обновляемый набор данных.
2. Создать таблицу с первичным ключом.
3. Вставить данные в таблицу.
4. Использовать метод ALTER TABLE для смены номера сиквенции.

Примеры

Пример 1: Смена первичного ключа

ALTER TABLE my_table
CHANGE COLUMN old_primary_key NEW_PRIMARY_KEY STRING

Пример 2: Удаление столбца первичного ключа

ALTER TABLE my_table
DROP COLUMN old_primary_key

Пример 3: Исправление ошибки данных

ALTER TABLE my_table
UPDATE old_primary_key = NEW_PRIMARY_KEY
WHERE old_primary_key  NEW_PRIMARY_KEY

Заключение

Механизм смены номера сиквенции в BigQuery предоставляет пользователям большую гибкость и контроль при работе с обновляемыми наборами данных. Он упрощает управление изменениями схемы, корректировку ошибок данных и удаление дубликатов строк, что делает его ценным инструментом для различных сценариев использования.