{"user_id": 123}, можно использовать точечную нотацию:
{"address": { "city": "San Francisco", "state": "CA" }}, используйте оператор ^:
CAST или синтаксиса :::
- Normal Views: Используйте normal view, чтобы инкапсулировать логику разворачивания.
- Materialized Views: Для небольших датасетов можно использовать обновляемые materialized view с модификатором
FINAL, чтобы периодически разворачивать данные и выполнять дедупликацию. Для более крупных датасетов мы рекомендуем использовать incremental materialized views безFINAL, чтобы разворачивать данные в реальном времени, а затем выполнять дедупликацию на этапе выполнения запроса. - Query-time Access: Вместо разворачивания используйте точечную нотацию для прямого доступа к вложенным полям в запросах.
Как устранить ошибку resume of change stream was not possible, as the resume point may no longer be in the oplog.?
secondaryPreferred. Если вы хотите оптимизировать задержку ингестии, рекомендуем использовать предпочтение чтения primaryPreferred. Подробнее см. в документации MongoDB.
Да, MongoDB ClickPipe поддерживает как Replica Set, так и сегментированный кластер.
Да, MongoDB ClickPipe поддерживает Amazon DocumentDB 5.0. Подробнее см. в руководстве по настройке источника Amazon DocumentDB.
Мы поддерживаем PrivateLink для кластеров MongoDB (и DocumentDB) только в AWS.
Обратите внимание: в отличие от одноузловой реляционной базы данных, клиент MongoDB требует успешного обнаружения Replica Set, чтобы учитывать настроенный ReadPreference. Для этого необходимо настроить PrivateLink для всех узлов в кластере, чтобы клиент MongoDB мог успешно установить соединение с Replica Set, а также переключиться на другой узел, если текущий подключенный узел станет недоступен.
Если вы предпочитаете подключаться к одному узлу в вашем кластере, можно пропустить обнаружение Replica Set, указав /?directConnection=true в строке подключения при настройке ClickPipes. В этом случае настройка PrivateLink будет аналогична настройке для одноузловой реляционной базы данных и является самым простым вариантом поддержки PrivateLink.
Для подключения к Replica Set вы можете настроить PrivateLink для MongoDB либо с помощью ресурса VPC, либо с помощью VPC endpoint service. Если вы выбираете ресурс VPC, потребуется создать конфигурацию ресурса GROUP, а также конфигурацию ресурса CHILD для каждого узла в кластере. Если вы выбираете VPC endpoint service, потребуется создать отдельный Endpoint Service (и отдельный NLB) для каждого узла в кластере.
Подробности см. в документации AWS PrivateLink. Если вам нужна помощь, обратитесь в ClickHouse Support.