Data Transfer и Data Streams: всё про потоки данных в Yandex.Cloud

Поставка и репликация данных — непростая задача: нужно поддерживать разные виды источников (СУБД, очереди, сообщения, файлы) и несколько вариантов приемников (различные СУБД, форматы данных, объектное хранилище). Вам может потребоваться как передача полной копии СУБД, так и организация CDC (Change Data Capture) процесса — все это позволяет решить сервис Yandex Data Transfer, а также новый сервис Yandex Data Streams, совместимый с Amazon Kinesis Data Streams API. В докладе рассказали о том, как организовать миграцию между различными средами, создать DR-площадку и обеспечить поставку данных в аналитическое хранилище, какие источники и приемники данных поддерживаются сейчас, а какие поддержим в ближайшее время в Yandex Data Transfer. Отдельно представили новый сервис Yandex Data Streams и показали, как его использовать вместе с Yandex Data Transfer для решения задач пользователей Yandex.Cloud.