История изменений Data Transfer в марте 2024

Новые возможностиНовые возможности

1. Добавлены следующие параметры для работы с трансферами с помощью Terraform:

   • yds_source и yds_target в ресурсе yandex_datatransfer_endpoint — для работы с эндпоинтами Data Streams;
   • runtime и transformation в ресурсе yandex_datatransfer_transfer — для поддержки трансформации данных;
   • changefeed_custom_name в ресурсе yandex_datatransfer_endpoint — для управления потоком изменений в источнике Managed Service for YDB;
   • unescape_string_values в ресурсе yandex_datatransfer_endpoint — для обработки строковых значений в JSON-файлах.

2. Задокументирована последовательность действий для решения проблем, возникающих в сервисе.

3. Для эндпоинтов PostgreSQL в пользовательских инсталляциях появилась возможность задавать несколько значений хоста в формате <хост>:<порт>, если хосты кластера находятся на разных портах.

Решенные проблемыРешенные проблемы

1. Исправлена ошибка обращения к памяти при передаче данных из Elasticsearch в OpenSearch.

2. Восстановлена работоспособность трансферов из источника Microsoft SQL Server (Airbyte®) при указании в настройках эндпоинта подсети.

3. Устранена ошибка загрузки данных в ClickHouse® из-за отсутствия имен шардов.

4. Исправлена ошибка занесения неправильных часовых поясов в облачный журнал.

ClickHouse® является зарегистрированным товарным знаком ClickHouse, Inc.