Революция в аналитике данных для получения информации в реальном времени

AWS представляет интеграцию Aurora MySQL Zero ETL с Amazon Redshift

Как Amazon продвигает подход Zero ETL

На этой неделе компания AWS сделала интересное объявление о том, что интеграция Amazon Aurora MySQL Zero ETL с Amazon Redshift доступна для общедоступной предварительной версии[1].

Благодаря этой новой функции пользователи могут выполнять аналитику и машинное обучение почти в реальном времени для огромных объемов транзакционных данных, хранящихся в версии Amazon Aurora, совместимой с MySQL. Благодаря этой интеграции данные, записанные в Aurora, становятся доступными в Amazon Redshift за считанные секунды, что устраняет необходимость в сложных конвейерах данных. Интеграция Zero-ETL совместима с Amazon Aurora Serverless v2 и Provisioned, а также с типами инстансов Amazon Redshift Serverless и RA3[1][2].



Уже в начале этого года AWS объявила войну классическим процессам ETL и провозгласила лозунг Zero ETL. Подход Zero ETL — это метод построения конвейеров данных, направленный на устранение необходимости в традиционных процессах извлечения, преобразования и загрузки, а также в инструментах, используемых для их выполнения. Этот подход основан на идее, что данные должны храниться и обрабатываться или даже просто анализироваться в исходной системе, т.е. с SQL в исходном формате без необходимости сложного преобразования или перемещения данных.



Используя интеграцию Zero ETL, организации могут получить исчерпывающую информацию о нескольких приложениях и преодолеть разрозненность данных. Он позволяет анализировать данные из нескольких кластеров баз данных Aurora в одном экземпляре Amazon Redshift. Теперь пользователи могут улучшить аналитику своих данных с помощью расширенных аналитических возможностей Amazon Redshift, включая…