Artwork

Вміст надано Sébastien Stormacq and Amazon Web Services. Весь вміст подкастів, включаючи епізоди, графіку та описи подкастів, завантажується та надається безпосередньо компанією Sébastien Stormacq and Amazon Web Services або його партнером по платформі подкастів. Якщо ви вважаєте, що хтось використовує ваш захищений авторським правом твір без вашого дозволу, ви можете виконати процедуру, описану тут https://uk.player.fm/legal.
Player FM - додаток Podcast
Переходьте в офлайн за допомогою програми Player FM !

Your next ETL pipeline will be serverless

30:09
 
Поширити
 

Manage episode 492572439 series 3636979
Вміст надано Sébastien Stormacq and Amazon Web Services. Весь вміст подкастів, включаючи епізоди, графіку та описи подкастів, завантажується та надається безпосередньо компанією Sébastien Stormacq and Amazon Web Services або його партнером по платформі подкастів. Якщо ви вважаєте, що хтось використовує ваш захищений авторським правом твір без вашого дозволу, ви можете виконати процедуру, описану тут https://uk.player.fm/legal.
In this episode from AWS Summit Bengaluru, Poonam Pratik, Director at The Line Tech UK and AWS Community Builder, discusses practical approaches to serverless ETL implementation. We cover key aspects of data processing including quality control, AWS Glue orchestration, and effective data validation methods. Poonam explains how serverless architectures can reduce operational complexity while maintaining data accuracy. The conversation includes concrete examples of data partitioning, error notification systems, and observability practices. We conclude with a look at how AI and ML are changing data pipeline development.

With Poonam Pratik Patel, Director, The Line Tech, UK and AWS Community Builder

  •   continue reading

    187 епізодів

    Artwork
    iconПоширити
     
    Manage episode 492572439 series 3636979
    Вміст надано Sébastien Stormacq and Amazon Web Services. Весь вміст подкастів, включаючи епізоди, графіку та описи подкастів, завантажується та надається безпосередньо компанією Sébastien Stormacq and Amazon Web Services або його партнером по платформі подкастів. Якщо ви вважаєте, що хтось використовує ваш захищений авторським правом твір без вашого дозволу, ви можете виконати процедуру, описану тут https://uk.player.fm/legal.
    In this episode from AWS Summit Bengaluru, Poonam Pratik, Director at The Line Tech UK and AWS Community Builder, discusses practical approaches to serverless ETL implementation. We cover key aspects of data processing including quality control, AWS Glue orchestration, and effective data validation methods. Poonam explains how serverless architectures can reduce operational complexity while maintaining data accuracy. The conversation includes concrete examples of data partitioning, error notification systems, and observability practices. We conclude with a look at how AI and ML are changing data pipeline development.

    With Poonam Pratik Patel, Director, The Line Tech, UK and AWS Community Builder

  •   continue reading

    187 епізодів

    All episodes

    ×
     
    Loading …

    Ласкаво просимо до Player FM!

    Player FM сканує Інтернет для отримання високоякісних подкастів, щоб ви могли насолоджуватися ними зараз. Це найкращий додаток для подкастів, який працює на Android, iPhone і веб-сторінці. Реєстрація для синхронізації підписок між пристроями.

     

    Короткий довідник

    Слухайте це шоу, досліджуючи
    Відтворити