Мета: ознайомитись з концептом потокової обробки, та спрощеними механізмами отримання даних з Data та Delta lakes, використовуючи Serverless SQL pools та Apache Spark Pools.

Хід роботи

Основне завдання:

1. Ознайомитись з Azure Synapse (serverless SQL pools and analytics): https://learn.microsoft.com/en-us/training/paths/build-data-analytics-solutions-using-azure-synapse-serverless-sql-pools/
2. Ознайомитись з Azure Synapse Apache Spark Pools: https://learn.microsoft.com/en-us/training/paths/perform-data-engineering-with-azure-synapse-apache-spark-pools/

Важливо: після виконання завдання переконайтесь що ви видалили усі створені вами ресурси!

Увага!!!

Ви маєте створити детальний звіт з лабораторної роботи, де ви маєте продемонстувати що ви ВИКОНАЛИ завдання дані у вищезгаданих модулях, і що їх виконали САМЕ ВИ. Також ви маєте продемонстурвати проходження самого модуля (скріншоти пройденого модуля потрібно робити відкривши в правому верхньому куті меню вашого акаунта, для надання ідентифікаційної інформації).

Так як для даного виду лабораторних робіт звіту достатньо (лабораторні такого типу захищати не потрібно) звіту буде приділятись особлива увага.

Звіти мають бути у форматі pdf, звіти мають конкретно показувати (з ідентифікаційною інформацією) ваше виконання роботи. Ви маєте додавати унікальні (на основі акаунтів) значення полів (паролів, хостів, назв машин, назв акаунтів azure і т.д.) під час виконання завдання з модуля (exercise) у вашій консолі azure. 

Для повного зарахування лабораторних робіт ви повинні робити скріншот всього екрану, в іншому випадку будуть зніматись бали.

Для спрощення виконання звіту з лабораторної роботи, можна використовувати MS Windows Steps Recorder, вбудований в вашу ОС додаток для покрокових скріншотів. Звіти відправляти відповідно до вимог вашого викладача, звіт не потребує спеціального оформлення рамкою(за бажанням) та повинен бути в форматі PDF відправлений з вашої університетської пошти як додаток до листа. 

Приклади скріншотів додані