🏠 হোম
বেঞ্চমার্ক
📊 সমস্ত বেঞ্চমার্ক 🦖 ডাইনোসর v1 🦖 ডাইনোসর v2 ✅ টু-ডু লিস্ট অ্যাপস 🎨 সৃজনশীল ফ্রি পেজ 🎯 FSACB - চূড়ান্ত শোকেস 🌍 অনুবাদ বেঞ্চমার্ক
মডেল
🏆 সেরা ১০টি মডেল 🆓 ফ্রি মডেল 📋 সমস্ত মডেল ⚙️ কিলো কোড
রিসোর্স
💬 প্রম্পট লাইব্রেরি 📖 এআই গ্লসারি 🔗 দরকারী লিঙ্ক
advanced

Skrypt ETL w Pythonie z obsługą błędów i logowaniem

#Python #ETL #Data Engineering #Pandas #SQL

Tworzenie zaawansowanego skryptu ETL do ekstrakcji, transformacji i ładowania danych.

Napisz kompletny skrypt w języku Python, który realizuje proces ETL (Extract, Transform, Load). Skrypt ma pobierać dane z plików CSV zlokalizowanych w zdalnym katalogu SFTP, przetwarzać je przy użyciu biblioteki Pandas (czyszczenie danych, zmiana typów, usuwanie duplikatów, obsława wartości null), a następnie ładować je do bazy danych PostgreSQL przy użyciu SQLAlchemy. Kod musi zawierać zaawansowaną obsługę wyjątków (try-except-else-finally) dla każdego etapu, logowanie zdarzeń do pliku i konsoli (używając biblioteki logging) z różnymi poziomami ważności, a także mechanizm retry dla połączeń sieciowych. Opisz jak można uruchomić ten skrypt cyklicznie za pomocą crona.