Boubyan Bank – Veri Ambarı Migration Projesi
Sybase veri ambarının Cloudera Hadoop tabanlı ODS ortamına taşınması ve Erwin ile üzerinde modelleme yapılıp MSSQL üzerinde Enterprise DWH geliştirilmesi.
Boubyan Bank Data Transformation Program kapsamında, mevcutta Sybase IQ üzerinde çalışan veri ambarı ve farklı iş birimlerine yayılmış fiziksel data mart yapılarını modern veri platformuna dönüştürme sürecinde görev aldım. Proje kapsamında Sybase tabanlı legacy DWH mimarisinden, Cloudera Hadoop / Data Lake tabanlı ODS yapısına veri taşıma süreçlerinde; kaynak sistem analizleri, veri modelleme, ETL geliştirme, veri doğrulama ve raporlama geliştirmelerinden sorumlu oldum.
MSSQL üzerinde Inmon yaklaşımına uygun, 3rd Normal Form prensiplerini karşılayan Enterprise Data Warehouse katmanının geliştirilmesine katkı sağladım. Bankacılık veri alanları için standardize edilmiş veri modeli, staging/curated katmanları, EDW besleme süreçleri ve raporlama ihtiyaçlarına yönelik veri akışları tasarladım ve geliştirdim.
1,5 yıl boyunca Informatica Data Engineering Integration, MSSQL, Sybase IQ, Cloudera Hadoop ekosistemi ve Power BI/SAP BO raporlama ihtiyaçlarıyla entegre çalışan ETL süreçlerinde aktif rol aldım. Dağınık data mart yapılarının merkezi EDW mimarisine taşınması, veri tekrarlarının azaltılması, staging süreçlerinin standartlaştırılması, iş birimlerinin regülasyon, finans, risk, kurumsal ve müşteri analitiği raporlama ihtiyaçlarının karşılanması için veri hazırlama ve modelleme çalışmalarını yürüttüm.
Ayrıca Informatica DEI geliştirme standartları, naming convention, parametrizasyon, deployment, versiyonlama ve CI/CD süreçlerine uyumlu geliştirmeler yaparak proje genelinde sürdürülebilir, izlenebilir ve yönetilebilir ETL yapılarının oluşturulmasına katkı sağladım. Projede Informatica DEI, Jenkins, Jira ve Bitbucket tabanlı CI/CD yaklaşımı kullanılmış; geliştirme, test ve deployment süreçlerinin otomasyonuna yönelik standartlar tanımlanmıştır.