Barcha raqamlar birlashadigan yagona joy
CRM, ERP, billing va sayt maʼlumotlari bitta modelga bogʻlanib, tarixini saqlaydigan ombor. Texnologiya modaga qarab emas, hajmga qarab tanlanadi.
01Konstruktor
Maʼlumotlar arxitekturasini yigʻing
Manbalar va maqsadlarni tanlang — oʻngda darhol sxema paydo boʻladi: manbalar, konveyer, ombor, BI va natijalar.
Dastlabki arxitekturaTugunlar: 11
- CRM → ETL · ELT
- ERP · 1C → ETL · ELT
- Billing → ETL · ELT
- +2 sources → ETL · ELT
- ETL · ELT → Data quality checks
- Data quality checks → Data Warehouse
- Data Warehouse → Data marts
- Data marts → BI layer · metrics
- BI layer · metrics → Dashboards, Scheduled reports
- Dashboards
- Scheduled reports
SOURCES CRM · ERP · 1C · Billing · Website · events · External API PIPELINE 5 connectors · Scheduled / incremental loads · Deduplication · validation · reference data STORAGE Data Warehouse (PostgreSQL or ClickHouse by volume) · Data marts per department OUTPUTS Dashboards · Scheduled reports
Bu dastlabki sxema. Manbalaringizni koʻrib chiqqandan keyin arxitektura oʻzgarishi mumkin.
02Maʼlumotlar ombori
Jadvallar uyumi emas, model
Faktlar va oʻlchovlar, biznesga tushunarli nomlar, maʼlumotnomalar versiyalari. Boʻlimlar vitrinalari — umumiy model ustida.
- Aksariyat vazifalar uchun PostgreSQL
- Kuniga millionlab hodisa boʻlsa — ClickHouse
- Oʻzgarishlar tarixi (SCD)
04Aloqa
Maʼlumotlaringizni tahlil qilaylik
Beshta savol — va siz dastlabki maʼlumotlar arxitekturasi hamda birinchi qadamni olasiz. Yoki shunchaki bizga yozing.
Dastlabki Data Architecture
6 dan 1-qadam