Wyzwanie
Ciągły rozwój Inter Cars wymaga dostarczenia bezpiecznej, scentralizowanej, ustandaryzowanej platformy wymiany i integracji danych, która będzie wykorzystywana wewnętrznie w całej grupie IC oraz zewnętrznie w procesach B2B i B2C.
Z technicznego punktu widzenia, obecna architektura Hurtowni Danych będzie osiągać granice skalowalności w zakresie wydajności i skalowalności z uwagi na większość danych i zadań raportowych przetwarzanych codziennie w DWH.
Nowoczesna platforma danych powinna być w stanie odnieść się do wszystkich powyższych czynników, zapewniając samoobsługowy, międzydomenowy strumień danych dla każdego przyszłego pomysłu, który przyspieszy czas realizacji w wewnętrznym ekosystemie IT rozwiązań zorientowanych na dane.
Główne korzyści
Zwiększenie wydajności DWH dzięki przeniesieniu punktu ciężkości przetwarzania danych na nową platformę
Zmniejszenie kosztów wprowadzania nowych pomysłów na realizację danych dzięki osiągnięciu skali Big Data
Standaryzacja integracji danych w zakresie formatu danych, protokołów i bezpieczeństwa
Uproszczenie architektury danych
Perspektywa klienta
Mikołaj Siedlarek
Główny Architekt Korporacyjny w Inter CarsWejście w nowy obszar IT jakim jest Big Data, jest zawsze wyzwaniem dla firmy. Dlatego tak ważne jest, aby zrobić to z odpowiednim Partnerem IT. BlueSoft wspiera nas od pierwszego dnia – od wspólnego budowania holistycznej wizji rozwiązania po wsparcie sprawnego dostarczania i utrzymania jako jeden zespół.
Rozwiązanie
BlueSoft i Inter Cars zbudowały wizję rozwiązania i rozpoczęły wspólne przedsięwzięcie polegające na dostarczeniu Core Data Platform (CDP). Jest to rozwiązanie programowe umożliwiające efektywne przechowywanie, przetwarzanie i udostępnianie dużych ilości danych. Platforma składa się z jeziora danych (data lake), środowiska obliczeniowego i analitycznego oraz narzędzi integracyjnych.
Dzięki nowoczesnej architekturze opartej na referencyjnej Lambda Architecture oraz technologii open source opartej na Hadoop, pozwala na efektywne kosztowo zwiększanie wydajności wraz z rosnącym rozmiarem danych firmy – bez ograniczeń licencyjnych.
Najważniejsze jest to, że Lambda Architecture jest agnostyczna technologicznie. Data Pipeline jest podzielony na warstwy z jasnym rozgraniczeniem odpowiedzialności, a na każdej warstwie możemy wybierać spośród kilku technologii w zależności od aktualnych potrzeb.
Technologie, z których korzystamy
Wyniki
Architektura Lambda to elastyczny i generyczny wzorzec architektury do projektowania rozwiązań Big Data. Dzięki warstwowym rozwiązaniom rozdzielającym moduły są logicznie odseparowane, posiadają niezależne odpowiedzialności i są gotowe do wykorzystania przez zespoły międzyorganizacyjne. Zwinny framework dostosowany do charakteru projektu pozwala zespołowi działać na stałym poziomie w przyjaznym dla deweloperów ekosystemie. Platforma jest wykorzystywana przez biznes już od pierwszego dnia z inicjatywami Predictive Analytics wokół klientów takich jak Retencja czy Segmentacja.