Ilość danych generowanych na całym świecie przez wszelkiego rodzaju systemy gwałtownie wzrasta w ostatnich latach i mimo, że ten wzrost już ogromnie zdumiewa to nie ma na razie żadnych prognoz jakoby ten wzrost miał się zatrzymać — oczekuje się wręcz, że ilość danych dostępnych na całym świecie podwoi się w nadchodzących latach.
Same dane nie są aż tak znaczące. Wymagają one odpowiedniego przetwarzania, analizy i raportowania, aby naprawdę wykorzystać pełnię ich możliwości i czerpać z nich wnikliwe spostrzeżenia z punktu widzenia logiki biznesowej. Wiele przedsiębiorstw i organizacji boryka się z tym aspektem, zwłaszcza ze względu na specyficzne wyzwania techniczne w przypadku dużych ilości nieustrukturyzowanych danych.
Datarabbit regularnie pomaga z takimi wyzwaniami. W ramach jednego z naszych działań zaprojektowaliśmy i wdrożyliśmy system dokładnie odpowiadający tym problemom i potrzebom. Nasz partner prowadzący platformę ze spersonalizowanymi rozwiązania marketingowymi przetwarza znaczące ilości danych z różnych źródeł w celu zwiększenia zaangażowania klientów i aby przenieść swoje strategiczne analizy na wyższy poziom, potrzebował systemu, który przetwarzałby i agregowałby dane, a także zapewniał ujednolicone raportowanie i analizy — co datarabbit przygotował.
Nasz zespół zrobił to, budując rozwiązanie składające się z dwóch części.
Pierwsza była odpowiedzialna za przetwarzanie i agregację danych. Stworzyliśmy hurtownię danych, z możliwościami magazynowania i przetwarzania danych pochodzących ze wszystkich potrzebnych źródeł. Później źródła te zostały połączone z magazynem procesami ETL, co zapewniło, że dane są automatycznie aktualizowane i zawsze dostępne dla odbiorców w najnowszej wersji. Zostały one wdrożone przy użyciu technologii AWS Redshift i Glue.
Druga część stanowiła warstwę BI, która została połączona z już utworzonym magazynem i używając go jako zaplecza (wraz z danymi w nim obecnymi) zapewniała analizę, raportowanie i wgląd biznesowy za pomocą szeregu skonfigurowanych przez nas pulpitów informacyjnych i wykresów.
