użytkownicy
allegro.pl

Ponad 35 milionów rekordów.

Opis projektu

W marcu 2014 otrzymaliśmy zlecenie pozyskania danych kilkudziesięciu milionów użytkowników portalu Allegro. Klientowi zależało przede wszystkim na ilości komentarzy, informacji czy użytkownik jest firmą oraz adresie e-mail występującym na stronie "O mnie".

W tym celu zbudowaliśmy tymczasową strukturę złożoną z kilkudziesięciu serwerów ulokowanych w różnych miastach Polski sterowanych z dedykowanej aplikacji webowej zainstalowanej na centralnej jednostce sterującej. Po uruchomieniu systemu, cała operacja zbierania danych trwała około tygodnia.

Szczegóły

Data: marzec 2014
Czas realizacji: 7 dni

Tagi