130 likes | 288 Views
GOSPODARKA OPARTA NA DANYCH. Szybki dostęp online czy raporty generowane ręcznie? Wyzwania przetwarzania danych. Konrad Latkowski, Manubia. 17 maja 2012. Wyzwania agregacji danych milionów transakcji. Historia skalowania i problemy analizy. Manubia to jedyny taki system na świeci:
E N D
GOSPODARKA OPARTA NA DANYCH Szybki dostęp online czy raporty generowane ręcznie? Wyzwania przetwarzania danych. Konrad Latkowski, Manubia 17 maja 2012
Wyzwania agregacji danych milionów transakcji.Historia skalowania i problemy analizy.
Manubia to jedyny taki system na świeci: • Łącznie 25 serwisów aukcyjnych • 10 serwisów Grupy Allegro • 15 serwisów eBay Inc. • Do tego Świstak.pl • Dane w 100% pewne • Usługi pakietowe (web): • Manubia • ManubiaGlobal • Usługi na zamówienie (xls): • ManubiaPRO • ManubiaGlobalPRO
Serwer dedykowany: - Klasa low-end, - Jeden procesor, - 8GB RAM…
Koncepcja startowa: • - Monitorowanie sprzedawców • - Wyłącznie tych wybranych • - Których ilość stale rosła • - W szczytowym momencie 1500
A może by tak analiza? • - Dodajemy eBay, Aukro, Świstaka • - Masowo więcej danych • - Nierównomierne obciążenie • - Nawet pół miliona aktualizacji • - A to wszystko przez API…
API w Polsce? - Brak dokumentacji lub wsparcia - Nie zawsze radzące sobie z rozwojem - Mało uregulowane - Wolne….
Dobre wzorce? - X.Commerce od eBay Inc. - Certyfikacja, jasny regulamin - Społeczność, ale i dokumentacja - Otwartość na sugestie
Co z tym rozwojem? • - Aukro, eBay, Świstak • - Same Allegro to 600 mln rekordów • - Konieczna szybka skalowalność
Co z tym rozwojem? • - Microsoft Azure • - Program BizSparkPlus • - Testy, testy, testy…
Analiza w czasie rzeczywistym • - Świadomy rozwój oferty • - Integracja firm i procesów • - E-commece wyjdzie z piwnicy?
Produkt? Problematyczny! • - Jeden produkt i 100 nazw • - Mechanizmy są nieskuteczne • - A bazy brak…
Konrad Latkowski DZIĘKUJĘ Potrzeba pełnych danych? Zapraszam pr@manubia.pl | 506-623-451