Programming with Big Data in R

Big Data to termin odnoszący się do rozwiązań przeznaczonych do przechowywania i przetwarzania dużych zbiorów danych. Opracowane początkowo przez Google rozwiązania Big Data ewoluowały i zainspirowały inne podobne projekty, z których wiele jest dostępnych jako open-source. R jest popularnym językiem programowania w branży finansowej.

Wprowadzenie do Programming Big Data z R (bpdR)

• Konfigurowanie środowiska do korzystania z pbdR
• Zakres i narzędzia dostępne w pbdR
• Pakiety powszechnie używane z Big Data wraz z pbdR

Interfejs przekazywania wiadomości (MPI)

• Korzystanie z pbdR MPI 5
• Przetwarzanie równoległe
• Komunikacja punkt-punkt
• Wyślij macierze
• Sumowanie macierzy
• Komunikacja zbiorowa
• Sumowanie macierzy za pomocą funkcji Redukuj
• Rozrzuć / Zbierz
• Pozostała komunikacja MPI

Rozproszone macierze

• Tworzenie rozproszonej macierzy diagonalnej
• SVD rozproszonej macierzy
• Równolegle budowanie rozproszonej macierzy

Statistics Aplikacje

• Integracja Monte Carlo
• Odczytywanie zbiorów danych
• Odczyt wszystkich procesów
• Rozgłaszanie z jednego procesu
• Odczyt danych podzielonych na partycje
• Regresja rozproszona
• Rozproszone Bootstrap