MongoDB
replikacja

problem

Powielenie wprowadzanych w ministerstwie informacji na serwerach wielu szkół

replikacja typu master-slave

mongodb:
primary replica set

uczestnicy replikacji

primary- ministerstwo

secondary- szkola

arbiter

interfejs zarzadzajacy replikacja

Funkcjonalności
odczyt danych z ministerstwa

odczyt danych z wybranej szkoły

podgląd statusu replikacji

dodawanie szkoły o określonym id

dodawanie określonej liczby szkół

symulowanie awarii serwera szkoły o określonym id

sumulowanie awarii wszystkich szkół

zdalne tworzenie serwera szkoly

- średnia długość słowa
- średnia długość zdania
- znaki specjalne w zdaniu
- słowa charakterystyczne (najrzadziej używane)
- słowa najczęściej używane

Histogramy sLów

- histogram binarny
- na podstawie słownika 
- na podstawie częstości wystąpień

Klasyfikatory

heurystyczne przypisanie próbki do pewnej klasy

• SVM
•  Naive Bayes
•  drzewa decyzyjne

klasyfikatory

Porównanie skuteczności klasyfikatorów

Porównanie skuteczności klasyfikatorów z prostymi metrykami

dane 

Koleracja zmiany skuteczności ze wzrostem:
- zbioru uczącego
- rozmiaru tekstów zbioru uczącego
- rozmiaru tekstu próbki

Analiza wyników

schemat systemu

Dziekuje