logfile-analysis

Parsowanie ogromnych plików logów w węźle.js-odczyt w wierszu po wierszu

Muszę wykonać parsowanie dużych (5-10 Gb)plików logów w Javascript / Node.js (używam Cube). Logline wygląda tak: 10:00:43. ... a regularne? Czy ktoś miał duże doświadczenie w parsowaniu ogromnych ilości danych tekstowych w węźle.js? Pozdrawiam, Victor

Jak mogę sprawdzić, czy mój zestaw danych w R będzie zbyt duży?

Zamierzam przeprowadzić analizę logfile w R (chyba, że nie mogę tego zrobić w R) i rozumiem, że moje dane muszą zmieścić się ... lub (c) uciec, zanim będzie za późno i zrobić coś w innym miejscu. język / środowisko (sugestie mile widziane...!). dzięki!

Oprogramowanie do analizy logów serwera www? [zamknięte]

zamknięte. to pytanie nie spełnia wytycznych dotyczących przepełnienia stosu . Obecnie nie przyjmuje odpowiedzi. ... eć: co potrafią dlaczego są przydatne ciekawe zastosowania dla nich Wszelkie uwagi i przemyślenia są mile widziane.

Jak MapReduce jest dobrą metodą analizy logów serwera http?

Patrzyłem na MapReduce od jakiegoś czasu i wydaje się, że jest to bardzo dobry sposób na implementację odpornych na błędy obl ... a zrobienie tego ? Jak podzieliłbyś pliki dziennika internetowego między różne instancje obliczeniowe ? Dziękuję. Nicolas