Tool for Distributed Extraction of Timestamped Events from Files

Typ

software

Jazyk

anglicky

Autoři

Rychlý Marek, RNDr., Ph.D., UIFS (FIT)
Burget Radek, doc. Ing., Ph.D., UIFS (FIT)

Popis

A tool for distributed extraction of timestamps from various files using extractors adapted from the Plaso engine to Apache Spark infrastructure. The files to extract are uploaded to distributed file-system HDFS and the extraction process is controlled by a Web service via its REST API. The tool is able to utilise efficiently a large distributed clusters.

Klíčová slova

files, events, timestamps, extraction, distributed system

URL

https://github.com/nesfit/pyspark-plaso

Licence

Využití výsledku jiným subjektem je v některých případech možné bez nabytí licence

Licenční poplatek

Poskytovatel licence na výsledek nepožaduje licenční poplatek

Licenční podmínky

Licencováno na základě licence Apache, verze 2.0 (dále jen licence"); tyto soubory nesmíte používat, pokud nejsou v souladu s licencí. Kopii licence můžete získat na adrese

http://www.apache.org/licenses/LICENSE-2.0

Není-li to vyžadováno příslušným zákonem nebo písemně dohodnuto, software šířený na základě licence je distribuován na ZÁKLADĚ JAK JE", BEZ ZÁRUK NEBO PODMÍNEK JAKÝCHKOLI DRUHŮ, ať výslovných nebo předpokládaných. Podrobný text upravující oprávnění a omezení v licenci naleznete v odkazovaném plném znění licence.

Soubory

Projekty

Integrovaná platforma pro zpracování digitálních dat z bezpečnostních incidentů, MV, Bezpečnostní výzkum České republiky 2015-2020, VI20172020062, zahájení: 2017-01-01, ukončení: 2020-06-30, ukončen
Nástroje, metody a technologie ICT pro podporu konceptu smart cities, VUT, Vnitřní projekty VUT, FIT-S-17-3964, zahájení: 2017-03-01, ukončení: 2020-02-29, ukončen

Výzkumné skupiny

NES@FIT - Výzkumná skupina počítačové sítě (VZ NES@FIT)
Výzkumná skupina informačních a databázových systémů (VZ IS)

Pracoviště

Ústav informačních systémů (UIFS)