Ir al contenido

Pokročilé techniky a ingestia údajov pomocou Plaso (log2timeline.py)

Odborné techniky na optimalizáciu výkonu ingestie údajov, filtre zbierania a analýzu YARA podpisov v nástroji Plaso.

0lecturas

Tento dokument predpokladá, že už ovládate koncepty zhrnuté v príručke základov Plaso (základné vytváranie časových osí, časové pásma, parsery a VSS).

Zameriame sa na pokročilé prípady použitia: ako maximalizovať výkon procesora (CPU), ako filtrovať údaje pred ich spracovaním (pri ingestii súborov), ako extrahovať informácie o signatúrach pomocou YARA pravidiel a ako spravovať chybové logy pri rozsiahlych forensných vyšetrovaníach.


Analýza diskov s kapacitou 1 TB alebo viac môže trvať celé dni. Optimalizácia paralelného jadra Plaso skracuje tento kritický čas reakcie na incidenty na niekoľko hodín.

Plaso je natívne viacprocesové. Môžeme explicitne definovať počet pracovných procesov procesora (workers) a modulárne upravovať veľkosť pamäťových vyrovnávacích búforov:

  • ✔ --workers <NÚMERO>: Určuje počet súčasných procesov, ktoré sa majú spustiť na extrakciu a analýzu na nízkej úrovni.
    • Pokyn: Odporúča sa definovať počet workerov zodpovedajúci celkovému počtu fyzických jadier vášho CPU (napríklad: --workers 8). Pri komprimovaných obrazoch E01 môže byť operácia obmedzená úzkym hrdlom dekompresného procesora. Pri RAW diskových jednotkách namontovaných na rýchlych SSD platí, že čím vyšší je počet workerov, tým vyššia je rýchlosť I/O.
  • ✔ --buffer_size <TAMAÑO>: Riadi kapacitu stredného prenosového vyrovnávacieho pamäťového priestoru v megabajtoch, ktorý používa každý pracovník. Predvolene sa pridá 1024 MB.
    • Pokyn: Pri analytických systémoch s veľkým množstvom pamäte RAM (napríklad: 64 GB) môžeme túto hodnotu zvýšiť na --buffer_size 2048M, aby sme zlepšili výkon a minimalizovali zápis na disk za horúca.

Príklad optimalizovaného príkazu pre analytické stroje (16 workerov, 64 GB RAM):

Sección titulada «Ejemplo de comando optimizado para máquinas analíticas (16 workers, 64GB RAM):»
Ventana de terminal
log2timeline.py --workers 16 --buffer_size 2048M --status_view linear /opt/forensics/cases/case-001/my_timeline.plaso /opt/forensics/cases/case-001/image.E01

3. Prípad 2: Filtrovanie pri príjme (Rýchle triedenie súborov)

Sección titulada «3. Casuística 2: Filtrado en la Ingesta (Triaje Rápido de Archivos)»

Pri intervenciách okamdejnej reakcie alebo analýzach typu triage, je vysoko neefektívne spracovávať milióny dočasných súborov, dočasných súborov prehliadača alebo irelevantných systémových súborov. Zaujímajú nás iba artefakty vykonávania a Windows Registry.

Pomocou parametra --file_filter, môžeme inštruovať Plaso, aby indexoval a analyzoval výhradne cesty, ktoré zodpovedajú šablóne filtra kolekcie:

Ventana de terminal
--file_filter <CAMINO_AL_ARCHIVO_FILTRO>
  • Poznámka: Tento filter nepracuje s komplexnými regulárnymi výrazmi, ale overuje, či cesta k súboru v obraze začína niektorým z riadkov v textovom filtračnom súbore.

Praktický príklad pre rýchle triedenie systému Windows:

Sección titulada «Ejemplo Práctico para Triaje Rápido de Windows:»
  1. Vytvorte textový súbor s názvom /opt/forensics/cases/case-001/triage_filter.txt s nasledujúcim zoznamom kľúčových ciest:
    /Windows/System32/config/
    /Users/%/NTUSER.DAT
    /Users/%/AppData/Local/Microsoft/Windows/UsrClass.dat
    /Users/%/AppData/Roaming/Microsoft/Windows/Recent/
    /Users/%/AppData/Local/Microsoft/Windows/WebCache/
    /Windows/Prefetch/
  2. Spustite príjem Plaso volaním pripraveného filtra:
    Ventana de terminal
    log2timeline.py --file_filter /opt/forensics/cases/case-001/triage_filter.txt /opt/forensics/cases/case-001/my_triage_timeline.plaso /opt/forensics/cases/case-001/image.E01

Týmto krokom sa vynechá 90 % irelevantných používateľských a systémových súborov, čo skráti čas spracovania z 24 hodín na menej ako 30 minút.


4. Prípad 3: Filtrovanie na základe YARA signatúr

Sección titulada «4. Casuística 3: Filtrado Basado en Firmas YARA»

Je potrebné automaticky klasifikovať, detekovať a označovať akýkoľvek súbor, ktorý zodpovedá škodlivým pravidlám alebo signatúram, počas tej istej fázy ingestie a tvorby časovej osi.

Plaso dokáže načítať pravidlá YARA za chodu a vyhodnotiť každý analyzovaný súbor pred jeho indexovaním:

Ventana de terminal
# Ejecutar ingesta evaluando firmas yara
log2timeline.py --yara_rules /opt/forensics/rules/custom-signatures.yar /opt/forensics/cases/case-001/my_timeline.plaso /opt/forensics/cases/case-001/image.E01

Ak súbor binárneho typu (napríklad: c:\temp\mimikatz.exe) zodpovedá niektorému z pravidiel v súbore podpisov, Plaso okamžite vygeneruje v časovej osi udalosť s data_type „fs:yara_match“. To umožňuje priamo korelovať dátum vytvorenia hrozby s blízkymi sieťovými spojeniami alebo zmenami v registri.


V prípade hĺbkovej analýzy malvéru alebo potreby korelovať popisný text ID udalostí systému Windows (ktoré predvolene zobrazujú iba číselné kódy).

Môžeme vynútiť výpočet hashov súborov počas príjmu a vynútiť rozlíšenie reťazcov zo súborov EVTX:

Ventana de terminal
# Calcular hashes SHA-1 y SHA-256 de todos los archivos en la ingesta
log2timeline.py --hashers "sha1,sha256" ...
# Extraer texto y descripciones completas de los mensajes de los logs EVTX de Windows
log2timeline.py --extract_winevt_resources ...

Ak úloha zlyhá z dôvodu poškodenia protokolov alebo občasných blokovaní, izolujte proces alebo deaktivujte front ZeroMQ (obzvlášť užitočné vo virtuálnych strojoch, ktoré trpia úzkymi hrdlami na lokálnych soketoch):

Ventana de terminal
# Redirigir todas las salidas de depuración a un log físico detallado
log2timeline.py --log_file /opt/forensics/cases/case-001/plaso_debug.log ...
# Desactivar la cola de red interna de ZeroMQ si experimentas congelaciones
log2timeline.py --disable_zeromq ...