Pokročilé techniky a ingestce dat pomocí Plaso (log2timeline.py)
Expertní techniky pro optimalizaci výkonu ingestce dat, filtry sběru a analýzu YARA signatur v Plaso.
Odborné techniky pro specifické případy
Sección titulada «Técnicas de Experto para Casuísticas Específicas»1. Přehled
Sección titulada «1. Visión General»Tento dokument předpokládá, že již ovládáte koncepty uvedené v příručce základů Plaso (základní tvorba časových os, časová pásma, parsery a VSS).
Zaměříme se na pokročilé scénáře: jak maximalizovat výkon CPU, jak filtrovat data před jejich zpracováním (při ingestii souborů), jak extrahovat informace o signaturách pomocí pravidel YARA a jak spravovat logy chyb při digitální forenzní analýze velkého rozsahu.
2. Případ 1: Optimalizace CPU a výkonu zpracování
Sección titulada «2. Casuística 1: Optimización de CPU y Rendimiento de Procesamiento»Analýza disků o velikosti 1 TB nebo větších může trvat celé dny. Optimalizace paralelního enginu Plaso zkracuje tuto kritickou dobu reakce na incidenty na několik hodin.
Inženýrské řešení
Sección titulada «Solución de Ingeniería»Plaso je nativně víceprocesové. Můžeme explicitně definovat počet pracovních procesů (workers) CPU a upravovat velikost paměťových bufferů:
- ✔
--workers <NÚMERO>: Especifica la cantidad de procesos simultáneos a lanzar para realizar la extracción y análisis de bajo nivel.- Pokyn: Doporučuje se definovat počet workerů odpovídající celkovému počtu fyzických jader vašeho CPU (např.:
--workers 8). U komprimovaných obrazů E01 může být operace omezena úzkým hrdlem dekompresního procesoru. U RAW disků připojených k rychlým SSD diskům platí, že čím více je workerů, tím vyšší je rychlost I/O.
- Pokyn: Doporučuje se definovat počet workerů odpovídající celkovému počtu fyzických jader vašeho CPU (např.:
- ✔
--buffer_size <TAMAÑO>: Controla la capacidad en megabytes del buffer intermedio de transferencia que utiliza cada uno de los workers. Por defecto se asigna en 1024MB.- Pokyn: U analytických systémů vybavených velkým množstvím operační paměti RAM (např.: 64 GB) můžeme tuto hodnotu zvýšit na
--buffer_size 2048M, abychom zlepšili výkon a minimalizovali zápis na disk za běhu.
- Pokyn: U analytických systémů vybavených velkým množstvím operační paměti RAM (např.: 64 GB) můžeme tuto hodnotu zvýšit na
Příklad optimalizovaného příkazu pro analytické stroje (16 pracovníků, 64 GB RAM):
Sección titulada «Ejemplo de comando optimizado para máquinas analíticas (16 workers, 64GB RAM):»log2timeline.py --workers 16 --buffer_size 2048M --status_view linear /opt/forensics/cases/case-001/my_timeline.plaso /opt/forensics/cases/case-001/image.E013. Případ 2: Filtrování při příjmu (Rychlé třídění souborů)
Sección titulada «3. Casuística 2: Filtrado en la Ingesta (Triaje Rápido de Archivos)»Při okamžitých zásahích nebo analýzách typu triage je vysoce neefektivní zpracovávat miliony dočasných souborů, dočasných souborů prohlížeče nebo irelevantních systémových souborů. Zajímají nás pouze artefakty spuštění a Windows registr.
Inženýrské řešení
Sección titulada «Solución de Ingeniería»Pomocí parametru --file_filter můžeme instruovat Plaso, aby indexoval a analyzoval výhradně cesty, které odpovídají šabloně filtru kolekce:
--file_filter <CAMINO_AL_ARCHIVO_FILTRO>- Poznámka: Tento filtr nepracuje se složitými regulárními výrazy, ale ověřuje, zda cesta k souboru obsaženému v obraze začíná některým z řádků v textovém filtru.
Praktický příklad pro rychlé třídění (triage) Windows:
Sección titulada «Ejemplo Práctico para Triaje Rápido de Windows:»- Crea un archivo de texto de directiva llamado
/opt/forensics/cases/case-001/triage_filter.txtcon el siguiente listado de rutas clave:/Windows/System32/config//Users/%/NTUSER.DAT/Users/%/AppData/Local/Microsoft/Windows/UsrClass.dat/Users/%/AppData/Roaming/Microsoft/Windows/Recent//Users/%/AppData/Local/Microsoft/Windows/WebCache//Windows/Prefetch/ - Ejecuta la ingesta de Plaso llamando al filtro preparado:
Ventana de terminal log2timeline.py --file_filter /opt/forensics/cases/case-001/triage_filter.txt /opt/forensics/cases/case-001/my_triage_timeline.plaso /opt/forensics/cases/case-001/image.E01
Tímto krokem se přeskočí 90 % irelevantních uživatelských a systémových souborů, což zkrátí dobu zpracování z 24 hodin na méně než 30 minut.
4. Případ 3: Filtrování na základě signatur YARA
Sección titulada «4. Casuística 3: Filtrado Basado en Firmas YARA»Je vyžadováno automatické klasifikování, detekce a označování jakýchkoli souborů, které odpovídají škodlivým pravidlům nebo signaturám během stejné fáze ingestu a vytváření časové osy.
Inženýrské řešení
Sección titulada «Solución de Ingeniería»Plaso může načítat pravidla YARA za běhu a vyhodnotit každý analyzovaný soubor před jeho indexováním:
# Ejecutar ingesta evaluando firmas yaralog2timeline.py --yara_rules /opt/forensics/rules/custom-signatures.yar /opt/forensics/cases/case-001/my_timeline.plaso /opt/forensics/cases/case-001/image.E01Pokud binární soubor (např.: c:\temp\mimikatz.exe) odpovídá některému z pravidel obsažených v souboru signatur, Plaso okamžitě vygeneruje v časové ose událost s data_type „fs:yara_match“. To umožňuje přímo korelovat datum vzniku hrozby s nedávnými síťovými připojeními nebo změnami v registru.
5. Případ 4: Rozšířená extrakce hashů a prostředků
Sección titulada «5. Casuística 4: Extracción Ampliada de Hashes y Recursos»V případě hloubkové analýzy malwaru nebo potřeby korelovat popisný text ID událostí Windows (které ve výchozím nastavení zobrazují pouze číselné kódy).
Inženýrské řešení
Sección titulada «Solución de Ingeniería»Můžeme vynutit výpočet hashů souborů během příjmu a vynutit překlad řetězců souborů EVTX:
# Calcular hashes SHA-1 y SHA-256 de todos los archivos en la ingestalog2timeline.py --hashers "sha1,sha256" ...
# Extraer texto y descripciones completas de los mensajes de los logs EVTX de Windowslog2timeline.py --extract_winevt_resources ...6. Případ 5: Ladění a správa chyb
Sección titulada «6. Casuística 5: Depuración y Gestión de Errores»Pokud úloha selže kvůli poškození protokolů nebo občasným zablokováním, izolujte proces nebo deaktivujte frontu ZeroMQ (zvláště užitečné ve virtuálních počítačích, které trpí úzkými hrdly na lokálních soketech):
# Redirigir todas las salidas de depuración a un log físico detalladolog2timeline.py --log_file /opt/forensics/cases/case-001/plaso_debug.log ...
# Desactivar la cola de red interna de ZeroMQ si experimentas congelacioneslog2timeline.py --disable_zeromq ...
