Zaawansowane techniki i ingestia danych przy użyciu Plaso (log2timeline.py)
Eksperckie techniki optymalizacji wydajności ingestii danych, filtrów zbierania oraz analizy sygnatur YARA w Plaso.
Techniki eksperckie dla specyficznych przypadków
Sección titulada «Técnicas de Experto para Casuísticas Específicas»1. Przegląd
Sección titulada «1. Visión General»Ten dokument zakłada, że opanowałeś już koncepcje zawarte w podręczniku podstaw Plaso (podstawowe tworzenie osi czasu, strefy czasowe, parsery i VSS).
Skupimy się na zaawansowanych przypadkach użycia: jak maksymalnie zoptymalizować wydajność procesora (CPU), jak filtrować dane przed ich przetworzeniem (podczas ingestii plików), jak wyodrębniać informacje o sygnaturach za pomocą reguł YARA oraz jak zarządzać logami błędów w badaniach informatyki śledczej na dużą skalę.
2. Przypadek 1: Optymalizacja procesora i wydajność przetwarzania
Sección titulada «2. Casuística 1: Optimización de CPU y Rendimiento de Procesamiento»Wyzwanie
Sección titulada «El Desafío»Analiza dysków o pojemności 1 TB lub większej może trwać całymi dniami. Optymalizacja równoległego silnika Plaso skraca ten krytyczny czas reakcji na incydenty do zaledwie kilku godzin.
Rozwiązanie inżynieryjne
Sección titulada «Solución de Ingeniería»Plaso natywnie obsługuje wiele procesów. Możemy jawnie zdefiniować liczbę procesów roboczych (workers) procesora oraz modulować rozmiar buforów pamięci:
- ✔
--workers <NÚMERO>: Określa liczbę równoczesnych procesów do uruchomienia w celu ekstrakcji i analizy niskiego poziomu.- Wytyczna: Zaleca się zdefiniowanie liczby procesów roboczych (workers) odpowiadającej całkowitej liczbie fizycznych rdzeni procesora (na przykład:
--workers 8). W przypadku skompresowanych obrazów E01 operacja może być ograniczona wąskim gardłem procesora dekompresyjnego. Na jednostkach RAW montowanych na szybkich dyskach SSD, im więcej procesów roboczych, tym wyższa wydajność I/O.
- Wytyczna: Zaleca się zdefiniowanie liczby procesów roboczych (workers) odpowiadającej całkowitej liczbie fizycznych rdzeni procesora (na przykład:
- ✔
--buffer_size <TAMAÑO>: Kontroluje pojemność w megabajtach bufora transferu pośredniego używanego przez każdego pracownika. Domyślnie przypisano 1024MB.- Dyrektywa: W systemach analitycznych wyposażonych w dużą ilość pamięci RAM (na przykład: 64 GB), możemy podnieść tę wartość do
--buffer_size 2048M, aby poprawić wydajność i zminimalizować zapisywanie na dysku w czasie rzeczywistym.
- Dyrektywa: W systemach analitycznych wyposażonych w dużą ilość pamięci RAM (na przykład: 64 GB), możemy podnieść tę wartość do
Przykład zoptymalizowanego polecenia dla maszyn analitycznych (16 procesów roboczych, 64 GB RAM):
Sección titulada «Ejemplo de comando optimizado para máquinas analíticas (16 workers, 64GB RAM):»log2timeline.py --workers 16 --buffer_size 2048M --status_view linear /opt/forensics/cases/case-001/my_timeline.plaso /opt/forensics/cases/case-001/image.E013. Przypadek 2: Filtrowanie podczas pozyskiwania (Szybki triage plików)
Sección titulada «3. Casuística 2: Filtrado en la Ingesta (Triaje Rápido de Archivos)»Wyzwanie
Sección titulada «El Desafío»W interwencjach typu natychmiastowa reakcja lub analizie typu triage, przetwarzanie milionów plików tymczasowych, plików tymczasowych przeglądarki lub nieistotnych plików systemowych jest wysoce nieefektywne. Interesują nas wyłącznie artefakty wykonania i rejestr Windows.
Rozwiązanie inżynieryjne
Sección titulada «Solución de Ingeniería»Za pomocą parametru --file_filter możemy instruować Plaso, aby indeksowało i analizowało wyłącznie ścieżki pasujące do szablonu filtra kolekcji:
--file_filter <CAMINO_AL_ARCHIVO_FILTRO>- Uwaga: Ten filtr nie pracuje ze złożonymi wyrażeniami regularnymi, lecz sprawdza, czy ścieżka pliku zawarta w obrazie zaczyna się od którejś z linii znajdujących się w pliku tekstowym filtra.
Praktyczny przykład szybkiego triage'u w systemie Windows:
Sección titulada «Ejemplo Práctico para Triaje Rápido de Windows:»- Utwórz plik tekstowy z dyrektywą o nazwie
/opt/forensics/cases/case-001/triage_filter.txtz następującą listą kluczowych ścieżek:/Windows/System32/config//Users/%/NTUSER.DAT/Users/%/AppData/Local/Microsoft/Windows/UsrClass.dat/Users/%/AppData/Roaming/Microsoft/Windows/Recent//Users/%/AppData/Local/Microsoft/Windows/WebCache//Windows/Prefetch/ - Uruchom import Plaso, wywołując przygotowany filtr:
Ventana de terminal log2timeline.py --file_filter /opt/forensics/cases/case-001/triage_filter.txt /opt/forensics/cases/case-001/my_triage_timeline.plaso /opt/forensics/cases/case-001/image.E01
Dzięki temu działaniu zostanie pominiętych 90% nieistotnych plików użytkownika i systemu, co skróci czas przetwarzania z 24 godzin do mniej niż 30 minut.
4. Przypadek 3: Filtrowanie oparte na sygnaturach YARA
Sección titulada «4. Casuística 3: Filtrado Basado en Firmas YARA»Wyzwanie
Sección titulada «El Desafío»Wymagane jest automatyczne klasyfikowanie, wykrywanie i etykietowanie każdego pliku, który pasuje do reguł lub złośliwych sygnatur podczas tej samej fazy ingestii i budowania osi czasu.
Rozwiązanie inżynieryjne
Sección titulada «Solución de Ingeniería»Plaso może ładować reguły YARA w locie i oceniać każdy analizowany plik przed jego zindeksowaniem:
# Ejecutar ingesta evaluando firmas yaralog2timeline.py --yara_rules /opt/forensics/rules/custom-signatures.yar /opt/forensics/cases/case-001/my_timeline.plaso /opt/forensics/cases/case-001/image.E01Jeśli plik binarny (na przykład: c:\temp\mimikatz.exe) pasuje do którejś z reguł zawartych w pliku sygnatur, Plaso natychmiast wygeneruje zdarzenie z data_type „fs:yara_match” w osi czasu. Pozwala to na bezpośrednią korelację daty powstania zagrożenia z pobliskimi połączeniami sieciowymi lub modyfikacjami rejestru.
5. Przypadek 4: Rozszerzona ekstrakcja skrótów i zasobów
Sección titulada «5. Casuística 4: Extracción Ampliada de Hashes y Recursos»Wyzwanie
Sección titulada «El Desafío»W przypadku głębokiej analizy złośliwego oprogramowania lub konieczności skorelowania tekstu opisowego identyfikatorów zdarzeń systemu Windows (które domyślnie pokazują tylko kody numeryczne).
Rozwiązanie inżynieryjne
Sección titulada «Solución de Ingeniería»Możemy wymusić obliczanie skrótów plików podczas pozyskiwania i wymusić rozwiązywanie ciągów znaków z plików EVTX:
# Calcular hashes SHA-1 y SHA-256 de todos los archivos en la ingestalog2timeline.py --hashers "sha1,sha256" ...
# Extraer texto y descripciones completas de los mensajes de los logs EVTX de Windowslog2timeline.py --extract_winevt_resources ...6. Przypadek 5: Debugowanie i zarządzanie błędami
Sección titulada «6. Casuística 5: Depuración y Gestión de Errores»Jeśli zadanie nie powiedzie się z powodu uszkodzenia dzienników lub sporadycznych blokad, wyizoluj proces lub wyłącz kolejkę ZeroMQ (szczególnie przydatne w maszynach wirtualnych, które cierpią na wąskie gardła w lokalnych gniazdach):
# Redirigir todas las salidas de depuración a un log físico detalladolog2timeline.py --log_file /opt/forensics/cases/case-001/plaso_debug.log ...
# Desactivar la cola de red interna de ZeroMQ si experimentas congelacioneslog2timeline.py --disable_zeromq ...
