Ir al contenido

高级技术与Plaso数据摄入(log2timeline.py)

专家级技术:优化数据摄入性能、收集过滤器和Plaso中的YARA签名分析

0阅读

本文件假设您已经掌握了Plaso基础手册中的概念(基本时间线创建、时区、解析器和VSS)

我们将重点介绍< strong >高级案例< /strong >:如何最大限度地优化CPU性能,如何在文件摄入阶段< em >之前< /em >过滤数据,如何通过YARA规则提取签名信息,以及如何管理大规模法医调查中的日志错误。


分析1TB或更大的磁盘可能需要数天时间。优化Plaso的并行引擎可将关键的事件响应时间缩短至数小时。

Plaso原生支持多进程。我们可以明确指定CPU的工作进程数(< em >workers< /em >)并调整内存缓冲区的大小:

  • ✔ --workers <NÚMERO>:指定用于执行底层提取与分析的同时运行的进程数量。
    • 策略建议:建议将 worker 数量设置为 CPU 物理核心总数(例如:--workers 8)。对于压缩的 E01 镜像,处理速度可能受解压瓶颈限制;而对于挂载在快速 SSD 上的 RAW 磁盘镜像,worker 越多,I/O 吞吐越高。
  • ✔ --buffer_size <TAMAÑO>:控制每个 worker 使用的中间传输缓冲区大小(单位为 MB)。默认值为 1024MB。
    • 策略建议:在配备大容量内存的分析系统(例如:64 GB)中,可将该值提升至 --buffer_size 2048M,以提升性能并减少热写入磁盘。
Ventana de terminal
log2timeline.py --workers 16 --buffer_size 2048M --status_view linear /opt/forensics/cases/case-001/my_timeline.plaso /opt/forensics/cases/case-001/image.E01

在即时响应干预或< em >triage< /em >分析中,处理数百万个临时文件、浏览器临时文件或无关系统文件非常低效。我们只关注执行痕迹和Windows日志。

通过 --file_filter 参数,我们可以指示 Plaso 仅对符合集合过滤模板的路径进行索引和分析:

Ventana de terminal
--file_filter <CAMINO_AL_ARCHIVO_FILTRO>
  • < em >注意:< /em >此过滤器不使用复杂正则表达式,而是验证镜像中的文件路径< em >是否以< /em >过滤器文本文件中的某一行开头。
  1. 创建一个名为 /opt/forensics/cases/case-001/triage_filter.txt 的文本策略文件,其中包含以下关键路径列表:
    /Windows/System32/config/
    /Users/%/NTUSER.DAT
    /Users/%/AppData/Local/Microsoft/Windows/UsrClass.dat
    /Users/%/AppData/Roaming/Microsoft/Windows/Recent/
    /Users/%/AppData/Local/Microsoft/Windows/WebCache/
    /Windows/Prefetch/
  2. 调用已准备好的过滤器执行 Plaso 摄取:
    Ventana de terminal
    log2timeline.py --file_filter /opt/forensics/cases/case-001/triage_filter.txt /opt/forensics/cases/case-001/my_triage_timeline.plaso /opt/forensics/cases/case-001/image.E01

< em >通过此操作,将跳过90%的用户和系统无关文件,将处理时间从24小时减少到30分钟以内。


需要在摄入和时间线构建阶段同时分类、检测和自动标记任何匹配恶意规则或签名的文件。

Plaso可以热加载YARA规则并在索引前评估每个分析文件:

Ventana de terminal
# Ejecutar ingesta evaluando firmas yara
log2timeline.py --yara_rules /opt/forensics/rules/custom-signatures.yar /opt/forensics/cases/case-001/my_timeline.plaso /opt/forensics/cases/case-001/image.E01

如果某个二进制文件(例如:c:\temp\mimikatz.exe)与签名文件中的任何规则匹配,Plaso 将立即在时间线中生成一个带有 data_type “fs:yara_match” 的事件。这允许直接将威胁的创建日期与附近的网络连接或注册表修改进行关联。


在恶意软件深度分析或需要关联Windows事件ID描述(默认仅显示数字代码)时。

我们可以强制在摄入期间计算文件哈希并强制解析EVTX文件的字符串。

Ventana de terminal
# Calcular hashes SHA-1 y SHA-256 de todos los archivos en la ingesta
log2timeline.py --hashers "sha1,sha256" ...
# Extraer texto y descripciones completas de los mensajes de los logs EVTX de Windows
log2timeline.py --extract_winevt_resources ...

如果任务因日志损坏或间歇性阻塞而失败,请隔离进程或禁用ZeroMQ队列(尤其适用于在本地套接字上遇到瓶颈的虚拟机):

Ventana de terminal
# Redirigir todas las salidas de depuración a un log físico detallado
log2timeline.py --log_file /opt/forensics/cases/case-001/plaso_debug.log ...
# Desactivar la cola de red interna de ZeroMQ si experimentas congelaciones
log2timeline.py --disable_zeromq ...