应用层跟踪库

[English]

概述

ESP-IDF 中提供了应用层跟踪功能,用于分析应用程序的行为。这一功能在相应的库中实现,可以通过 menuconfig 开启。此功能允许用户在程序运行开销很小的前提下,通过 JTAG、UART 或 USB 接口在主机和 ESP32 之间传输任意数据。用户也可同时使用 JTAG 和 UART 接口。UART 接口主要用于连接 SEGGER SystemView 工具(参见 SystemView)。

开发人员可以使用这一功能库将应用程序的运行状态发送给主机,在运行时接收来自主机的命令或者其他类型的信息。该库的主要使用场景有:

  1. 收集来自特定应用程序的数据。具体请参阅 特定应用程序的跟踪

  2. 记录到主机的轻量级日志。具体请参阅 记录日志到主机

  3. 系统行为分析。具体请参阅 基于 SEGGER SystemView 的系统行为分析

  4. 获取源代码覆盖率。具体请参阅 Gcov(源代码覆盖)

使用 JTAG 接口的跟踪组件工作示意图如下所示:

Tracing Components when Working Over JTAG

使用 JTAG 接口的跟踪组件

运行模式

该库支持两种运行模式:

后验模式: 后验模式为默认模式,该模式不需要和主机进行交互。在这种模式下,跟踪模块不会检查主机是否已经从 HW UP BUFFER 缓冲区读走所有数据,而是直接使用新数据覆盖旧数据。如果用户仅对最新的跟踪数据感兴趣,例如想要分析程序在崩溃之前的行为,则推荐使用该模式。主机可以稍后根据用户的请求来读取数据,例如在使用 JTAG 接口的情况下,通过特殊的 OpenOCD 命令进行读取。

流模式: 当主机连接到 ESP32 时,跟踪模块会进入此模式。在这种模式下,跟踪模块在新数据写入 HW UP BUFFER 之前会检查其中是否有足够的空间,并在必要的时候等待主机读取数据并释放足够的内存。最大等待时间是由用户传递给相应 API 函数的超时时间参数决定的。因此当应用程序尝试使用有限的最大等待时间值来将数据写入跟踪缓冲区时,这些数据可能会被丢弃。尤其需要注意的是,如果在对时效要求严格的代码中(如中断处理函数、操作系统调度等)指定了无限的超时时间,将会导致系统故障。为了避免丢失此类关键数据,开发人员可以在 menuconfig 中开启 CONFIG_APPTRACE_PENDING_DATA_SIZE_MAX 选项,以启用额外的数据缓冲区。此宏还指定了在上述条件下可以缓冲的数据大小,它有助于缓解由于 USB 总线拥塞等原因导致的向主机传输数据间歇性减缓的状况。但是,当跟踪数据流的平均比特率超出硬件接口的能力时,该选项无法发挥作用。

配置选项与依赖项

使用此功能需要在主机端和目标端进行以下配置:

  1. 主机端: 应用程序跟踪通过 JTAG 来完成,因此需要在主机上安装并运行 OpenOCD。详细信息请参阅 JTAG 调试

  2. 目标端: 在 menuconfig 中开启应用程序跟踪功能。前往 Component config > Application Level Tracing 菜单,选择跟踪数据的传输目标(具体用于传输的硬件接口:JTAG 和/或 UART),选择任一非 None 的目标都会自动开启 CONFIG_APPTRACE_ENABLE 这个选项。对于 UART 接口,用户必须定义波特率、TX 和 RX 管脚及其他相关参数。

备注

为了实现更高的数据速率并降低丢包率,建议优化 JTAG 的时钟频率,使其达到能够稳定运行的最大值。详细信息请参阅 优化 JTAG 的速度

以下为前述未提及的另外两个 menuconfig 选项:

  1. Threshold for flushing last trace data to host on panic (CONFIG_APPTRACE_POSTMORTEM_FLUSH_THRESH)。使用 JTAG 接口时,此选项是必选项。在该模式下,跟踪数据以 16 KB 数据块的形式暴露给主机。在后验模式中,一个块被填充后会被暴露给主机,同时之前的块不再可用。也就是说,跟踪数据以 16 KB 的粒度进行覆盖。发生 Panic 时,当前输入块的最新数据将会被暴露给主机,主机可以读取数据以进行后续分析。如果系统发生 Panic 时,仍有少量数据还没来得及暴露给主机,那么之前收集的 16 KB 数据将丢失,主机只能获取少部分的最新跟踪数据,从而可能无法诊断问题。此 menuconfig 选项有助于避免此类情况,它可以控制发生 Panic 时刷新数据的阈值。例如,用户可以设置需要不少于 512 字节的最新跟踪数据,如果在发生 Panic 时待处理的数据少于 512 字节,则数据不会被刷新,也不会覆盖之前的 16 KB 数据。该选项仅在后验模式和使用 JTAG 工作时可发挥作用。

  2. Timeout for flushing last trace data to host on panic (CONFIG_APPTRACE_ONPANIC_HOST_FLUSH_TMO)。该选项仅在流模式下才可发挥作用,它可用于控制跟踪模块在发生 Panic 时等待主机读取最新数据的最长时间。

  3. UART RX/TX ring buffer size (CONFIG_APPTRACE_UART_TX_BUFF_SIZE)。缓冲区的大小取决于通过 UART 传输的数据量。

  4. UART TX message size (:ref:CONFIG_APPTRACE_UART_TX_MSG_size)。要传输的单条消息的最大尺寸。

如何使用此库

该库提供了用于在主机和 ESP32 之间传输任意数据的 API。在 menuconfig 中启用该库后,目标应用程序的跟踪模块会在系统启动时自动初始化。因此,用户需要做的就是调用相应的 API 来发送、接收或者刷新数据。

特定应用程序的跟踪

通常,用户需要决定在每个方向上待传输数据的类型以及如何解析(处理)这些数据。要想在目标和主机之间传输数据,则需执行以下几个步骤:

  1. 在目标端,用户需要实现将跟踪数据写入主机的算法。下面的代码片段展示了如何执行此操作。

    #include "esp_app_trace.h"
    ...
    char buf[] = "Hello World!";
    esp_err_t res = esp_apptrace_write(ESP_APPTRACE_DEST_TRAX, buf, strlen(buf), ESP_APPTRACE_TMO_INFINITE);
    if (res != ESP_OK) {
        ESP_LOGE(TAG, "Failed to write data to host!");
        return res;
    }
    

    esp_apptrace_write() 函数使用 memcpy 把用户数据复制到内部缓存中。在某些情况下,使用 esp_apptrace_buffer_get()esp_apptrace_buffer_put() 函数会更加理想,它们允许开发人员自行分配缓冲区并填充。下面的代码片段展示了如何执行此操作。

    #include "esp_app_trace.h"
    ...
    int number = 10;
    char *ptr = (char *)esp_apptrace_buffer_get(ESP_APPTRACE_DEST_TRAX, 32, 100/*tmo in us*/);
    if (ptr == NULL) {
        ESP_LOGE(TAG, "Failed to get buffer!");
        return ESP_FAIL;
    }
    sprintf(ptr, "Here is the number %d", number);
    esp_err_t res = esp_apptrace_buffer_put(ESP_APPTRACE_DEST_TRAX, ptr, 100/*tmo in us*/);
    if (res != ESP_OK) {
        /* in case of error host tracing tool (e.g. OpenOCD) will report incomplete user buffer */
        ESP_LOGE(TAG, "Failed to put buffer!");
        return res;
    }
    

    另外,根据实际项目的需要,用户可能希望从主机接收数据。下面的代码片段展示了如何执行此操作。

    #include "esp_app_trace.h"
    ...
    char buf[32];
    char down_buf[32];
    size_t sz = sizeof(buf);
    
    /* config down buffer */
    esp_apptrace_down_buffer_config(down_buf, sizeof(down_buf));
    /* check for incoming data and read them if any */
    esp_err_t res = esp_apptrace_read(ESP_APPTRACE_DEST_TRAX, buf, &sz, 0/*do not wait*/);
    if (res != ESP_OK) {
        ESP_LOGE(TAG, "Failed to read data from host!");
        return res;
    }
    if (sz > 0) {
        /* we have data, process them */
        ...
    }
    

    esp_apptrace_read() 函数使用 memcpy 把主机端的数据复制到用户缓存区。在某些情况下,使用 esp_apptrace_down_buffer_get()esp_apptrace_down_buffer_put() 函数可能更为理想。它们允许开发人员占用一块读缓冲区并就地进行有关处理操作。下面的代码片段展示了如何执行此操作。

    #include "esp_app_trace.h"
    ...
    char down_buf[32];
    uint32_t *number;
    size_t sz = 32;
    
    /* config down buffer */
    esp_apptrace_down_buffer_config(down_buf, sizeof(down_buf));
    char *ptr = (char *)esp_apptrace_down_buffer_get(ESP_APPTRACE_DEST_TRAX, &sz, 100/*tmo in us*/);
    if (ptr == NULL) {
        ESP_LOGE(TAG, "Failed to get buffer!");
        return ESP_FAIL;
    }
    if (sz > 4) {
        number = (uint32_t *)ptr;
        printf("Here is the number %d", *number);
    } else {
        printf("No data");
    }
    esp_err_t res = esp_apptrace_down_buffer_put(ESP_APPTRACE_DEST_TRAX, ptr, 100/*tmo in us*/);
    if (res != ESP_OK) {
        /* in case of error host tracing tool (e.g. OpenOCD) will report incomplete user buffer */
        ESP_LOGE(TAG, "Failed to put buffer!");
        return res;
    }
    
  2. 下一步是编译应用程序的镜像,并将其下载到目标板上。这一步可以参考文档 构建并烧写

  3. 运行 OpenOCD(参见 JTAG 调试)。

  4. 连接到 OpenOCD 的 telnet 服务器。用户可在终端执行命令 telnet <oocd_host> 4444。如果用户是在运行 OpenOCD 的同一台机器上打开 telnet 会话,可以使用 localhost 替换上面命令中的 <oocd_host>

  5. 使用特殊的 OpenOCD 命令开始收集待跟踪的命令。此命令将传输跟踪数据并将其重定向到指定的文件或套接字(当前仅支持文件作为跟踪数据目标)。相关命令的说明,请参阅 启动调试器

  6. 最后,处理接收到的数据。由于数据格式由用户自己定义,本文档中省略数据处理的具体流程。数据处理的范例可以参考位于 $IDF_PATH/tools/esp_app_trace 下的 Python 脚本 apptrace_proc.py (用于功能测试)和 logtrace_proc.py (请参阅 记录日志到主机 章节中的详细信息)。

OpenOCD 应用程序跟踪命令

HW UP BUFFER 在用户数据块之间共享,并且会代替 API 调用者(在任务或者中断上下文中)填充分配到的内存。在多线程环境中,正在填充缓冲区的任务/中断可能会被另一个高优先级的任务/中断抢占,因此主机可能会读取到还未准备好的用户数据。对此,跟踪模块在所有用户数据块之前添加一个数据头,其中包含有分配的用户缓冲区的大小(2 字节)和实际写入的数据长度(2 字节),也就是说数据头总共长 4 字节。负责读取跟踪数据的 OpenOCD 命令在读取到不完整的用户数据块时会报错,但是无论如何,它都会将整个用户数据块(包括还未填充的区域)的内容放到输出文件中。

下文介绍了如何使用 OpenOCD 应用程序跟踪命令。

备注

目前,OpenOCD 还不支持将任意用户数据发送到目标的命令。

命令用法:

esp apptrace [start <options>] | [stop] | [status] | [dump <cores_num> <outfile>]

子命令:

start

开始跟踪(连续流模式)。

stop

停止跟踪。

status

获取跟踪状态。

dump

转储所有后验模式的数据。

Start 子命令的语法:

start <outfile> [poll_period [trace_size [stop_tmo [wait4halt [skip_size]]]]

outfile

用于保存来自两个 CPU 的数据文件的路径,该参数需要具有以下格式: file://path/to/file

poll_period

轮询跟踪数据的周期(单位:毫秒),如果大于 0 则以非阻塞模式运行。默认为 1 毫秒。

trace_size

最多要收集的数据量(单位:字节),接收到指定数量的数据后将会停止跟踪。默认为 -1(禁用跟踪大小停止触发器)。

stop_tmo

空闲超时(单位:秒),如果指定的时间段内都没有数据就会停止跟踪。默认为 -1(禁用跟踪超时停止触发器)。还可以将其设置为比目标跟踪命令之间的最长暂停值更长的值(可选)。

wait4halt

如果设置为 0 则立即开始跟踪,否则命令会先等待目标停止(复位、打断点等),然后对其进行自动恢复并开始跟踪。默认值为 0。

skip_size

开始时要跳过的字节数,默认为 0。

备注

如果 poll_period 为 0,则在跟踪停止之前,OpenOCD 的 telnet 命令将不可用。必须通过复位电路板或者在 OpenOCD 的窗口中(非 telnet 会话窗口)使用快捷键 Ctrl+C。另一种选择是设置 trace_size 并等待,当收集到指定数据量时,跟踪会自动停止。

命令使用示例:

  1. 将 2048 个字节的跟踪数据收集到 trace.log 文件中,该文件将保存在 openocd-esp32 目录中。

    esp apptrace start file://trace.log 1 2048 5 0 0
    

    跟踪数据会被检索并以非阻塞的模式保存到文件中,如果收集满 2048 字节的数据或者在 5 秒内都没有新的数据,那么该过程就会停止。

    备注

    在将数据提供给 OpenOCD 之前,会对其进行缓冲。如果看到 “Data timeout!” 的消息,则表示目标可能在超时之前没有向 OpenOCD 发送足够的数据以清空缓冲区。要解决这个问题,可以增加超时时间或者使用函数 esp_apptrace_flush() 以特定间隔刷新数据。

  2. 在非阻塞模式下无限地检索跟踪数据。

    esp apptrace start file://trace.log 1 -1 -1 0 0
    

    对收集数据的大小没有限制,也不设置超时时间。要停止此过程,可以在 OpenOCD 的 telnet 会话窗口中发送 esp apptrace stop 命令,或者在 OpenOCD 窗口中使用快捷键 Ctrl+C。

  3. 检索跟踪数据并无限期保存。

    esp apptrace start file://trace.log 0 -1 -1 0 0
    

    在跟踪停止之前,OpenOCD 的 telnet 会话窗口将不可用。要停止跟踪,请在 OpenOCD 的窗口中使用快捷键 Ctrl+C。

  4. 等待目标停止,然后恢复目标的操作并开始检索数据。当收集满 2048 字节的数据后就停止:

    esp apptrace start file://trace.log 0 2048 -1 1 0
    

    想要复位后立即开始跟踪,请使用 OpenOCD 的 reset halt 命令。

记录日志到主机

记录日志到主机是 ESP-IDF 中一个非常实用的功能:通过应用层跟踪库将日志保存到主机端。某种程度上,这也算是一种半主机 (semihosting) 机制,相较于调用 ESP_LOGx 将待打印的字符串发送到 UART 的日志记录方式,此功能将大部分工作转移到了主机端,从而减少了本地工作量。

ESP-IDF 的日志库会默认使用类 vprintf 的函数将格式化的字符串输出到专用的 UART,一般来说涉及以下几个步骤:

  1. 解析格式字符串以获取每个参数的类型。

  2. 根据其类型,将每个参数都转换为字符串。

  3. 格式字符串与转换后的参数一起发送到 UART。

虽然可以对类 vprintf 函数进行一定程度的优化,但由于在任何情况下都必须执行上述步骤,并且每个步骤都会消耗一定的时间(尤其是步骤 3),所以经常会发生以下这种情况:向程序中添加额外的打印信息以诊断问题,却改变了应用程序的行为,使得问题无法复现。在最严重的情况下,程序无法正常工作,最终导致报错甚至挂起。

想要解决此类问题,可以使用更高的波特率或者其他更快的接口,并将字符串格式化的工作转移到主机端。

通过应用层跟踪库的 esp_apptrace_vprintf 函数,可以将日志信息发送到主机,该函数不执行格式字符串和参数的完全解析,而仅仅计算传递参数的数量,并将它们与格式字符串地址一起发送给主机。主机端会通过一个特殊的 Python 脚本来处理并打印接收到的日志数据。

局限

目前通过 JTAG 实现记录日志还存在以下几点局限:

  1. 不支持使用 ESP_EARLY_LOGx 宏进行跟踪。

  2. 不支持大小超过 4 字节的 printf 参数(例如 doubleuint64_t)。

  3. 仅支持 .rodata 段中的格式字符串和参数。

  4. 最多支持 256 个 printf 参数。

如何使用

为了使用跟踪模块来记录日志,用户需要执行以下步骤:

  1. 在目标端,需要安装特殊的类 vprintf 函数 esp_apptrace_vprintf(),该函数负责将日志数据发送给主机,使用方法为 esp_log_set_vprintf(esp_apptrace_vprintf);。如需将日志数据再次重定向给 UART,请使用 esp_log_set_vprintf(vprintf);

  2. 按照 特定应用程序的跟踪 章节中的第 2-5 步进行操作。

  3. 打印接收到的日志记录,请在终端运行以下命令:$IDF_PATH/tools/esp_app_trace/logtrace_proc.py /path/to/trace/file /path/to/program/elf/file

Log Trace Processor 命令选项

命令用法:

logtrace_proc.py [-h] [--no-errors] <trace_file> <elf_file>

位置参数(必要):

trace_file

日志跟踪文件的路径。

elf_file

程序 ELF 文件的路径。

可选参数:

-h, --help

显示此帮助信息并退出。

--no-errors, -n

不打印错误信息。

基于 SEGGER SystemView 的系统行为分析

ESP-IDF 中另一个基于应用层跟踪库的实用功能是系统级跟踪,它会生成与 SEGGER SystemView 工具 相兼容的跟踪信息。SEGGER SystemView 是一款实时记录和可视化工具,用来分析应用程序运行时的行为,可通过 UART 接口实时查看事件。

如何使用

若需使用这个功能,需要在 menuconfig 中开启 CONFIG_APPTRACE_SV_ENABLE 选项,具体路径为 Component config > Application Level Tracing > FreeRTOS SystemView Tracing。同一菜单栏下还开启了其它几个选项:

  1. SytemView destination。选择需要使用的接口:JTAG 或 UART。使用 UART 接口时,可以将 SystemView 应用程序直接连接到 ESP32 并实时接收数据。

  2. ESP32 timer to use as SystemView timestamp sourceCONFIG_APPTRACE_SV_TS_SOURCE)。选择 SystemView 事件使用的时间戳来源。在单核模式下,使用 ESP32 内部的循环计数器生成时间戳,其最大的工作频率是 240 MHz(时间戳粒度大约为 4 ns)。在双核模式下,使用工作在 40 MHz 的外部定时器,因此时间戳粒度为 25 ns。

  3. 可以单独启用或禁用的 SystemView 事件集合 (CONFIG_APPTRACE_SV_EVT_XXX):

    • Trace Buffer Overflow Event

    • ISR Enter Event

    • ISR Exit Event

    • ISR Exit to Scheduler Event

    • Task Start Execution Event

    • Task Stop Execution Event

    • Task Start Ready State Event

    • Task Stop Ready State Event

    • Task Create Event

    • Task Terminate Event

    • System Idle Event

    • Timer Enter Event

    • Timer Exit Event

ESP-IDF 中已经包含了所有用于生成兼容 SystemView 跟踪信息的代码,用户只需配置必要的项目选项(如上所示),然后构建、烧写映像到目标板,接着参照前面的介绍,使用 OpenOCD 收集数据。

  1. 想要通过 UART 接口进行实时跟踪,请在菜单配置选项 Component config > Application Level Tracing > FreeRTOS SystemView Tracing 中选择 Pro 或 App CPU。

OpenOCD SystemView 跟踪命令选项

命令用法:

esp sysview [start <options>] | [stop] | [status]

子命令:

start

开启跟踪(连续流模式)。

stop

停止跟踪。

status

获取跟踪状态。

Start 子命令语法:

start <outfile1> [outfile2] [poll_period [trace_size [stop_tmo]]]

outfile1

保存 PRO CPU 数据的文件路径。此参数需要具有如下格式:file://path/to/file

outfile2

保存 APP CPU 数据的文件路径。此参数需要具有如下格式:file://path/to/file

poll_period

跟踪数据的轮询周期(单位:毫秒)。如果该值大于 0,则命令以非阻塞的模式运行。默认为 1 毫秒。

trace_size

最多要收集的数据量(单位:字节)。当收到指定数量的数据后,将停止跟踪。默认值是 -1(禁用跟踪大小停止触发器)。

stop_tmo

空闲超时(单位:秒)。如果指定的时间内没有数据,将停止跟踪。默认值是 -1(禁用跟踪超时停止触发器)。

备注

如果 poll_period 为 0,则在跟踪停止之前,OpenOCD 的 telnet 命令行将不可用。你需要复位板卡,或者在 OpenOCD 的窗口(非 telnet 会话窗口)输入 Ctrl+C 命令,手动停止跟踪。另一个办法是设置 trace_size,等到收集满指定数量的数据后自动停止跟踪。

命令使用示例:

  1. 将 SystemView 跟踪数据收集到文件 pro-cpu.SVDatpro-cpu.SVDat 中。这些文件会被保存在 openocd-esp32 目录中。

    esp sysview start file://pro-cpu.SVDat file://app-cpu.SVDat
    

    跟踪数据被检索并以非阻塞的方式保存。要停止此过程,需要在 OpenOCD 的 telnet 会话窗口输入 esp sysview stop 命令,也可以在 OpenOCD 窗口中按下快捷键 Ctrl+C。

  2. 检索跟踪数据并无限保存。

    esp32 sysview start file://pro-cpu.SVDat file://app-cpu.SVDat 0 -1 -1
    

    OpenOCD 的 telnet 命令行在跟踪停止前会无法使用,要停止跟踪,请在 OpenOCD 窗口使用 Ctrl+C 快捷键。

数据可视化

收集到跟踪数据后,用户可以使用特殊的工具对结果进行可视化并分析程序行为。

遗憾的是,SystemView 不支持从多个核心进行跟踪。所以当使用 JTAG 追踪双核模式下的 ESP32 时会生成两个文件:一个用于 PRO CPU,另一个用于 APP CPU。用户可以将每个文件加载到工具中单独分析。使用 UART 进行追踪时,用户可以在 menuconfig Pro 或 App 中点击 Component config > Application Level Tracing > FreeRTOS SystemView Tracing 并选择要追踪的 CPU。

在工具中单独分析每个核的跟踪数据是比较棘手的,但是 Eclipse 提供了 Impulse 插件,该插件可以加载多个跟踪文件,并且可以在同一视图中检查来自两个内核的事件。此外,与免费版的 SystemView 相比,此插件没有 1,000,000 个事件的限制。

关于如何安装、配置 Impulse 并使用它来可视化来自单个核心的跟踪数据,请参阅 官方教程

备注

ESP-IDF 使用自己的 SystemView FreeRTOS 事件 ID 映射,因此用户需要将 $SYSVIEW_INSTALL_DIR/Description/SYSVIEW_FreeRTOS.txt 替换成 $IDF_PATH/tools/esp_app_trace/SYSVIEW_FreeRTOS.txt。在使用上述链接配置 SystemView 序列化程序时,也应该使用该特定文件的内容。

配置 Impulse 实现双核跟踪

在安装好 Impulse 插件并确保 Impulse 能够在单独的选项卡中成功加载每个核心的跟踪文件后,用户可以添加特殊的 Multi Adapter 端口并将这两个文件加载到一个视图中。为此,用户需要在 Eclipse 中执行以下操作:

  1. 打开 Signal Ports 视图,前往 Windows > Show View > Other 菜单,在 Impulse 文件夹中找到 Signal Ports 视图并双击。

  2. Signal Ports 视图中,右键 Ports 并选择 Add,然后选择 New Multi Adapter Port

  3. 在打开的对话框中按下 add 按钮,选择 New Pipe/File

  4. 在打开的对话框中选择 SystemView Serializer 并设置 PRO CPU 跟踪文件的路径,按下 OK 保存设置。

  5. 对 APP CPU 的跟踪文件重复步骤 3 和 4。

  6. 双击创建的端口,会打开此端口的视图。

  7. 单击 Start/Stop Streaming 按钮,数据将会被加载。

  8. 使用 Zoom OutZoom InZoom Fit 按钮来查看数据。

  9. 有关设置测量光标和其他的功能,请参阅 Impulse 官方文档

备注

如果你在可视化方面遇到了问题(未显示数据或者缩放操作异常),可以尝试删除当前的信号层次结构,再双击必要的文件或端口。Eclipse 会请求创建新的信号层次结构。

Gcov(源代码覆盖)

Gcov 和 Gcovr 简介

源代码覆盖率显示程序运行时间内执行的每一条程序执行路径的数量和频率。Gcov 是一款 GCC 工具,与编译器协同使用时,可生成日志文件,显示源文件每行的执行次数。Gcovr 是管理 Gcov 和生成代码覆盖率总结的工具。

一般来说,使用 Gcov 在主机上编译和运行程序会经过以下步骤:

  1. 使用 GCC 以及 --coverage 选项编译源代码。编译器会在编译过程中生成一个 .gcno 注释文件,该文件包含重建执行路径块图以及将每个块映射到源代码行号等信息。每个用 --coverage 选项编译的源文件都会生成自己的同名 .gcno 文件(如 main.c 在编译时会生成 main.gcno)。

  2. 执行程序。在执行过程中,程序会生成 .gcda 数据文件。这些数据文件包含了执行路径的次数统计。程序将为每个用 --coverage 选项编译的源文件生成一个 .gcda 文件(如 main.c 将生成 main.gcda)。

  3. Gcov 或 Gcovr 可用于生成基于 .gcno.gcda 和源文件的代码覆盖。Gcov 将以 .gcov 文件的形式为每个源文件生成基于文本的覆盖报告,而 Gcovr 将以 HTML 格式生成覆盖报告。

ESP-IDF 中的 Gcov 和 Gcovr 应用

在 ESP-IDF 中使用 Gcov 的过程比较复杂,因为程序不在主机上运行,而在目标机上运行。代码覆盖率数据(即 .gcda 文件)最初存储在目标机上,OpenOCD 在运行时通过 JTAG 将代码覆盖数据从目标机转储到主机上。在 ESP-IDF 中使用 Gcov 可以分为以下几个步骤:

  1. 为 Gcov 设置项目

  2. 转储代码覆盖数据

  3. 生成代码覆盖报告

为 Gcov 设置项目

编译器选项

为了获取项目中的代码覆盖率数据,必须用 --coverage 选项编译项目中的一个或多个源文件。在 ESP-IDF 中,这可以在组件级或单个源文件级实现:

  • 在组件的 CMakeLists.txt 文件中添加 target_compile_options(${COMPONENT_LIB} PRIVATE --coverage) 可确保使用 --coverage 选项编译组件中的所有源文件。

  • 在组件的 CMakeLists.txt 文件中添加 set_source_files_properties(source1.c source2.c PROPERTIES COMPILE_FLAGS --coverage) 可确保使用 --coverage 选项编译同一组件中选定的一些源文件(如 source1.csource2.c)。

当一个源文件用 --coverage 选项编译时(例如 gcov_example.c),编译器会在项目的构建目录下生成 gcov_example.gcno 文件。

项目配置

在构建有源代码覆盖的项目之前,请运行 idf.py menuconfig 以启用以下项目配置选项。

转储代码覆盖数据

一旦项目使用 --coverage 选项编译并烧录到目标机上,在应用程序运行时,代码覆盖数据将存储在目标机内部(即在跟踪存储器中)。将代码覆盖率数据从目标机转移到主机上的过程称为转储。

覆盖率数据的转储通过 OpenOCD 进行(关于如何设置和运行 OpenOCD,请参考 JTAG 调试)。由于该过程需要通过向 OpenOCD 发出命令来触发转储,因此必须打开 telnet 会话,以向 OpenOCD 发出这些命令(运行 telnet localhost 4444)。GDB 也可以代替 telnet 来向 OpenOCD 发出命令,但是所有从 GDB 发出的命令都需要以 mon <oocd_command> 为前缀。

当目标机转储代码覆盖数据时,.gcda 文件存储在项目的构建目录中。例如,如果 main 组件的 gcov_example_main.c 在编译时使用了 --coverage 选项,那么转储代码覆盖数据将在 build/esp-idf/main/CMakeFiles/__idf_main.dir/gcov_example_main.c.gcda 中生成 gcov_example_main.gcda 文件。注意,编译过程中产生的 .gcno 文件也放在同一目录下。

代码覆盖数据的转储可以在应用程序的整个生命周期内多次进行。每次转储都会用最新的代码覆盖信息更新 .gcda 文件。代码覆盖数据是累积的,因此最新的数据将包含应用程序整个生命周期中每个代码路径的总执行次数。

ESP-IDF 支持两种将代码覆盖数据从目标机转储到主机的方法:

  • 运行中实时转储

  • 硬编码转储

运行中实时转储

通过 telnet 会话调用 OpenOCD 命令 ESP32 gcov 来触发运行时的实时转储。一旦被调用,OpenOCD 将立即抢占 ESP32 的当前状态,并执行内置的 ESP-IDF Gcov 调试存根函数。调试存根函数将数据转储到主机。完成后,ESP32 将恢复当前状态。

硬编码转储

硬编码转储是由应用程序本身从程序内部调用 esp_gcov_dump() 函数触发的。在调用时,应用程序将停止并等待 OpenOCD 连接,同时检索代码覆盖数据。一旦 esp_gcov_dump() 函数被调用,主机将通过 telnet 会话执行 esp gcov dump OpenOCD 命令,该命令会将 OpenOCD 连接到 ESP32,检索代码覆盖数据,然后断开与 ESP32 的连接,从而恢复应用程序。在应用程序的生命周期中可多次触发硬编码转储。

在必要时(如应用程序初始化后或是应用程序主循环的每次迭代期间)放置 esp_gcov_dump(),当应用程序在生命周期的某刻需要代码覆盖率数据时,硬编码转储会非常有用。

GDB 可以用来在 esp_gcov_dump() 上设置断点,然后使用 gdbinit 脚本自动调用 mon esp gcov dump (关于 GDB 的使用可参考 使用命令行调试)。

以下 GDB 脚本将在 esp_gcov_dump() 处添加一个断点,然后调用 mon esp gcov dump OpenOCD 命令。

b esp_gcov_dump
commands
mon esp gcov dump
end

备注

注意,所有的 OpenOCD 命令都应该在 GDB 中以 mon <oocd_command> 方式调用。

生成代码覆盖报告

一旦代码覆盖数据被转储,.gcno.gcda 和源文件可以用来生成代码覆盖报告。该报告会显示源文件中每行被执行的次数。

Gcov 和 Gcovr 都可以用来生成代码覆盖报告。安装 Xtensa 工具链时会一起安装 Gcov,但 Gcovr 可能需要单独安装。关于如何使用 Gcov 或 Gcovr,请参考 Gcov 文档Gcovr 文档

在工程中添加 Gcovr 构建目标

用户可以在自己的工程中定义额外的构建目标,从而通过一个简单的构建命令即可更方便地生成报告。

请在工程的 CMakeLists.txt 文件中添加以下内容:

include($ENV{IDF_PATH}/tools/cmake/gcov.cmake)
idf_create_coverage_report(${CMAKE_CURRENT_BINARY_DIR}/coverage_report)
idf_clean_coverage_report(${CMAKE_CURRENT_BINARY_DIR}/coverage_report)

可使用以下命令:

  • cmake --build build/ --target gcovr-report:在 $(BUILD_DIR_BASE)/coverage_report/html 目录下生成 HTML 格式代码覆盖报告。

  • cmake --build build/ --target cov-data-clean:删除所有代码覆盖数据文件。