假设我想对两个程序进行基准测试:foo.py和bar.皮耶.
Are a couple thousand runs and the respective averages of time python foo.py and time python bar.py adequate enough for profiling and comparing their speed?
Edit: Additionally, if the execution of each program was sub-second (assume it wasn't for the above), would time still be okay to use?
time为运行超过1秒的基准测试生成了足够好的时间，否则与运行时相比，创建一个进程所需的时间可能会很长.
然而，在进行基准测试时，你应该注意上下文切换.也就是说，另一个进程可能正在使用CPU，从而与基准测试争夺CPU，并增加其运行时间.为了避免与其他进程争用，您应该运行如下基准:
sudo chrt -f 99 /usr/bin/time --verbose <benchmark>
或
sudo chrt -f 99 perf stat -ddd <benchmark>
sudo chrt -f 99以优先级99在FIFO实时类中运行基准测试，这使您的进程成为最高优先级进程，并避免了上下文切换(您可以更改/etc/security/limits.conf，这样就不需要特权进程来使用实时优先级).
它还让time报告所有可用的统计数据，包括基准测试中发生的上下文切换的数量，通常应该是0，否则您可能希望重新运行基准测试.
perf stat -ddd甚至比/usr/bin/time更具信息性，并显示每周期指令、分支和缓存未命中等信息.
最好禁用CPU频率zoom 和提升，以便在基准测试期间CPU频率保持不变，以获得一致的结果.