如何从Linux上的系统缓存中逐出文件?

时间:2020-03-06 15:01:18  来源:igfitidea点击:

运行性能测试时,文件系统缓存命中或者未命中会严重影响测试结果。因此,通常在运行此类测试之前,会将使用过的文件从系统缓存中逐出。如何在Linux上做到这一点?

澄清:如果可能,该解决方案应该不需要root特权。

解决方案

作为超级用户,我们可以执行以下操作:

要释放页面缓存:

  • 回声1> / proc / sys / vm / drop_caches

要释放牙科和inode,请执行以下操作:

  • 回声2> / proc / sys / vm / drop_caches

要释放页面缓存,牙科和索引节点,请执行以下操作:

  • 回声3> / proc / sys / vm / drop_caches

此操作不会"丢失"任何数据(在删除高速缓存之前将高速缓存写出到磁盘),但是,要确保清除所有高速缓存,请首先进行同步。例如。如果运行,则应清除所有缓存

sync; echo 3 > /proc/sys/vm/drop_caches

如我所说,只有超级用户(根)可以这样做。

关于O_DIRECT的使用:这将以另一种方式干扰结果。内核将尝试直接将DMA的文件系统数据直接传输到read()缓冲区中,这样就可以将其提交给应用程序,而无需完成任何其他复制操作。如果没有O_DIRECT,内核会将文件数据DMA DMA到页面缓存中,然后将其从页面缓存复制到read()缓冲区中。

如果应用程序确实要在生产中使用O_DIRECT,那么这很好。如果使用O_DIRECT运行性能测试,然后删除O_DIRECT进行生产,则性能测试将是不现实的。

哈,我有答案:

#include <unistd.h>
#include <fcntl.h>
int main(int argc, char *argv[]) {
  int fd;
  fd = open(argv[1], O_RDONLY);
  fdatasync(fd);
  posix_fadvise(fd, 0,0,POSIX_FADV_DONTNEED);
  close(fd);
  return 0;
}

这是从http://insights.oetiker.ch/linux/fadvise.html

如果可以将测试数据放在单独的文件系统中,则重新安装该文件系统进行测试将为我们提供空的缓存。

如果使用" user"选项在/ etc / fstab中列出了测试文件系统,则可以将其挂载到测试中而无需成为超级用户

Eric Wong提供了一个命令行实用程序,可以轻松调用posix_fadvise:

http://git.bogomips.org/cgit/pcu.git/tree/README

然后就这么简单

$ pcu-fadvise -a dontneed filename-to-evict