本文主要介绍下IOMMU的相关知识点，相关细节，将在后续的文章中，结合代码，详细讲解。

本文内容是对相关材料的汇总，并非原创。详情参见文章末尾的参考资料。

1. 什么是IOMMU

IOMMU（Input/Output Memory Management Unit）是一个内存管理单元（Memory Management Unit），它的作用是连接DMA-capable I/O总线（Direct Memory Access-capable I/O Bus）和主存（main memory）。传统的内存管理单元会把CPU访问的虚拟地址转化成实际的物理地址。而IOMMU则是把设备（device）访问的虚拟地址转化成物理地址。

2. 为什么要有IOMMU

首先，我们看下没有IOMMU的世界吧。

2.1 physical DMA without IOMMU

  • 一些设备需要大量的物理连续内存，但是os无法为其分配。可以有如下解决方案：
    • 在内核启动是为设备保留内存
    • 将MMU内嵌到设备中，如GPU
  • 一些设备有DMA寻址限制，例如，只支持32位的DMA寻址。可以有如下解决方案：
  • 没有内存保护机制，设备可能会错误地访问内存地址
  • 不能支持PCI设备的pass-through

接下来，我们看下拥有IOMMU的世界吧。

2.2 with IOMMU

  • 使用更大的DMA寻址空间
    • 每个设备都用自己独立的DMA内存寻址空间
  • 使用更大的连续DMA内存
    • 可以将非连续的物理内存映射到连续的DMA内存空间中
    • 避免使用scatter-gather list
  • 避免使用Bounce buffer
  • 提供了访问内存保护机制
    • 防止设备错误地访问内存
  • 支持PCI设备的pass-through

3. IOMMU在虚拟化中的用途

IOMMU的一个重要用途是在虚拟化技术（virtualization）：虚拟机上运行的操作系统（guest OS）通常不知道它所访问的host-physical内存地址。如果要进行DMA操作，就有可能破坏内存，因为实际的硬件（hardware）不知道guest-physical和host-physical内存地址之间的映射关系。IOMMU根据guest-physical和host-physical内存地址之间的转换表（translation table），re-mapping硬件访问的地址，就可以解决这个问题。

在AMD的VIRTUALIZING IO THROUGH THE IO MEMORY MANAGEMENT UNIT (IOMMU)文档中，也有一个更全面的总结图：

引入虚拟化后，带来的问题是：设备看到的是GPA(guest physical address)，但是访问的是HPA(host physical address)。

3.1 per-BDF DMA remapping

DMA Remapping通过IOMMU页表方式将直通设备对内存的访问限制到特定的domain中，在提高IO性能的同时完成了直通设备的隔离，保证了直通设备DMA的安全性。

参考资料：

  1. Kai Huang mail.kai.huang at gmail.com
  2. 什么是IOMMU？
  3. Software attacks against Intel(R) VT-d technology
  4. VT-d Interrupt Remapping
  5. IOMMU introduction
  6. Input–output memory management unit