← 返回目录

PageCache 有什么作用?

第 162 / 208 卷日期:

回顾前面说道文件传输过程,其中第一步都是先需要先把磁盘文件数据拷贝「内核缓冲区」里,这个「内核缓冲区」实际上是磁盘高速缓存(PageCache)。

由于零拷贝使用了 PageCache 技术,可以使得零拷贝进一步提升了性能,我们接下来看看 PageCache 是如何做到这一点的。

读写磁盘相比读写内存的速度慢太多了,所以我们应该想办法把「读写磁盘」替换成「读写内存」。于是,我们会通过 DMA 把磁盘里的数据搬运到内存里,这样就可以用读内存替换读磁盘。

但是,内存空间远比磁盘要小,内存注定只能拷贝磁盘里的一小部分数据。

那问题来了,选择哪些磁盘数据拷贝到内存呢?

我们都知道程序运行的时候,具有「局部性」,所以通常,刚被访问的数据在短时间内再次被访问的概率很高,于是我们可以用 PageCache 来缓存最近被访问的数据,当空间不足时淘汰最久未被访问的缓存。

所以,读磁盘数据的时候,优先在 PageCache 找,如果数据存在则可以直接返回;如果没有,则从磁盘中读取,然后缓存 PageCache 中。

还有一点,读取磁盘数据的时候,需要找到数据所在的位置,但是对于机械磁盘来说,就是通过磁头旋转到数据所在的扇区,再开始「顺序」读取数据,但是旋转磁头这个物理动作是非常耗时的,为了降低它的

影响,PageCache 使用了「预读功能」。

比如,假设 read 方法每次只会读 32 KB 的字节,虽然 read 刚开始只会读 0~ 32 KB 的字节,但内核会把其后面的 32~64 KB 也读取到 PageCache,这样后面读取 32~64 KB 的成本就很低,如果在 32~64

KB 淘汰出 PageCache 前,进程读取到它了,收益就非常大。

所以,PageCache 的优点主要是两个:

缓存最近被访问的数据;

预读功能;

这两个做法,将大大提高读写磁盘的性能。

但是,在传输大文件(GB 级别的文件)的时候,PageCache 会不起作用,那就白白浪费 DMA 多做的一次数据拷贝,造成性能的降低,即使使用了 PageCache 的零拷贝也会损失性能

这是因为如果你有很多 GB 级别文件需要传输,每当用户访问这些大文件的时候,内核就会把它们载入 PageCache 中,于是 PageCache 空间很快被这些大文件占满。

全站分卷索引 · 208 卷
  1. 1勘误事宜
  2. 2图灵机的工作方式
  3. 3冯诺依曼模型
  4. 4内存
  5. 5总线
  6. 6程序执行的基本过程
  7. 7a = 1 + 2 执行具体过程
  8. 8指令
  9. 9指令的类型
  10. 10指令的执行速度
  11. 11总结
  12. 12关注作者
  13. 13存储器的层次结构
  14. 14寄存器
  15. 15L1 高速缓存
  16. 16L2 高速缓存
  17. 17存储器的层次关系
  18. 18存储器之间的实际价格和性能差距
  19. 19总结
  20. 20关注作者
  21. 21CPU Cache 有多快?
  22. 22CPU Cache 的数据结构和读取过程是什么样的?
  23. 23如何写出让 CPU 跑得更快的代码?
  24. 24如何提升指令缓存的命中率?
  25. 25如果提升多核 CPU 的缓存命中率?
  26. 26总结
  27. 271.4 CPU 缓存一致性
  28. 28CPU Cache 的数据写入
  29. 29写直达
  30. 30写回
  31. 31缓存一致性问题
  32. 32总线嗅探
  33. 33总结
  34. 34关注作者
  35. 351.5 CPU 是如何执行任务的?
  36. 36CPU 如何读写数据的?
  37. 37分析伪共享的问题
  38. 38避免伪共享的方法
  39. 39CPU 如何选择线程的?
  40. 40调度类
  41. 41CPU 运行队列
  42. 42调整优先级
  43. 43总结
  44. 441.6 软中断
  45. 45中断是什么?
  46. 46系统里有哪些软中断?
  47. 47如何定位软中断 CPU 使用率过高的问题?
  48. 48总结
  49. 49关注作者
  50. 501.7 为什么 0.1 + 0.2 不等于 0.3 ?
  51. 51十进制小数与二进制的转换
  52. 52计算机是怎么存小数的?
  53. 530.1 + 0.2 == 0.3 ?
  54. 54总结
  55. 55二、操作系统结构
  56. 56Linux 的设计
  57. 57SMP
  58. 58Monolithic Kernel
  59. 59Windows 设计
  60. 60总结
  61. 61关注作者
  62. 62虚拟内存
  63. 63内存分段
  64. 64内存分页
  65. 65多级页表
  66. 66TLB
  67. 67段页式内存管理
  68. 68Linux 内存管理
  69. 69总总结结
  70. 70四、进程与线程
  71. 71进程
  72. 72进程的状态
  73. 73进程的控制结构
  74. 74进程的控制
  75. 75进程的上下文切换
  76. 76线程
  77. 77什么是线程?
  78. 78线程与进程的比较
  79. 79线程的实现
  80. 80调度
  81. 81调度原则
  82. 82调度算法
  83. 83关注作者
  84. 84管道
  85. 85消息队列
  86. 86信号量
  87. 87信号
  88. 88Socket
  89. 89总结
  90. 90关注作者
  91. 914.3 多线程同步
  92. 92竞争与协作
  93. 93互斥的概念
  94. 94同步的概念
  95. 95互斥与同步的实现和使用
  96. 96锁
  97. 97信号量
  98. 98生产者-消费者问题
  99. 99经典同步问题
  100. 100哲学家就餐问题
  101. 101读者-写者问题
  102. 102关注作者
  103. 1034.4 死锁
  104. 104持有并等待条件
  105. 105环路等待条件
  106. 106利用工具排查死锁问题
  107. 107避免死锁问题的发生
  108. 108总结
  109. 1094.5 悲观锁与乐观锁
  110. 110互斥锁与自旋锁:谁更轻松自如?
  111. 111读写锁:读和写还有优先级区分?
  112. 112乐观锁与悲观锁:做事的心态有何不同?
  113. 113总结
  114. 114五、调度算法
  115. 115进程调度算法
  116. 116先来先服务调度算法
  117. 117最短作业优先调度算法
  118. 118时间片轮转调度算法
  119. 119最高优先级调度算法
  120. 120内存页面置换算法
  121. 121最佳页面置换算法
  122. 122最近最久未使用的置换算法
  123. 123时钟页面置换算法
  124. 124最不常用算法
  125. 125先来先服务
  126. 126扫描算法
  127. 127循环扫描算法
  128. 128LOOK 与 C-LOOK算法
  129. 129关注作者
  130. 130六、 文件系统
  131. 131文件系统的基本组成
  132. 132虚拟文件系统
  133. 133文件的使用
  134. 134文件的存储
  135. 135非连续空间存放方式
  136. 136Unix 文件的实现方式
  137. 137空闲空间管理
  138. 138空闲链表法
  139. 139位图法
  140. 140目录的存储
  141. 141软链接和硬链接
  142. 142文件 I/O
  143. 143直接与非直接 I/O
  144. 144关注作者
  145. 1457.1 键盘敲入A 字母时,操作系统期间发生了什么?
  146. 146I/O 控制方式
  147. 147设备驱动程序
  148. 148通用块层
  149. 149存储系统 I/O 软件分层
  150. 150键盘敲入字母时,期间发生了什么?
  151. 151关注作者
  152. 152Linux 网络协议栈
  153. 153Linux 接收网络包的流程
  154. 154Linux 发送网络包的流程
  155. 1558.2 零拷贝
  156. 156为什么要有 DMA 技术?
  157. 157传统的文件传输有多糟糕?
  158. 158如何优化文件传输的性能?
  159. 159如何实现零拷贝?
  160. 160sendfile
  161. 161使用零拷贝技术的项目
  162. 162PageCache 有什么作用?
  163. 163大文件传输用什么方式实现?
  164. 164总结
  165. 1658.3 I/O 多路复用:select/poll/epoll
  166. 166最基本的 Socket 模型
  167. 167如何服务更多的用户?
  168. 168多进程模型
  169. 169多线程模型
  170. 170I/O 多路复用
  171. 171select/poll
  172. 172epoll
  173. 173总结
  174. 174关注作者
  175. 175演进
  176. 176Reactor
  177. 177单 Reactor 多线程 / 多进程
  178. 178多 Reactor 多进程 / 线程
  179. 179Proactor
  180. 180总结
  181. 181关注作者
  182. 182九、Linux 命令
  183. 183性能指标有哪些?
  184. 184网络配置如何看?
  185. 185socket 信息如何查看?
  186. 186网络吞吐率和 PPS 如何查看?
  187. 187连通性和延时如何查看?
  188. 188关注作者
  189. 189别急着开始
  190. 190慎用 cat
  191. 191PV 分析
  192. 192UV 分析
  193. 193UV 分组
  194. 194终端分析
  195. 195分析 TOP3 的请求
  196. 196关注作者
  197. 197十、学习心得
  198. 19810.1 计算机网络怎么学?
  199. 199入门系列
  200. 200深入学习系列
  201. 201实战系列
  202. 202最后
  203. 20310.2 操作系统怎么学?
  204. 204入门系列
  205. 205深入学习系列
  206. 206最后
  207. 207十一、画图经验
  208. 208赞赏支持