TopsTip近日，Google 的 Gary Illyes 和 Martin Splitt 在 Search Off the Record 播客中探讨了一个引人关注的话题：网页体积增长趋势及其影响。数据显示，这个问题比我们想象的更严重。
网页体积增长的惊人数据
根据 HTTP Archive 的 2023 Web Almanac 报告，移动端主页的中位数体积从 2015 年的 845 KB 增长到 2023 年 7 月的 2,362 KB，十年间增长了近 3 倍。
虽然这种增长在现代 Web 应用日益复杂的背景下在预期之内，但这个数字仍然让 Google 的高管们感到吃惊。值得注意的是，”页面体积”这个概念本身就很复杂，可能指原始 HTML、传输字节量，或浏览器渲染页面所需的所有资源。
Google 抓取限制解析
Google 的抓取基础设施对每个 URL 都设有默认 15 MB 的限制，CSS、JavaScript 和图片等资源会被单独获取。不过根据最新的 Googlebot 文档，对于支持的文件类型，Googlebot 只会抓取前 2 MB 内容，PDF 文件则限制在前 64 MB。
Illyes 和 Splitt 在此前的节目中提到，这些限制并非绝对，Google 内部团队可以根据具体抓取需求调整这些默认值。
结构化数据与页面膨胀
关于结构化数据对页面体积的影响，Illyes 提出了一个有趣的观点。他回顾了 Google 联合创始人 Sergey Brin 早期的一个说法：机器应该能够仅从文本中获取所需的所有信息。
结构化数据是为机器而非用户设计的。如果在页面中添加 Google 支持的所有结构化数据类型，会增加用户看不到但确实存在的页面负载。这种情况造成了实用性和性能之间的权衡。
页面体积为什么依然重要
尽管在高速网络环境下页面体积似乎不是问题，但在网络连接较慢的地区或使用计量付费网络的情况下，这个问题就变得非常突出。Splitt 表示，页面体积的增长速度可能已经超过了移动网络速度的提升。
研究表明，网站加载速度越快，用户留存率和转化率就越高。这说明控制页面体积不仅关系到技术层面，更直接影响着网站的商业价值。
虽然目前大多数网页的体积都还没有达到 Google 的抓取限制，但持续增长的页面体积确实会影响使用慢速或计量网络用户的访问体验。Splitt 表示，他计划在未来的节目中详细讨论减少页面体积的具体技术方案。
