引言:为什么要搞清楚请求里到底发了什么

当你在浏览器里输入网址按下回车时,感觉好像只有一行 URL 飞了出去。实际上在这一瞬间,不同层面上发生着好几件不同的事。首先,网站名称被转换成数字 IP 地址。然后,向这个地址打开一个 TCP 连接。接着,在连接内部开始 TLS 握手,而它的第一条消息就以明文形式发送了服务器名称——这就是 SNI 字段。只有在这之后,HTTP 请求才会带着 Host 头,在加密通道内部发出。

本指南专门讲传输层。我们不会去分析像 Via 和 X-Forwarded-For 这样的应用层头部——它们有单独的文章,而且工作方式完全不同:它们由中间节点在 HTTP 内部添加。这里讲的是客户端自己发送的东西,而且是在任何一个 HTTP 字节离开你机器之前就发出的内容:按 IP 字面量连接和按主机名连接的区别,以及服务器名称在 TLS 中到底去了哪里。

你最终会收获什么

  • 搞懂 IP 字面量和 hostname 有什么区别,以及为什么这会影响连接结果。
  • 亲眼通过 curl、openssl 和 Wireshark 看到 ClientHello 里的 SNI 字段。
  • 学会按地址连接到目标服务器,同时保留正确的名称——这在调试和配置时非常有用。
  • 弄清楚在 CONNECT 隧道中代理服务器究竟能看到什么,哪些内容只保留在你和目标网站之间。
  • 得到一份自查清单,用来诊断「证书不匹配」和「服务器返回了错误的网站」这类错误。

本指南适合谁

适合配置代理和服务器的人、做自动化和爬虫的人、调试应用的人,或者只是想知道浏览器「引擎盖下」发生了什么的人。难度是中等:基础概念我们会解释,但默认你不怕命令行。

需要提前知道什么

  • 怎么打开终端(Windows PowerShell、macOS 的 Terminal 或任意 Linux 终端模拟器)。
  • URL 是什么、由哪些部分组成——至少在日常层面了解。
  • 网站运行在服务器上,而服务器有一个地址。

需要多少时间

安装工具——10-15 分钟。走完七个步骤——45-60 分钟。如果你认真复现每条命令,总共 1 到 1.5 小时。Wireshark 可以先跳过、以后再回来,那样 40 分钟就够了。

准备工作:工具和环境

我们需要一小组命令行工具。好消息是:大部分你系统里已经有了。

系统要求

  • Windows 10 或 11、macOS 12 及以上,或任意现代 Linux(Ubuntu 22.04+、Debian 12+、Fedora)。
  • 能上网,80 和 443 端口的出站连接不受限制。
  • 管理员权限——只在安装 Wireshark 和修改 hosts 文件时需要。

需要安装或检查什么

  1. curl。 Windows 10 和 11 自带,macOS 也自带,Linux 一般已安装。打开终端输入 curl --version。你应该看到类似 curl 8.x.x 的行和支持的协议列表。如果提示「命令未找到」,在 Ubuntu 里执行 sudo apt install curl。
  2. openssl。 macOS 和 Linux 默认有:检查 openssl version。Windows 默认没有——最简单的办法是安装 Git for Windows:安装后在 C:\Program Files\Git\usr\bin 文件夹里会有 openssl.exe。另一个选择是用 WSL(适用于 Windows 的 Linux 子系统)。
  3. nslookup 或 dig。 nslookup 到处都有,包括 Windows。dig 更好用,它包含在 dnsutils 包里(Ubuntu:sudo apt install dnsutils),macOS 已自带。
  4. Wireshark(可选,用于第 6 步)。从项目官网下载安装程序,在 Windows 安装时同意安装 Npcap 抓包驱动——没有它程序看不到流量。
  5. 任意代理的访问权限(可选,用于第 7 步)。任何你有账号密码的 HTTP 或 SOCKS5 代理都行,比如你个人后台里的移动代理。

备份

我们唯一会碰的系统文件是 hosts。修改前一定要复制一份。Windows 里它在 C:\Windows\System32\drivers\etc\hosts,macOS 和 Linux 里是 /etc/hosts。直接在旁边复制一份命名为 hosts.bak 就行。

建议:为这个实操单独建一个文件夹,把每条命令的输出保存成文本文件。一周后你会忘记细节,而对比新旧输出在诊断时非常有价值。

基础概念,用大白话讲

在敲键盘之前,先把术语约定好。数量不多,但没有它们后面会一团乱麻。

IP 地址和 IP 字面量

IP 地址是网络节点的数字地址。IPv4 看起来是四个用点分隔的数字:93.184.216.34。IPv6 是用冒号分隔的十六进制组:2606:2800:220:1:248:1893:25c8:1946。IP 字面量指的是你直接在 URL 里写地址而不是名称的情况:https://93.184.216.34/。对于 IPv6,URL 里的地址要放在方括号里:https://[2606:2800:220:1:248:1893:25c8:1946]/。「字面量」在这里的意思是「照字面写出来的」。

Hostname(主机名)

Hostname 是像 example.com 或 api.example.com 这样人类可读的名称。名称本身不指向任何东西:网络看不懂它。要建立连接,名称必须先转换成 IP 地址。这件事由 DNS 负责——一个分布式名称服务。一个 hostname 可以指向多个地址,而一个地址可以服务几百个名称。我们后面要分析的所有复杂性,都源于这种不对称。

TCP 连接

当 IP 地址已知,你的系统会向这个地址和端口(HTTPS 是 443,HTTP 是 80)打开一个 TCP 连接。在这个层面上已经没有主机名了——只有数字。接受连接的服务器只知道有人来到了它的地址和端口。它想要一百个网站里的哪一个,它还不知道。

TLS 和 ClientHello

TLS 是加密协议,就是 HTTPS 里的那个 S。客户端发给服务器的第一条消息叫做 ClientHello。它是明文发送的,因为加密密钥还没协商好。ClientHello 里列出了支持的协议版本、密码套件和扩展。其中一个扩展就是 SNI。

SNI——Server Name Indication

SNI 字面意思是「服务器名称指示」。它是 TLS 的一个扩展,客户端在里面说:「我想和 example.com 这个网站对话」。为什么需要这个?因为同一个 IP 地址上可以住着几十个有不同证书的网站。没有 SNI,服务器就不知道该拿出哪张证书。重点是:按标准,SNI 里只能传主机名,不能传 IP 地址。所以按 IP 字面量连接时,SNI 字段干脆就不存在。这是整篇指南的关键事实。

Host 头和伪头 :authority

TLS 通道建立好之后,HTTP 请求在它内部发出。在 HTTP/1.1 里网站名重复出现在 Host 头里,在 HTTP/2 和 HTTP/3 里则在伪头 :authority 里。这已经是应用层了,从外面看不到这个字段——它是加密的。但服务器会拿它和 SNI 对比,如果不一致,就可能返回错误。

证书和 SAN

服务器在收到 ClientHello 后返回证书。里面有它被签发给的名称列表——Subject Alternative Name (SAN) 字段。客户端会把 URL 里的名称和这个列表比对。如果你按 IP 字面量连接,客户端会在 SAN 里找那个 IP 地址,而这类证书非常少见。由此就产生了典型的「证书与名称不匹配」错误。

这和 Via、X-Forwarded-For 有什么区别

Via 和 X-Forwarded-For 头是应用层的。你的客户端不发送它们,是代理和负载均衡器在 HTTP 内部插入的,用来告诉最终服务器请求经过了谁。我们这里分析的一切——目标 IP 地址、CONNECT 里的 hostname 和 ClientHello 里的 SNI——都是客户端自己发送的,而且发生在 HTTP 之前、HTTP 之外。把这条边界记在心里:传输层在这里,应用层头在那边。

第 1 步:拆解 URL,判断是名称还是地址

本阶段目标:学会在一秒钟内区分 IP 字面量和 hostname,并预测客户端是否会发送 SNI。

  1. 拿任意一个 URL,比如 https://api.example.com:8443/v1/status?debug=1。
  2. 找到协议——:// 之前的部分。这里是 https。协议决定了默认端口(443)以及是否有 TLS。
  3. 找到 authority——:// 和下一个斜杠之间的部分:api.example.com:8443。这是 host 加可选的端口。
  4. 分离端口。如果冒号后面只有数字且只有一个冒号——那就是端口(8443)。其余一切都是 host。
  5. 看 host。如果它只由数字和三个点组成——这是 IPv4 字面量。如果在方括号里——这是 IPv6 字面量。其他所有情况——都是 hostname。
  6. 得出结论:对 hostname,客户端会做 DNS 查询并发送 SNI。对 IP 字面量,不需要 DNS,也不会发送 SNI。

自己练三个例子:https://10.0.0.5/admin(IPv4 字面量,没有 SNI)、https://[2001:db8::1]:8443/(IPv6 字面量,端口 8443,没有 SNI)、http://cdn.example.net/img.png(hostname,但协议是 http——没有 TLS,所以也没有 SNI,名称只会明文出现在 Host 头里)。

注意:常见的陷阱是像 https://192.168.1.10.nip.io/ 这样的字符串。它看起来像地址,但其实是 hostname:里面有字母。这样的名称会通过 DNS 解析并进入 SNI。永远检查 host 是否只由数字和点组成。

验证:对任意 URL,你都能说出协议、host、端口和 host 类型(字面量还是名称),以及是否会发送 SNI 字段。如果犹豫——回到第 5 点。

可能遇到的问题

URL 里 @ 符号前有用户名和密码。比如 https://user:pass@host.com/。Host 从 @ 之后开始。凭据与传输层无关。

没有方括号的多个冒号。这是不正确的 IPv6 URL——浏览器不会接受。方括号是必须的。

第 2 步:看看名称如何变成地址

本阶段目标:亲眼看到 DNS 解析,理解名称和地址是两个独立的实体。

  1. 打开终端。
  2. 输入 nslookup example.com 然后按回车。
  3. 读输出。开头几行是你的 DNS 服务器地址(Server 和 Address)。下面是应答部分:Name: example.com 和一行或多行 Address: 带 IPv4 和 IPv6 地址。
  4. 把其中一个 IPv4 地址记到你的笔记文件里。第 4 步会用到它。
  5. 如果你有 dig,执行 dig +short example.com A——只得到地址,没有多余信息。而 dig +short example.com AAAA 会显示 IPv6 地址。
  6. 现在做反向的:nslookup 93.184.216.34(填入第 4 步的地址)。你会得到要么是一个可能与 example.com 完全不同的 PTR 名称,要么是记录未找到的消息。

这证明了什么?正向解析(名称到地址)和反向解析(地址到名称)是不同的数据库,它们不一定要一致。接受连接在 93.184.216.34 上的服务器,凭连接这一个事实完全无法知道你输入的是哪个名称。告诉它的唯一方式就是 SNI 和 Host。

建议:大型服务的地址每次查询都可能变,还取决于地区。如果一分钟后 nslookup 返回了不同的结果不要惊讶。正因如此,测试中我们会显式固定地址。

本地篡改:hosts 文件

系统在查询 DNS 之前会先看 hosts 文件。这是验证网站名称指向另一个地址时会怎样表现的方便办法。

  1. 确认 hosts.bak 副本已经做好(见准备部分)。
  2. 以管理员身份打开 hosts:在 Windows 里右键运行记事本并选「以管理员身份运行」,然后文件——打开,开启显示所有文件并选择 hosts。在 macOS 和 Linux 里:sudo nano /etc/hosts。
  3. 在末尾加一行 127.0.0.1 test.local,保存。
  4. 执行 ping test.local。应答应该来自 127.0.0.1。
  5. 实验结束后删掉加的那行,或者把 hosts.bak 还原回去。

验证:你通过 nslookup 或 dig 得到了 example.com 的 IP 地址并记录下来。你理解 hosts 可以在本地替换 DNS 的结果。

可能遇到的问题

nslookup 报「DNS request timed out」。检查网络连接,试着指定公共解析器:nslookup example.com 8.8.8.8。

hosts 的修改不生效。在 Windows 里执行 ipconfig /flushdns。浏览器有自己的 DNS 缓存——重启浏览器。

第 3 步:按名称连接,抓取 SNI

本阶段目标:看到按 hostname 连接时客户端发送 SNI 并获得正确的证书。

方案 A:带详细输出的 curl

  1. 在终端执行 curl -v https://example.com/ -o /dev/null。在 Windows PowerShell 里把 /dev/null 写成 NUL,并用 curl.exe 调用命令,以免触发 PowerShell 的内置别名。
  2. 在输出里找到解析名称的行:在新版 curl 里是 * Host example.com:443 was resolved. 下面是 * IPv4: 93.184.216.34。
  3. 找到 * Connected to example.com (93.184.216.34) port 443。这是建立 TCP 的时刻。注意:curl 同时显示名称和地址——它两个都知道。
  4. 找到 TLS 部分:* SSL connection using TLSv1.3 / TLS_AES_256_GCM_SHA384 以及 * Server certificate:,带 subject 和 subjectAltName 字段。
  5. 关键行:* subjectAltName: host "example.com" matched cert's "example.com"。它的意思是:URL 里的名称和证书里的名称匹配。验证通过。
  6. 下面你会看到请求本身:> GET / HTTP/2 和 > Host: example.com(或 > :authority: example.com,取决于版本)。这已经是加密通道内部的应用层了。

curl 不会单独打印 SNI,但这里有个简单规则:curl 会把 URL 里的那个名称放进 SNI。既然 URL 里是 example.com,SNI 里就是 example.com。我们用 openssl 来确认。

方案 B:openssl s_client

  1. 执行 openssl s_client -connect example.com:443 -servername example.com < /dev/null。在 Windows 里,把输入重定向换成在输出出现后按 Ctrl+C。
  2. -connect 标志指定 TCP 开到哪里。-servername 标志指定 SNI 里放什么。现在两者一致。
  3. 在输出里找到 Certificate chain 块——那里会有 s:CN = example.com 或类似名称,以及签发者 i:。
  4. 找到 Verify return code: 0 (ok) 这一行。零表示信任链验证成功。如果你看到代码 20 或 21——说明 openssl 没有系统根证书存储;加 -CAfile 标志指向根证书文件,或者这一步直接忽略,证书里的名称更重要。

现在做对照实验:去掉 SNI,但用同样的名称连接。

  1. 执行 openssl s_client -connect example.com:443 -noservername < /dev/null。
  2. 对比证书。有些服务器会返回同样的证书——说明那个地址上只有一个网站,或者配置了合理的默认站点。另一些会给你完全不同的证书或握手错误,比如 alert handshake failure——这就是没有 SNI 就拒绝工作的服务器。
  3. 对 CDN 后面的大型网站试试同样操作,比如 openssl s_client -connect www.cloudflare.com:443 -noservername < /dev/null。你多半会看到拒绝或一张占位证书。

建议:添加 -tlsextdebug 标志:openssl s_client -connect example.com:443 -servername example.com -tlsextdebug < /dev/null。它会输出双方交换的 TLS 扩展列表。名为 server name 的扩展就是服务器在确认收到 SNI。

验证:curl 显示名称与证书匹配,带 -servername 的 openssl 返回了 example.com 的证书,而带 -noservername 时,至少有一个测试网站的行为发生了变化。

可能遇到的问题

curl 报「schannel: SEC_E_UNTRUSTED_ROOT」。这是 Windows 版 curl 用系统证书存储,缺少根证书。更新 Windows,或者用 Git for Windows 里的 curl。

openssl 卡住什么都不输出。它在等输入。按 Ctrl+C 或加 < /dev/null 重定向。

第 4 步:按 IP 字面量连接,看看区别

本阶段目标:确认按地址连接时不会发送 SNI,证书不匹配,服务器可能返回错误的网站。

  1. 拿第 2 步的 IP 地址。举例就用 93.184.216.34。
  2. 执行 curl -v https://93.184.216.34/ -o /dev/null。
  3. 注意:没有 DNS 解析的行。curl 直接写 * Trying 93.184.216.34:443... 和 * Connected to 93.184.216.34 (93.184.216.34) port 443。没有名称——两个括号里都是地址。
  4. TLS 握手多半会完成,但随后 curl 会报错:* SSL: no alternative certificate subject name matches target host name "93.184.216.34" 和 curl: (60) SSL certificate problem。这是预期的:证书的 SAN 里没有 IP 地址。
  5. 用关闭验证的方式重试:curl -vk https://93.184.216.34/ -o /dev/null。-k 标志让 curl 接受任何证书。我们只是为了观察才这么做。
  6. 现在看请求:> Host: 93.184.216.34。客户端老实把 URL 里的东西放进了 Host——地址。而 SNI 它根本没发。
  7. 看响应。可能的情况:200,内容是那个地址的默认网站;404 或 421;400 或 403,文字类似「Direct IP access not allowed」;或者干脆在 HTTP 之前就断开 TLS 握手。

这里发生了什么。你的客户端到达了正确的服务器——地址毕竟是同一个。但服务器既没收到 SNI,也没收到有意义的 Host,所以它无法知道托管在它上面的哪个网站是你想要的。它要么返回第一个碰到的(default),要么拒绝。按地址连接能送达数据包,但送不到意图。

浏览器里的同样实验

  1. 打开浏览器,在地址栏输入 https://93.184.216.34/。
  2. 多半你会看到不安全连接的警告,代码类似 NET::ERR_CERT_COMMON_NAME_INVALID。浏览器得出了和 curl 一样的结论:证书里的名称和地址不匹配。
  3. 点锁形图标或「不安全」文字,打开证书信息。在「使用者可选名称」字段里你会看到域名,但没有 IP 地址。
  4. 在真实网站上不要点「继续」——实验不需要,而且最好别养成这种习惯。

注意:curl 的 -k 标志和浏览器的「继续」按钮会关闭证书验证。只在你控制的服务器上测试时使用。处理真实服务时,尤其是要传密码或令牌时,永远不要关闭验证——你会失去「正在和你想对话的对象对话」这一保证。

验证:没有 -k 时 curl 报错 60 并提到 IP 地址;有 -k 时请求里能看到 Host: 地址;服务器按名称访问时和按地址访问时响应不同,或者直接报错。

可能遇到的问题

服务器按 IP 和按名称的响应完全一样。说明这个地址上只有一个网站,它被配置为 default。这不是错误。换一个大型 CDN 的地址重复实验就能看到区别。

curl 报错 35(SSL connect error)。服务器因为缺少 SNI 断开了握手。这也是响应的一部分:没有名称它连对话都不开始。

第 5 步:用 --resolve 和 --connect-to 控制名称与地址的绑定

本阶段目标:学会连接到指定地址,同时保留正确的 SNI 和 Host。这是调试服务器、负载均衡器和 CDN 的核心工作技巧。

--resolve 标志:同一个 URL,不同地址

  1. 执行 curl -v --resolve example.com:443:93.184.216.34 https://example.com/ -o /dev/null。
  2. 标志格式:名称:端口:地址。curl 会用它替代 DNS 应答,但只针对这一对名称-端口。
  3. 在输出里你会看到 * Added example.com:443:93.184.216.34 to DNS cache,然后是 * Connected to example.com (93.184.216.34) port 443。
  4. 证书验证会通过,因为 URL 里的名称还是 example.com,SNI 发的是 example.com,Host 发的也是 example.com。只有 TCP 打开的地址变了。
  5. 现在换一个肯定不对的地址,比如通过 nslookup 得到另一个知名网站的地址。用这个地址执行同样的 --resolve。你会看到要么证书错误(对方的服务器拿出了它自己的证书,和 example.com 不匹配),要么 421 或 404:服务器收到了 SNI example.com,但它没有这个网站。

这正是网站迁移到新服务器时会用到的场景:DNS 还指向旧地址,而你已经能验证新地址,不用碰 DNS 和 hosts。

--connect-to 标志:整体连接到另一个主机

  1. 执行 curl -v --connect-to example.com:443:backend.example.net:443 https://example.com/ -o /dev/null(如果有真实目标服务器名就填进去;练手的话同一个 example.com 也行)。
  2. 格式:原始名称:端口:连接目标:端口。和 --resolve 不同,这里不仅可以指定地址,还能指定另一个名称,它会通过 DNS 解析。
  3. SNI 和 Host 依然取自 URL,也就是说还是 example.com。

在 openssl 里分离 SNI 名称和 TCP 名称

  1. 执行 openssl s_client -connect 93.184.216.34:443 -servername example.com < /dev/null。
  2. 这里我们明确分开了两件事:TCP 连到地址,SNI 发名称。服务器会收到 SNI 并返回正确的证书。
  3. 现在把 -servername 换成不存在的名称:-servername nosuchsite.example。对比证书。这会告诉你服务器在遇到陌生 SNI 时默认返回哪个网站。

建议:调试负载均衡器或同一名称后的多台服务器时,写个小循环遍历地址列表,对每个地址执行 --resolve。这样一分钟内就能看出哪台节点返回了过期证书或错误配置。

建议:如果需要为整个应用或浏览器替换地址,而不只是单次 curl 调用,用第 2 步的 hosts 文件。但别忘了之后删除记录——遗留在 hosts 里的一行可能让你困惑好几周。

验证:带 --resolve 且地址正确的命令无证书错误通过,返回和普通按名称连接一样的响应。地址错误的命令给出证书错误或 421 代码。

可能遇到的问题

curl 忽略了 --resolve。检查标志里的端口是否和 URL 里的端口一致。HTTPS 是 443,HTTP 是 80。example.com:80:... 对 https 请求不生效。

想为所有端口替换地址。写 --resolve example.com:*:93.184.216.34——星号表示任意端口(现代版本 curl 支持)。

第 6 步:在 Wireshark 里抓 ClientHello 并找到包里的 SNI

本阶段目标:不是通过工具日志,而是通过网线上真实发出的字节看到 SNI。这一步之后,你对名称以明文传输不会再有疑问。

  1. 启动 Wireshark。如果系统询问权限——同意;抓包需要它。
  2. 在起始界面选择你上网用的网络接口。通常是 Wi-Fi 或 Ethernet;活动接口旁边有个小活动图表。双击它。
  3. 抓包开始——主窗口里会滚动包的行。马上在顶部的过滤框(提示为「Apply a display filter」)里输入 tls.handshake.type == 1 然后按回车。这样就只剩 ClientHello。
  4. 在终端执行 curl -s https://example.com/ -o /dev/null。一秒钟后 Wireshark 里会出现一行或多行 Info 列为 Client Hello 的条目。
  5. 点击那一行。在中间面板展开树:Transport Layer Security — TLSv1.3 Record Layer: Handshake Protocol: Client Hello — Handshake Protocol: Client Hello。
  6. 滚到扩展列表并展开 Extension: server_name。里面会是 Server Name Indication extension,其中有 Server Name: example.com 字段。
  7. 点击 Server Name 那个字段。底部十六进制转储面板会高亮对应字节,右侧文本列你能读到普通字母的 example.com。这就是明文的名称传输。
  8. 现在用 IP 连接重复抓包:curl -sk https://93.184.216.34/ -o /dev/null。找到新的 ClientHello,确认里面根本没有 server_name 扩展。
  9. 用工具栏的红色按钮停止抓包。

实用技巧:把 SNI 单独显示成一列

  1. 在中间面板的 Server Name 字段上右键。
  2. 选择 Apply as Column。
  3. 包列表里会出现一个新列,每个 ClientHello 的服务器名称一眼就能看到。这样一秒钟就能看出你机器上任何应用在访问哪些网站。

这一步要理解的重要一点。ClientHello 和 ServerHello 之后的一切都是加密的:请求、响应、头部,包括 Host、Via 和 X-Forwarded-For。而 SNI 躺在外面。路径上的任何节点——路由器、运营商、企业网关——都能看到目标 IP 地址和 SNI 里的名称,但看不到 URL、头部和内容。这不是漏洞,而是设计特性:服务器在能解密任何东西之前就需要知道名称。

验证:抓包里有一个 ClientHello,其 Server Name 字段等于 URL 里的名称;按 IP 字面量连接时该字段缺失。你能在 hex 转储里看到名称的字节。

可能遇到的问题

包不出现。选错了接口。停止抓包,回到接口列表,选一个有活动的。

过滤器标红。过滤器有拼写错误。检查:两个等号,tls 小写。

curl 的流量看不到,因为走了代理。那 ClientHello 会在 CONNECT 隧道内部;它在 Wireshark 里仍然可见,但目标地址会是代理的地址。继续第 7 步——那里正好讲这个。

第 7 步:看看通过代理时请求里发了什么

本阶段目标:理解代理服务器能拿到哪部分信息——地址、名称、SNI,哪些只保留在客户端和目标网站之间。

这一步需要任意 HTTP 代理的凭据:地址、端口、用户名、密码。如果你有个人后台里的移动代理——那再合适不过。如果没有代理,就把这一步当理论读,以后再回来做。

通过 HTTP 代理的 HTTPS:CONNECT 隧道

  1. 执行 curl -v -x http://用户名:密码@代理地址:端口 https://example.com/ -o /dev/null。填入你自己的数据。
  2. 首先你会注意到:解析 example.com 的 DNS 相关行不存在。取而代之,curl 解析代理名称并连到它:* Connected to 代理地址 (x.x.x.x) port 端口。
  3. 接着是 * CONNECT tunnel: HTTP/1.1 negotiated 行和发给代理的请求本身:> CONNECT example.com:443 HTTP/1.1、> Host: example.com:443、> Proxy-Authorization: Basic ...。
  4. 注意:CONNECT 里发的是名称 example.com,不是地址。这意味着 DNS 查询由代理执行,而不是你的机器。所以你才没有看到解析相关的行。
  5. 代理回复 < HTTP/1.1 200 Connection established,curl 写 * CONNECT phase completed。
  6. 只有这时 TLS 才开始:* SSL connection using TLSv1.3... 和证书验证 subjectAltName: host "example.com" matched。这次握手已经穿过代理,和目标服务器进行。里面的 SNI 是 example.com,内部的 Host 也是 example.com。

按层总结。代理拿到了:你的 IP 地址、CONNECT 行里的 example.com 名称和 443 端口、你的代理凭据。代理技术上也能看到穿过它的 ClientHello 字节——因此也能看到 SNI,因为它是明文;但这和 CONNECT 里已有的名称一样,没有新信息。代理拿不到:URL 路径、请求头、Cookie、响应体——这些都在你和 example.com 之间加密。这种方案下代理无法添加 Via 和 X-Forwarded-For 头,因为它进不了隧道内部。

同样的请求,但通过代理按 IP 字面量

  1. 执行 curl -vk -x http://用户名:密码@代理地址:端口 https://93.184.216.34/ -o /dev/null。
  2. CONNECT 里会发 CONNECT 93.184.216.34:443。代理不需要解析任何东西——地址现成的。
  3. 隧道内部会发出没有 SNI 的 ClientHello 和带 Host: 93.184.216.34 的请求。目标服务器的反应和第 4 步一样:默认网站、错误或拒绝。

SOCKS5:谁解析名称

  1. 如果你有 SOCKS5 代理,执行 curl -v -x socks5://用户名:密码@地址:端口 https://example.com/ -o /dev/null。协议 socks5 表示名称在本地解析,在你的机器上,传给代理的是地址。输出里会有 DNS 相关的行。
  2. 现在把协议换成 socks5h:curl -v -x socks5h://用户名:密码@地址:端口 https://example.com/ -o /dev/null。字母 h 表示名称传给代理并由它解析。不会有本地 DNS 的行。
  3. 两种情况下隧道内的 SNI 都是 example.com——代理方案不影响它。

使用移动代理和其他代理时的实际意义:如果你希望目标网站看到与代理地区对应的地址,同时 DNS 应答也从代理地区来,就用 HTTP CONNECT 或 socks5h。不带 h 的 socks5 方案会让名称由你本地解析器解析,网站可能拿到离你最近而不是离代理最近的 CDN 节点。这从延迟就能看出来,有时也体现在地理相关服务的行为上。

注意:带 -x 的命令行里,你的代理用户名和密码会进入终端历史。实验后清空历史,或者用环境变量 https_proxy,最好用只有你能访问的 .curlrc 文件加 proxy 参数。

建议:想确认请求确实走了代理,通过它调用任何显示 IP 的服务,比如 curl -x ... https://api.ipify.org。你应该看到代理地址,而不是自己的。这是快速检查设置是否生效的办法。

验证:curl 输出里能看到带名称的 CONNECT example.com:443;本地没有做 DNS;Connection established 之后进行了带 example.com 证书的 TLS 握手。对 IP 字面量,CONNECT 里发的是地址,没有 SNI。

可能遇到的问题

curl: (56) Received HTTP code 407 from proxy after CONNECT。用户名或密码错误。如果密码里有特殊字符,做 URL 编码或者用 -U 用户名:密码 标志单独传,别放进地址。

curl: (56) CONNECT tunnel failed, response 403。代理禁止连接该主机或端口。检查你的套餐条件和允许的端口列表。

结果验证:清单

过一遍列表。每一项都是应该巩固的独立技能。

  • 对任意 URL 你都能确定 host、端口和 host 类型(IPv4 字面量、IPv6 字面量、hostname)。
  • 你能通过 nslookup 或 dig 得到名称的地址,并理解反向解析可能不一致。
  • 在 curl -v 输出里你能找到连接行、TLS 版本、证书和 subjectAltName 验证。
  • 你知道带 -servername 的 openssl s_client 会发 SNI,带 -noservername 不会,并能看出证书的区别。
  • 按 IP 字面量连接时你会得到 curl 错误 60,并理解原因。
  • 用 --resolve 你能连到指定地址,SNI 和 Host 正确,没有证书错误。
  • 在 Wireshark 里你能找到 ClientHello、Server Name 字段,并看到 IP 字面量时它缺失。
  • 通过代理你能看到带名称的 CONNECT 行,并理解代理拿到什么、拿不到什么。

如何自测

  1. 选一个你在用的任意网站。
  2. 用 dig 查它的地址。
  3. 按名称和其中一个地址连接,对比响应。
  4. 对列表里的每个地址用 --resolve 连接,确认它们都返回相同的证书。
  5. 记下哪个地址响应更快——时间由 curl -w "%{time_total}" 显示。

如果这五点都不用翻指南就能完成——目标达成。

常见错误与解决办法

1. 按 IP 访问时报「证书与名称不匹配」

原因:证书的 SAN 字段列的是域名,而客户端在找 IP 地址。解决办法:按名称连接。如果 DNS 还没配好,用 --resolve 或 hosts。生产场景不要用 -k 关闭验证。

2. 服务器返回了别人的网站或默认页面

原因:缺少 SNI,或者它和任何配置的名称都不匹配,Web 服务器选择了 default 虚拟主机。解决办法:检查客户端是否传了名称。在 nginx 里看看哪个 server 块标记了 default_server,必要时为它配置一个带明确错误的占位页,这样这类情况容易发现。

3. 代码 421 Misdirected Request

原因:SNI 和 Host(或 :authority)不一致。往往是 HTTP/2 连接被复用于另一个名称,或者 URL 不变却手动改了 Host 头。解决办法:用 --resolve 代替手动改 Host 头——这样 SNI 和 Host 会自动一致。

4. curl 不显示名称解析,看起来 DNS 不工作

原因:请求走了 HTTP 代理或 socks5h,名称在代理那边解析。解决办法:这是正常行为。如果要本地解析,用不带 h 的 socks5 方案,或者去掉环境变量 http_proxy 和 https_proxy 里的代理设置。

5. hosts 的修改对浏览器不生效

原因:浏览器缓存了 DNS 并保持打开的连接;此外有些浏览器使用 DNS-over-HTTPS 绕过系统解析器。解决办法:重启浏览器,在 Windows 里用 ipconfig /flushdns 清 DNS 缓存,检查浏览器的「安全 DNS」设置,暂时改用系统解析器。

6. openssl s_client 显示 Verify return code 20 或 21

原因:openssl 找不到根证书。解决办法:通过 -CAfile 指定根证书文件路径。Linux 里通常是 /etc/ssl/certs/ca-certificates.crt。Windows 里用 Git for Windows 的 openssl,它自带一套根证书。

7. PowerShell 对 curl 命令输出奇怪结果

原因:PowerShell 里 curl 是内置命令 Invoke-WebRequest 的别名,参数不同。解决办法:带扩展名调用 curl.exe,或者在普通 cmd 命令行里操作。

8. Wireshark 显示 ClientHello,但里面没有 server_name 扩展,尽管 URL 有名称

原因:要么你抓到的是另一个应用的 ClientHello,要么客户端按 IP 访问。解决办法:给过滤器加目标地址:tls.handshake.type == 1 && ip.dst == 93.184.216.34,滤掉别人的包。

进阶技巧

服务器端记录 SNI

如果你管理 nginx,在日志格式里把 $ssl_server_name 变量加在 $host 旁边。前者显示 SNI 里来了什么,后者显示 Host 里来了什么。对比它们,你很快就能找到按 IP 字面量连接或字段不一致的客户端。没有 SNI 的连接该变量为空。

为无 SNI 的连接单独响应

在 nginx 里可以声明一个带 listen 443 ssl default_server 和 ssl_reject_handshake on 指令的 server 块。这样任何没有 SNI 或名称陌生的连接会在握手阶段被拒绝,服务器不会给出多余的证书。这能规范客户端,也防止意外显示错误的网站。

SAN 里带 IP 地址的证书

技术上可以签发 SAN 里带 IP 地址的证书。公共证书颁发机构很少这么做且有限制,但对使用自有 CA 的内部服务来说可行。那样按 IP 字面量连接能通过验证。但 SNI 仍然不会发送——标准不允许——所以那个地址上必须只住一个服务。

IPv6 字面量

所述一切对 IPv6 同样适用,只是语法上有一点不同:URL 里地址放在方括号里,而 --resolve 里不放:--resolve example.com:443:2606:2800:220:1:248:1893:25c8:1946。curl 明白第二个冒号之后是地址。

HTTP/2 和连接复用

在 HTTP/2 里一个 TLS 连接可以服务多个名称,只要它们都在同一张证书里列出。客户端有权把第二个带不同 :authority 的请求发到同一个连接。服务器把 :authority 和证书的 SAN 以及 SNI 对比;不匹配就回 421,客户端打开新连接。curl 的 --http1.1 标志可以在调试时关闭这个行为。

加密 ClientHello

有一项扩展 Encrypted Client Hello 正在开发和部署,它能在服务器支持并在 DNS 里发布密钥的条件下加密 ClientHello 的一部分,包括 SNI。2026 年已有一些浏览器和 CDN 支持,但远非普遍,命令行工具也需要单独开启。对本指南而言,知道这点就够了:没有这种扩展,SNI 就是明文的,而当今绝大多数连接正是如此。

测量各阶段耗时

curl 的 -w 标志能输出每个阶段的耗时:curl -o /dev/null -s -w "dns %{time_namelookup} tcp %{time_connect} tls %{time_appconnect} total %{time_total}" https://example.com/。这样你能清楚看到名称解析用了多久、TCP 用了多久、TLS 用了多久。按 IP 字面量连接时第一个值会接近零。

FAQ:常见问题

SNI 里能传 IP 地址吗?

不能。标准明确禁止 server_name 字段里出现 IP 字面量。遵守标准的客户端按地址连接时干脆不在 ClientHello 里包含 SNI 扩展。

既然 SNI 是明文,那 HTTPS 不保护网站名称?

SNI 里的服务器名称和目标 IP 地址对中间节点可见。其他一切——路径、请求参数、头部、内容——都是加密的。协议就是这样设计的:服务器需要在选择证书之前知道名称。

如果名称相同,Host 和 SNI 有什么区别?

SNI 是 TLS 的一部分,在第一条消息里明文发送,用于选择证书。Host 是 HTTP 的一部分,在加密通道内发送,供 Web 服务器选择网站和路由。它们通常一致,但它们是两个不同层面上的两个不同字段。

为什么带 --resolve 的 curl 不报证书错,而 URL 里放 IP 就报?

因为用 --resolve 时 URL 里仍然是名称。curl 拿证书和 URL 里的名称比对,而不是和它实际连接的地址比对。

通过代理时谁执行 DNS 查询?

取决于类型。HTTP CONNECT 和 socks5h 把名称传给代理,由它查询。不带 h 的 socks5 以及你自己填地址的任何方案,解析都留在你这边。

代理能看到我在网站上打开哪些页面吗?

HTTPS 通过 CONNECT 隧道时——看不到。代理能看到 CONNECT 里的名称和端口、地址,以及 ClientHello 的明文字节,包括 SNI。路径、头部和内容在你和网站之间加密。

为什么按 IP 连接时一个网站正常打开,另一个不行?

第一个地址上只住一个网站,服务器把它当默认站点返回。第二个地址上有很多网站或配置严格,没有 SNI 时服务器要么返回占位页,要么中断握手。

怎么让浏览器发送与地址栏不同的 SNI?

标准手段——没办法:浏览器总是把 URL 里的名称放进 SNI。测试请用带 --resolve 或 --connect-to 的 curl,或者用分开 -connect 和 -servername 的 openssl。

如果实验后网站打不开了怎么办?

检查 hosts 文件并删掉你的行,清系统浏览器 DNS 缓存,去掉代理相关的环境变量,关闭再打开浏览器。绝大多数情况是忘了删 hosts 里的记录。

需要 Wireshark 吗,还是 curl 就够?

理解原理——curl 和 openssl 就够。Wireshark 用来看到真实字节,以及检查你没有详细日志的应用行为,比如移动客户端或桌面程序。

结语

你走完了请求在传输层的整条路径。拆解了 URL,学会区分 IP 字面量和名称。看到名称如何通过 DNS 变成地址,以及为什么反向不一定成立。通过 curl 和 openssl 确认按名称连接时 ClientHello 里发 SNI 且服务器返回正确证书,按地址连接时 SNI 缺失、证书不匹配、服务器返回默认网站或拒绝。掌握了 --resolve 和 --connect-to——不用改 DNS 就能验证服务器的工作工具。在 Wireshark 里找到了明文字节的名称。最后看了通过代理时的样子:什么进 CONNECT、谁解析名称、什么保持加密。

主要结论用一句话总结:地址把数据包送到服务器,名称向服务器说明你想要什么。它们走不同的路径——地址在 IP 包头里,名称在 SNI 和 Host 里——两者都需要,连接才能按预期工作。

接下来做什么

  • 读一下关于 Via 和 X-Forwarded-For 头的单独文章——现在你完全理解传输层在哪里结束、应用层在哪里开始,不会再混淆它们。
  • 如果你管理 Web 服务器,开启 $ssl_server_name 日志,看看有多少客户端不带 SNI。
  • 如果你写自动化程序,检查你的库用的是哪种代理方案、DNS 解析在哪里进行——这直接影响目标服务看到的地址和地区。

往哪里发展

本指南之后接下来该学的主题:完整拆解 TLS 握手及其 1.3 版本、HTTP/2 和 HTTP/3 的多路复用与伪头、带 A、AAAA、CNAME 和 HTTPS 记录的 DNS 原理,以及 nginx 里按 SNI 选择证书的虚拟主机配置。每一个都建立在你刚刚亲手做过的事情上——现在学起来会明显轻松很多。