一次完整的工程记录:LightVela 云桌面 · Cloudflare · 韩国 VPS · frp · 宝塔 · 通配符证书 · 安全体检
记录时间:2026-11-09 | 所有结论均为当场实测,未实测的会明确标注
脱敏说明:公网 / 内网 / 隧道 IP、实例 ID、面板安全入口路径、SSH 密钥名均已打码(
x.x/xxxxxxxx/<部署密钥>),端口与域名保持原样以便复现思路。
一、起点:一个"只能用鼠标点"的云桌面
事情的开头很朴素:一台按小时计费的云桌面。
- 平台:
lightvela.com/agents/labs/cloud-desktop - 实例 ID:
ins-************************ - 入口形态:网页里嵌一个 VNC/canvas 远程桌面,必须用鼠标点着操作
这种环境的第一个问题不是"配什么服务",而是怎么把操作从"点鼠标"变成"敲命令"。因为后面所有事情——装面板、配反向代理、签证书——在 canvas 上都是不可行的:canvas 不吃常规键盘事件,剪贴板同步不通,bu.type() / press_key() 全部无效,连 Ctrl+C 都注入不进去。
所以整件事的技术顺序被逼成了:
先拿到 SSH 通道 → 才能自动化 → 才能谈架构
而拿到 SSH 通道,又依赖这台机器本身能出网、且有一个不依赖入向映射的中转。
二、环境勘察:这台机器到底是什么
2.1 操作系统与规格
从桌面里手工跑了几条命令,随后 SSH 通了之后又全部复核了一遍。
| 项目 | 实测值 |
|---|---|
| 发行版 | Ubuntu 24.04 LTS |
| 内核 | 6.8.0-138-generic |
| hostname | hermes-wb |
| CPU | 2 vCPU,AMD EPYC 9K84 |
| 内存 | 7.4 GiB(可用约 5.0 GiB) |
| 根盘 | / overlay 45G,已用 3.9G |
| 数据盘 | /dev/vdb 挂载到 /home/desk(持久卷) |
这里有个决定后续所有设计的细节:/home/desk 是持久卷,overlay 层不是。
意味着:
- 放在
/home/desk的脚本、venv、二进制、凭据 → 容器重建后还在 - 放在
/www、/etc/systemd/system、/root/.ssh的东西 → 容器一重建就全部消失
这个约束直接决定了后面 setup.sh 要怎么写(见第三节)。
2.2 网络结构:三层地址,只有一个能用来连
| 层级 | 地址 | 说明 |
|---|---|---|
| 容器内网 | 10.0.0.2/30 | host0@if3,一个 /30,只有两个可用地址 |
| 出口公网 | 122.51.169.245 | 共享 NAT,不是独占,也不能做入向映射 |
| 覆盖网络 | 100.64.x.x | 节点小宝分配的隧道 IP,SSH 实际连这个 |
监听的端口(ss -ltnp):
22 sshd (pid 128)
80 nginx(宝塔装完之后)
888 —
9118 owjdxb(节点小宝客户端)
37820 BT-Panel (pid 176520)
3306 MySQL(宝塔自带)
127.0.0.1:20241 cloudflared
127.0.0.1:16880 / 127.0.0.1:2080 NodeBabyLinkSer
关键判断:平台不给入向端口映射,出口 IP 还是共享的。所以"直接在公网开 80"这条路从一开始就不存在,必须靠隧道类方案。
2.3 一个容易误判的点
122.51.169.245 看起来像"这台机器的公网 IP",但它是共享 NAT 出口。任何"把域名 A 记录指到这个 IP"的想法都不成立——你连不上它背后的这台机器。
三、把工具链做成一次性的:setup.sh 的设计
云端机器的通病是"重建即归零"。既然 /home/desk 是持久卷,那就把所有该重建的东西都写成脚本,放在持久卷上。
3.1 脚本要覆盖什么
最终版 setup.sh(10090 字节,bash -n 通过,md5 e217b220bd7ad4c1e24f08500a9ff4c6)分成 8 段:
| 段 | 内容 | 落在哪层 |
|---|---|---|
| 1/8 | apt 基础工具链(python3-venv、curl、ffmpeg、tmux、jq、gcc…) | overlay |
| 2/8 | Python venv + requests/numpy/pandas(清华源) | 持久卷 /home/desk/venv |
| 3/8 | SSH 公钥写入 /root/.ssh/authorized_keys | overlay |
| 4/8 | 节点小宝 systemd 单元(程序在持久卷) | overlay |
| 5/8 | 宝塔面板安装 + 账号密码校对 | /www overlay |
| 6/8 | Cloudflare Tunnel(cloudflared 安装 + 凭据恢复) | overlay |
| 7/8 | frpc systemd 单元(配置在持久卷) | overlay |
| 8/8 | 安全加固(空密码、Node 版本、sshd、密码策略、core dump、TMOUT、别名) | /etc overlay |
第 8 段是后来补的——因为宝塔体检暴露的问题全是 /etc 下的配置,容器一重建就回滚,不固化等于没修。
3.2 幂等的三个具体做法
写这种"复原脚本"最容易犯的错是"重复装一遍",尤其会把正在跑的隧道掐断。这里用了三条规则:
① 二进制在持久卷,只重建 systemd 单元
if [ -x "$FRP_DIR/frpc" ] && [ -f "$FRP_DIR/frpc.toml" ]; then
cat > /etc/systemd/system/frpc.service <<'EOF'
...
EOF
fi
frpc 的二进制和 toml 都在 /home/desk/frp,重建时只需要把 /etc/systemd/system 的单元写回去。不重新下载,不重新生成配置。
② 服务已在跑就跳过重启
if systemctl is-active --quiet owjdxb.service; then
echo "服务已在运行,跳过重启(避免掐断隧道)"
else
systemctl restart owjdxb.service
fi
这条不是洁癖。节点小宝的服务重启会掐断当前 SSH —— 而脚本正是通过这条隧道的 SSH 在执行。重启 = 脚本自杀。
③ 装宝塔要喂 stdin
宝塔的 install_panel.sh 里有 3 处 read -p。无终端环境下跑会卡死在等待输入,日志看起来像"安装中",实际是死等。
yes y | bash install_panel.sh rU2tN9mZ
初见时试过 nohup ... &,一样卡死——问题不在前台后台,在 stdin。yes y | 把三处提示一次性喂满。
3.3 实测结果
$ bash /home/desk/setup.sh
EXIT=0
八段全部走通,venv 里 pip 26.3、requests 2.34.2、numpy 2.5.4、pandas 3.1.1。
四、公网访问的三条路:为什么最后走 frp
容器只有内网地址、出口是共享 NAT、平台不给端口映射。可行的只有"容器主动往外连"这一类。实测过三条路。
4.1 节点小宝(现成,但限制死在协议上)
节点小宝是平台预装的组网客户端,已经跑在 9118,分配了 100.64.x.x。
它能做的:给我一条稳定的 SSH 通道。整个工程能自动化,靠的就是它。
它不能做的(实测确认,客户端的硬限制):
| 限制 | 后果 |
|---|---|
| 不支持 TCP/UDP 转发 | SSH、SMB、SFTP 一律不行(只剩 HTTP/HTTPS) |
外网域名只能是 *.iepose.cn | 不能绑自有域名 |
| 免费/基础版固定后缀 | 对外观感和可信度都不适合长期使用 |
所以它适合当运维通道,不适合当业务入口。
4.2 Cloudflare Tunnel(能用,但境内要翻墙)
cloudflared 主动出网建隧道,Cloudflare 边缘对外提供 HTTPS。这条路一通就能给 panel.5616760.com 提供服务,而且不需要开放任何入向端口。
实测结果:
| 检查 | 结果 |
|---|---|
| cloudflared 安装 | 官方 apt 源可达(约 0.7s),不要走 GitHub(此网络直连超时) |
| 隧道注册 | Registered tunnel connection 正常,4 条连接 |
| 公网访问 | 可以打开,但必须开代理 |
问题就出在最后一行。CF 的边缘节点在境外,境内用户访问 panel.5616760.com 要先进 CF 边缘——这一步在境内不稳定到"必须科学上网"的程度。用户的原话是:“可以打开了,但现在还需要使用科学上网才行。”
4.3 韩国 VPS + frp(最终方案)
用户手上有一台腾讯云的韩国 VPS:101.33.x.x。
思路很直接:容器 frpc 主动出网连 VPS,VPS 上开一个本地端口,VPS 的 nginx 对外终结 TLS。
4.4 三条路的对比
| 维度 | 节点小宝 | Cloudflare Tunnel | VPS + frp |
|---|---|---|---|
| 境内可直连 | 是 | 否(需代理) | 是 |
| 能绑自有域名 | 否(*.iepose.cn) | 是 | 是 |
| 需要开放入向端口 | 否 | 否 | 是(7000 控制口) |
| 额外成本 | 0 | 0 | 一台 VPS |
| 延迟(实测) | — | 不稳定 | 面板首次 1.4–1.7s,热连接 0.35s |
| 适合角色 | 运维通道 | 备用入口 | 业务主入口 |
结论:主入口走 VPS + frp(境内直连、可绑自有域名),备用入口保留 CF Tunnel,节点小宝只用来 SSH。
4.5 VPS 侧的关键配置
VPS 是 OpenCloudOS 9.6(VM-0-12-opencloudos),50G 盘用 9.9G,内存 1.9 GiB(可用约 949 MiB)——内存很紧,所以 VPS 上只跑 nginx + frps,不装重东西。
/usr/local/frp/frps.toml:
bindAddr = "0.0.0.0"
bindPort = 7000
auth.token = "<32字节随机>"
allowPorts = [{ start = 37821, end = 37821 }]
log.to = "/var/log/frps.log"
容器侧 /home/desk/frp/frpc.toml:
serverAddr = "101.33.x.x"
serverPort = 7000
auth.token = "<同上>"
transport.poolCount = 2
[[proxies]]
name = "bt-panel"
type = "tcp"
localIP = "127.0.0.1"
localPort = 37820
remotePort = 37821
两个坑:
frps.toml不能写maxPoolCount。那是 frpc 专属字段,写进 frps 会让 frps 立刻退出(日志里只有一行启动失败,不解释原因)。allowPorts只放了 37821 一个端口。所以"新站点放容器"这条路,端口白名单还没开闸——这是遗留待办,不是缺陷。
VPS nginx 用 kr.5616760.com.conf 做反代,几个参数是必须的:
location / {
proxy_pass https://127.0.0.1:37821;
proxy_ssl_verify off; # 源站是宝塔自签,跳过校验
proxy_set_header Host $host; # 必须透传,否则宝塔认不出域名
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header Upgrade $http_upgrade;
proxy_set_header Connection $connection_upgrade;
proxy_read_timeout 600s; # 面板长操作会超时,默认 60s 不够
proxy_buffering off; # 面板有流式响应
client_max_body_size 200m; # 传文件
}
五、那个被反复问的问题:能不能让同一域名境内外走两条路
用户提过明确需求:国内走韩国 VPS、国外走 Cloudflare。 并且给了两个具体设想。
这件事我查清了才回答,因为"看起来能做"和"实际能做"差别很大。
5.1 结论先行
在"Cloudflare 托管 DNS + 免费版"这个前提下,做不到自动分流。 两个设想都不成立。
5.2 为什么 Cloudflare 做不到
三条硬限制,逐条查证:
| 限制 | 事实 |
|---|---|
| DNS 记录层面 | 免费版一条 A 记录只能一个值,没有任何"境内/境外线路"概念 |
| 地理调度 | Cloudflare 的 Geo steering / Load Balancing 地域分流仅企业版 |
| Origin Rules | 官方可用性表写得很清楚:免费版/Pro/Business 都不能改回源 DNS、Host、SNI,只有 Enterprise 可以;免费版只能改目标端口 |
更根本的一条是物理层面的:
Origin Rules 改的是"CF 回源到谁",不是"用户先连到谁"。
境内用户要访问 xxx.5616760.com(橙云),第一步就是连到 CF 的边缘 IP。哪怕回源规则能改,用户也已经先出了一趟境。所以任何 Worker / Rules / Load Balancing 方案都绕不过这一步——这是拓扑决定的,不是配置技巧能解决的。
5.3 为什么华为云地域线路解析也不成立
设想一:用国际版华为云的分区域配置,一个域名配两个 CNAME 指向两条路。
华为云的地域线路解析技术上确实存在:
- 同一域名下的记录集带"线路类型"字段
- 支持全网默认 / 中国大陆(细分到省)/ 境外 / 亚太欧洲北美等 200+ 国家
- CNAME 属记录集通用类型,可以配
但有两条硬前提:
| 前提 | 代价 |
|---|---|
| NS 必须迁到华为云 | 一迁,CF 的 zone 立即 inactive:panel 那条 CF Tunnel 断掉;所有橙云子域瞬间失去代理、WAF、缓存 |
| 境内线路指向大陆服务器需 ICP 备案 | 不备案就指向大陆 = 违规,且会被拦 |
设想二:在 Cloudflare 里用对象存储增加一个"回溯源"。
这个方向不成立的原因和 5.2 同源——改回源不等于改用户首跳。加一个源,只是给 CF 多一个回源选择,境内用户依旧先到 CF 边缘。
5.4 最终采用的做法
放弃自动分流,改成两个子域并行,各走各的:
| 域名 | 走哪条 | 境内体验 |
|---|---|---|
kr.5616760.com | 韩国 VPS(灰云直连) | 直连,不用代理 |
panel.5616760.com | Cloudflare Tunnel(橙云) | 要代理,当备用 |
这个方案的取舍很诚实:不做"自动判断用户在哪",而是"你自己选入口"。工程上简单、可解释、不依赖任何付费能力。
六、把地基打牢:泛解析、通配符证书、443 兜底
前面的成果都是"某一条链路通了"。真正让后续省事的是这一节——把"以后加站怎么配"变成一次性动作。
6.1 第一刀:泛解析必须是灰云
现象:*.5616760.com 的 A 记录被设成橙云(proxied),解析到了 CF 边缘 IP(104.21.72.158 / 172.67.152.176)。
后果:每一个新加的子域都会自动继承这个行为 → 每个新站都重演"必须翻墙"。
处置:
用 CF API 把整个 zone 的 45 条记录全拉下来,找 proxied=true 的那条:
GET /zones/{zone_id}/dns_records?per_page=100
定位到 A *.5616760.com 的 proxied=True,用户在控制台改成灰云。
验证:随机取三个子域复查,全部直落 101.33.x.x,不再出现 CF 边缘 IP。
这一刀是整个"地基"里最重要的——它决定了后续所有子域默认是"境内直连"。
6.2 第二刀:一张通配符证书,免掉逐站签发
原来每个站各自签一次 Let’s Encrypt,加站就要加一次签发、加一次续期监控。改成一张通配符证书,所有子域共用。
为什么必须走 DNS-01:
通配符证书(*.domain)不能用 HTTP-01 验证,只能 DNS-01。原因很直接——ACME 服务器要验证"你控制整个域",而 HTTP-01 只能证明"你控制某一个具体主机名的 80 端口"。
用 acme.sh(v3.1.5)+ CF API Token:
export CF_Token="<API Token>"
acme.sh --issue --dns dns_cf \
-d 5616760.com -d '*.5616760.com' \
--keylength ec-256
签发结果:
| 项 | 值 |
|---|---|
| CN | 5616760.com |
| SAN | DNS:*.5616760.com, DNS:5616760.com |
| 有效期 | 2026-11-09 → 2027-02-07(90 天) |
| 落盘路径 | /www/server/panel/vhost/cert/wildcard.5616760.com/{fullchain.pem,privkey.pem} |
| 续期 | acme.sh 自动,--list 可见 Next renewal: 2027-01-07 |
这里踩了一个很值钱的坑:签发过程被一次会话中断打断(工具报 TASK_OUTPUT_IN_PROGRESS),看起来像"没签成"。实际去 VPS 查真实状态,证书已经在。如果当时按"没签成"再签一次,就会撞上 Let’s Encrypt 的频率限制(同一组域名 7 天内 5 次失败上限)。
教训:工具报中断 ≠ 操作没发生。任何签发/删除/重启类操作,中断后第一件事是去现场核对状态,不是重试。
6.3 第三刀:建一个临时站做严格验证
证书签完不等于能用。建了 probe.5616760.com 做端到端验证,四项全过:
| 验证项 | 结果 |
|---|---|
| DNS 解析 | 101.33.x.x |
| HTTPS 响应 | code=200 len=27 t=0.24s |
| 证书 SAN | DNS:*.5616760.com, DNS:5616760.com |
| 80 → 443 | 301 Location=https://probe.5616760.com/ |
验证完就把 conf 和目录删掉、reload。临时站要随手清理,否则半年后没人知道 probe 是干什么的。
6.4 第四刀:443 的兜底,让"未配置的子域"优雅失败
问题:任意子域都在泛解析里,用户敲一个不存在的子域,请求会打到 VPS 的 443,但没有任何 vhost 匹配 → nginx 用默认 server 处理 → 大概率落到宝塔的默认站(自签证书 + 一个莫名的页面)。
做法:新建 0.wildcard-default.conf:
server {
listen 443 ssl default_server;
listen [::]:443 ssl default_server;
ssl_certificate /www/server/panel/vhost/cert/wildcard.5616760.com/fullchain.pem;
ssl_certificate_key /www/server/panel/vhost/cert/wildcard.5616760.com/privkey.pem;
ssl_protocols TLSv1.2 TLSv1.3;
ssl_session_cache shared:SSL:10m;
access_log off;
return 444;
}
效果:TLS 握手能成(通配符证书有效),然后连接被直接关闭(444)。既不给错误页暴露信息,也不会误入别的站点。
踩坑:第一版写了 server_name _;,nginx 报
conflicting server name "_" on 0.0.0.0:443, ignored
因为宝塔自带的 0.default.conf 已经用了 _。删掉这行(default_server 本来就不需要 server_name)后干净了:
sed -i '/^ *server_name _;/d' 0.wildcard-default.conf
实测:随机未建站子域 → TLS 握手成功但连接被关(444 生效);bt、nav 等既有站点不受影响。
七、加站方法论:两种流程,一个模板
地基打好之后,加一个新站只有两条路。
7.1 站放在 VPS 上
- 宝塔新建站点(域名填
xxx.5616760.com) - 证书选择:直接引用
wildcard.5616760.com的fullchain.pem/privkey.pem(不要新签,省掉一次签发 + 一次续期监控) - 域名解析:CF 里加一条 A 记录 →
101.33.x.x。★proxied必须是 false(灰云),否则境内又要翻墙 - 验证:curl 严格校验 + 看 SAN
7.2 站放在容器里,经 frp 出去
- 容器内起服务,监听
127.0.0.1:<port> frpc.toml加一段 proxy,remotePort 选一个- ★ VPS
frps.toml的allowPorts必须包含这个端口 - VPS 新建 vhost,反代到
127.0.0.1:<remotePort> - 证书同样引用 wildcard
- DNS 同上
第 3 步是当前唯一没开闸的地方:allowPorts = [{ start = 37821, end = 37821 }]。想让"新站放容器"变顺畅,要把它改成 37821→37830 之类的区间。
7.3 加站检查清单
| # | 检查 | 判据 |
|---|---|---|
| 1 | DNS 是否直落 VPS | getent hosts xxx = 101.33.x.x,不能是 104.21.x / 172.67.x |
| 2 | CF 记录是否灰云 | proxied=false |
| 3 | 证书 SAN 是否覆盖 | 含 *.5616760.com |
| 4 | 严格校验 | curl(不加 -k)返回 200 |
| 5 | 80 → 443 | 301 且 Location 正确 |
| 6 | 面板类站点 | 必须带完整 Chrome UA(见第八节) |
八、安全体检:15 项逐条核实
宝塔在 101.33.x.x 上报了一批风险项。处理原则是:先全量实测,再按"能修 / 不该修 / 误报"分类,不盲从面板结论。
8.1 真实高危:两处
① 空密码 root(容器)
面板说"存在空密码用户",容器上核实为真:
$ awk -F: '$1=="root"{print $2}' /etc/shadow
(空)
root 的密码字段为空 → 任何能连上 SSH 的人可以直接 root 登录。容器镜像默认如此。
处置:设随机强密码,哈希随之从空变为 $y$(yescrypt),字段长度 73。
echo "root:<强密码>" | chpasswd
注意:容器的 SSH 平时只走公钥,这个密码只是兜底。但"空密码"仍然是必须消掉的高危项。
附带发现:VPS 侧的 SSH 反而更松 —— PermitRootLogin yes + 允许密码登录 + 密码哈希是 MD5($1$)。顺手把注 passwd 改成了 yescrypt($y$)。MD5 哈希在离线爆破面前基本等于明文。
② Node.js CVE-2026-111497(Node2Shell)
面板报的这个 CVE 是真的,且影响面很具体:
| 项 | 内容 |
|---|---|
| 漏洞 | Node.js 内置 Brotli 解码器越界写,可致 RCE |
| 影响版本 | 22.x / 24.x / 26.x |
| 修复版本 | 22.23.4 / 24.22.1 / 26.12.1 |
| 18.x / 20.x | 已 EOL,无官方修复 |
先确认业务风险,再动手:检查所有 vhost,确认没有任何站点引用 Node(都是静态站 / PHP / 反代)。确认无风险后才升级。
| 机器 | 升级前 | 升级后 | 方式 |
|---|---|---|---|
| 容器 | v22.22.2 | v22.23.4 | 解压到 /usr/local/lib/nodejs/,重链 /usr/local/bin/{node,npm,npx} |
| VPS | v26.8.2 | v26.13.0 | 解压到 /www/server/nodejs/,/usr/local/bin/node 软链过去 |
升级后复核:容器 node=v22.23.4 npm=10.9.9 pnpm=10.33.0,pnpm 和 qwen 都正常;VPS node=v26.13.0 npm=11.20.0。
两台都保留了系统包 nodejs 18.19.1(Ubuntu apt 装的),因为 btcli 等本地工具依赖它。这是两个不同层的 Node,不要互相覆盖。
8.2 已修的中危项
| 项 | 做法 | 复核 |
|---|---|---|
| SSH 登录超时 | LoginGraceTime 30 / ClientAliveInterval 300 / ClientAliveCountMax 3 | sshd -T 显示三项均生效 |
| SSH 密码修改最小间隔 | PASS_MIN_DAYS 1 | 写入 /etc/login.defs |
| 核心转储 | limits.conf 加 * soft core 0 / * hard core 0 | 防崩溃时把内存写盘 |
| 无操作超时 | /etc/profile.d/09-tmout.sh → TMOUT=600 | 新登录 shell 生效 |
| ls/rm 别名 | /etc/profile.d/10-safe-alias.sh → rm/cp/mv -i、ls --color=auto | — |
| 面板未走 HTTPS | VPS 面板开 SSL(见 8.3) | 明文端口已关 |
8.3 面板 HTTPS 的一个连锁反应
VPS 面板原本是明文 http://101.33.x.x:8888。查 /www/server/panel/ssl/ 发现已有自签证书(2026-03 生成,CN=101.33.x.x,有效期到 2036)。所以不需要重新生成,只要打开开关:
echo "True" > /www/server/panel/data/ssl.pl
bt restart
HTTP 端口随即关闭。
但是:bt.5616760.com 这个站点是反代 http://101.33.x.x:8888/ 的。面板一转 HTTPS,这个站立刻 502。
修法:
# 改前
proxy_pass http://101.33.x.x:8888/;
# 改后
proxy_pass https://127.0.0.1:8888/;
proxy_ssl_verify off;
验证:https://bt.5616760.com/yyyyyyyy → 200,30599 字节。根路径 / 返回 404(146 字节)是面板自身防护,属正常。
8.4 按用户意愿未处理的项
| 项 | 不处理的原因 |
|---|---|
| SUID/SGID 清单 | 容器场景不适用(镜像自带大量 SUID 二进制) |
| 禁 Ping | 用户在用的连通性排查依赖 ICMP |
| TCP Wrappers | Ubuntu 24.04 已弃用 |
| PAM wheel 限制 | 单人 root 运维,无多用户场景 |
| 面板登录告警/监控 | 用户暂不需要 |
| SYN cookie | 实测本来就是 1,无动作 |
另有一项用户明确拒绝:VPS 上 37821 / 7000 / 8888 三个端口公网可达。原话是"端口,没关系,不用管它"。
这里必须如实记录风险:37821 是 frp 隧道出口,绕过 nginx 直接暴露宝塔面板明文口;7000 是 frps 控制口;8888 是面板。三者都做了认证,但暴露面确实存在。要在备忘录里作为待办留档。
九、踩坑全记录
这一节是整篇最有价值的部分。每一条都是真实发生的,不是"可能遇到的问题"。
9.1 宝塔的 UA 检测(最高频坑,今天误判两次)
现象:curl https://kr.5616760.com/xxxxxxxx 返回 404,146 字节。
排查过程(逐层往下):
| 层 | 检查 | 结果 |
|---|---|---|
| 容器 frpc | systemctl is-active frpc | active |
| VPS 端口 | ss -ltnp 看 37821 | BT-Panel 在监听 |
| frpc 日志 | tail frpc.log | start proxy success |
| 容器内直连 | curl https://127.0.0.1:37820/xxxxxxxx | 也是 404 |
最后一条是关键:容器内直连就已经 404,说明跟 frp、nginx、证书全都无关。
根因:宝塔的防扫描逻辑看 UA 长度。短 UA(Mozilla/5.0)或无 UA → 404;完整 Chrome UA + 完整 Accept → 200。
User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/157.0.0.0 Safari/537.36
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8
规则:任何针对宝塔面板的探测,必须带完整 UA + Accept。否则"404"会把你引向完全错误的方向。
9.2 脚本写到正在执行的自己
# 错误做法
cat > /tmp/fix.sh <<'EOS'
...内容...
EOS
如果 /tmp/fix.sh 正是当前正在执行的文件,bash 打开它读到的是被覆盖后的内容 → 静默退出、零输出。
这个坑让我连续两次"以为执行了、其实没执行",浪费了一整轮排查。
规则:heredoc 的目标文件名,绝不能与正在执行的脚本同名。
9.3 漏写跳板层,命令打到了错误的机器
fix_vps.sh 的意图是"在 VPS 上执行",实际写法是:
VPSPW=xxx bash /tmp/fix_vps.sh
漏了最后的转发:脚本里没有 sshpass ... root@101.33.x.x "bash -s" < /tmp/body 这一层。结果整段脚本在容器本地执行,把一台只该装 Node 22 的容器装上了 Node 26,还切了版本。
事后回滚到 v22.23.4,复核 pnpm / qwen 正常;误装的 /www/server/nodejs/v26.13.0(226M,属主 www,10-28 时间戳,来源不明)保留未删——不确定是不是别的东西在用,宁可不删。
规则:经跳板执行的脚本,末尾必须有 sshpass ... "bash -s" < /tmp/<名字不同的文件>。写完先 grep sshpass 自查一遍。
9.4 sed 写坏了两个站点
# 错误
sed -i -E "s#^(\s*ssl_certificate\s*)\S+#\1.../#"
ssl_certificate\s* 里的 \s* 允许零个空格,于是匹配到了 ssl_certificate_key 行的前缀 ssl_certificate,替换结果变成:
ssl_certificate/www/.../fullchain.pem; /www/.../privkey.pem;
nginx -t 报 unknown directive,reload 失败 → 线上未受影响(这一点救了这个晚上)。从 .bak 恢复后,改用 [[:space:]]+(要求至少一个空格):
sed -i -E "s#^([[:space:]]*ssl_certificate[[:space:]]+)\S+#\1...#"
规则:写 sed 改 nginx 配置,ssl_certificate 与 ssl_certificate_key 是前缀关系,正则必须要求"至少一个空格"。
9.5 “证书不匹配"的真凶不是证书
现象:html_ai.5616760.com / html_tt.5616760.com 报 Hostname mismatch。
第一反应(错的):证书问题 → 换成通配符证书。
换完还是不行。继续挖:
$ grep server_name html_ai.5616760.com.conf
server_name ai.5616760.com; # ← 真凶
这两个 vhost 的 server_name 写的是 ai.5616760.com / tt.5616760.com,而对外用的是 html_ai. / html_tt.。域名和 server_name 对不上,请求根本没进这个 server 块。
修法(保留短名做别名,避免老链接失效):
server_name html_ai.5616760.com ai.5616760.com;
修完:html_ai / html_tt / ai / tt 四个域名全部 200。
这个坑的教训:证书报错先看 server_name 和实际域名是否一致,再看证书。
9.6 其他值得记的坑
| 坑 | 现象 | 处置 |
|---|---|---|
pkill -f "cloudflared tunnel" | 匹配到 SSH 命令行自身,把自己杀了 | 用 [c]loudflared 或 pkill -x |
nohup 跑宝塔安装 | 卡死(不是后台的问题,是 stdin) | yes y | + setsid |
frps.toml 写 maxPoolCount | frps 秒退,日志不解释 | 该字段只属 frpc |
| 容器内 GitHub 直连 | 超时(000/8s) | 走官方 apt 源 / nodejs.org |
| PowerShell 双引号嵌套 | 含中文/括号时极易炸 | 写本地 .sh → scp → 远端 heredoc |
PS 里 "第$i次" | 变量引用报错 | 写 ${i} |
| 节点小宝中转 TCP | 不支持 UDP/TCP/SMB | 只当 SSH 通道 |
面板 /code 验证码 | 未登录时两条链路都 404 | 面板自身行为,非故障 |
Windows curl 访问 VPS 443 | schannel: SEC_E_INVALID_TOKEN | 加密套件问题,非阻断 |
十、最终状态
10.1 架构
10.2 站点状态(全部从 Windows 真实公网链路复测)
| 域名 | 路径 | 状态 | 耗时 | 证书 |
|---|---|---|---|---|
kr.5616760.com | /xxxxxxxx | 200(30569 B) | 1.4–1.7s | 自有 |
bt.5616760.com | /yyyyyyyy | 200(30599 B) | 0.35s | 自有 |
nav.5616760.com | / | 200(25432 B) | 0.28s | 自有 |
html_ai.5616760.com | / | 200 | — | 通配符 |
html_tt.5616760.com | / | 200 | — | 通配符 |
ai.5616760.com | / | 200(67305 B) | 0.9s | 通配符 |
zhuzhai.5616760.com | / | 404(0 B) | 0.2s | 自有(站点内容为空) |
ui.5616760.com | / | 404(0 B) | 1.1s | 自有(站点内容为空) |
panel.5616760.com | /xxxxxxxx | 读超时 | — | CF Tunnel(境内需代理) |
10.3 VPS 上的 16 个 vhost
0.default 0.fastcgi_cache 0.site_total_log_format
0.websocket 0.wildcard-default ★ 101.33.x.x
bt html_ai ★ html_cad
html_tt ★ kr nav
phpfpm_status ui waf2monitor_data
zhuzhai
(★ = 本轮改动)
十一、复盘:这套方案真正的价值在哪
11.1 地基比站点重要
一晚上做的所有事情里,一个个站点只是"结果”。真正降低了长期成本的是三件事:
- 泛解析改成灰云 —— 让"新子域默认境内可直连"成为默认行为,而不是每次都要记得去改
- 一张通配符证书 —— 加站不再需要签发、不再需要单独监控续期
- 443 default_server 兜底 —— 未配置的子域优雅关闭,不会误入别的站
这三件事做完,“加一个新站"从"一堆未知步骤"变成"照着清单敲四条命令”。
11.2 知道自己做不到什么,比做到什么更重要
“境内外自动分流"这件事,看起来是配置问题,实际是拓扑问题。查清 CF 免费版的边界(Origin Rules 只能改目标端口、Geo steering 仅企业版)和华为云地域解析的代价(NS 迁移 + 备案)之后,答案就变成了"不做什么”。
这个结论的价值在于:避免了迁 NS 导致整个 zone inactive 的连锁事故。CF 上还有 45 条记录、一条隧道、几个橙云子域在跑,迁 NS 的代价远大于收益。
11.3 面板报的风险不等于真实风险
15 项体检项里:
- 真高危 2 项(空密码 root、Node CVE)—— 必须修
- 该修的中危 6 项 —— 已修
- 容器场景不适用 6 项 —— 不该照做(SUID 清单、TCP Wrappers、PAM wheel…)
- 本来就是合规的 1 项 —— SYN cookie 早就是 1
如果照着面板的建议无脑全修,会在容器里塞一堆没意义的限制,甚至破坏镜像自带的服务。
11.4 最贵的一课:工具报的"失败"要回现场核对
可靠性上最大的威胁不是技术难点,是误判。这一晚的三次误判:
| 误判 | 代价 |
|---|---|
| 短 UA 触发 404 → 以为链路断了 | 白排查一层 |
| 工具报中断 → 以为证书没签成 | 差点重复签发撞 LE 限频 |
| 证书 mismatch → 以为证书问题 | 换了证书才发现是 server_name |
三次都指向同一句话:先看现象背后的原始信号,再动配置。curl 404 要看是 nginx 回的、面板回的、还是防护回的;Hostname mismatch 要看实际下发的证书和 server_name。
附录:关键凭据与路径
完整凭据见《运维备忘录》,此处脱敏。
| 项 | 值 |
|---|---|
| 容器 SSH | root@100.64.x.x:22,密钥 ~/.ssh/<部署密钥> |
| 容器宝塔 | :37820,安全路径 /xxxxxxxx |
| VPS | 101.33.x.x,OpenCloudOS 9.6 |
| VPS 面板 | :8888(HTTPS),安全路径 /yyyyyyyy |
| 通配符证书 | /www/server/panel/vhost/cert/wildcard.5616760.com/ |
| 443 兜底 | /www/server/panel/vhost/nginx/0.wildcard-default.conf |
| 复原脚本 | C:\Users\56167\Doubao\chats\2026-11-09\new-chat\setup.sh(10090 B,md5 e217b220) |
待办(已知风险):用于 DNS-01 签发的 API Token 尚未轮换撤销;frps.toml 的 allowPorts 仍只放 37821 单端口;VPS 上 7000 / 37821 / 8888 三个端口公网可达(用户已接受,后续应改为安全组白名单)。