1.
目标与总体架构说明
• 目标：确保网易游戏在大规模并发、跨省跨国访问下的连通性、稳定性与安全性。• 范围：涵盖源站服务器、VPS/主机、域名解析、CDN边缘节点与与运营商的物理/逻辑链路联调。
• 成果衡量：RPS、响应延时（ms）、丢包率（%）、发生DDoS时的最大吸收能力（Gbps）。
• 参与方：网易技术团队、CDN厂商、ISP运营商（骨干与接入）及运维外包单位。
• 约束：域名DNS TTL、回源带宽、法律合规（流量审计、敏感国家访问限制）。
• 工具：mtr/traceroute/tcpdump、HTTP压测（wrk、locust）、BGP路由查看。
2.
联调前的基础设施准备
• 服务器规格示例：4台主站，配置为 8C/32GB/2x1TB NVMe，千兆BGP出口，回源带宽10Gbps。• VPS/主机角色：2台监控与日志收集机（4C/8GB），用于采集边缘与回源性能数据。
• 域名与DNS策略：FQDN采用智能解析，TTL设置为60秒以便快速切换回源。
• CDN配置初稿：边缘Cache TTL=60s（热点为10s），回源并发连接限制1024，健康检查间隔10s。
• 与ISP准备：交换BGP前缀、联调时间窗、链路质量基线（延迟/丢包/抖动）。
• 测试账号与白名单：提供运营商测试IP段与ASN，便于绕过缓存进行直连验证。
3.
与运营商联调的流程建议
• 第一步：建立联调计划表，按省分时段测试并预留切换窗口。• 第二步：BGP路由验证，双方互换AS路径并确认路由策略（社区、MED、LocalPref）。
• 第三步：链路质量验证，使用mtr对比边缘节点到回源的延迟与丢包，目标丢包<0.5%，P95延迟<80ms。
• 第四步：流量切换演练，从小流量到大流量逐步增加，观察丢包与回源压力。
• 第五步：异常处理联动机制，定义报警阈值（例如HTTP 5xx比例>1%或丢包率>1%立即通知）。
• 第六步：测试用例清单，包括TCP握手、TLS协商、长连接稳定性与大并发短连接场景。
4.
CDN与回源、缓存策略细节
• 缓存策略：静态资源TTL 86400s，热更包设置短TTL 10-60s并允许客户端强制刷新。• 回源策略：优先使用就近回源，同城切换到备份机房，当带宽>80%启动流量调度。
• 负载均衡：源站使用四层LB（Nginx+Keepalived），session保持可选，健康检查每10s。
• SSL与证书：Edge TLS 1.3开启，OCSP Stapling启用，证书自动续期脚本每30天检查。
• 日志与统计：边缘日志实时收集到ELK/ClickHouse，存留30天，异常时提供1小时粒度数据。
• 回源限流：设置回源QPS阈值，单源最大并发连接 2000，超出触发降级策略。
5.
DDoS防御与应急处置建议
• 常用阈值：触发scrubbing的门限通常设置为峰值流量的30%以上或单点>10Gbps。• 黑洞/清洗：与运营商协商清洗中心接入点，制定黑名单、灰名单和速率限制策略。
• WAF与流量行为分析：基于IP信誉、UA指纹和请求频率进行实时拦截，异常IP自动限速。
• 自动化响应：流量突增时自动启用全局白名单和回源降级，运维团队同时人工确认并处置。
• 恢复策略：攻击结束后逐步解除限流，验证后端无异常再恢复正常策略，恢复窗口不小于30分钟。
• 监控指标：实时监控pps、bps、连接数、5xx比例，报警阈值明确并与ISP共享。
6.
真实案例与数据演示
• 案例概述：某次新版本上线前夕，网易游戏在广东/华东节点与运营商联调并演练切换。• 环境：4台源站（8C/32GB，回源10Gbps），CDN边缘50节点，ISP直连点8个。
• 演练结果：通过联调，P95延迟从120ms降至62ms，丢包率从1.2%降至0.2%。
• DDoS事件应对：一次峰值攻击被清洗中心吸收18Gbps，源站无中断，业务可用率99.98%。
• 建议：持续进行季度联调、降低DNS TTL至60s以缩短切换时间、预置清洗容量为平常峰值的2倍。
| 指标 | 演练前 | 演练后 |
|---|---|---|
| P95延迟(ms) | 120 | 62 |
| 丢包率(%) | 1.2 | 0.2 |
| 回源带宽占用(Gbps) | 6.5 | 3.1 |
| DDoS吸收峰值(Gbps) | — | 18 |
• 推荐下一步：建立跨团队常态化SLA、月度数据回顾与年度演习计划，以持续提升联调效率与抗压能力。
