电信ADSL光纤下自建centos服务器 阿里云服务器反向代理 外面再加个CDN 该如何 *** 作呢？

Windows也不是也是选用的阿里的云服务器？
在你的NGINX的nginxconf配置文件中增加类似如下的配置。
stream {
# windowsdb
upstream windowsdb {
server windows-server-IP-address:xxxx;
}
server {
listen xxxx;
proxy_pass windowsdb;
proxy_connect_timeout 1h;
proxy_timeout 1h;
}
}

---