新的 unblock [DNS] 伺服器測試進行中

[karlcheong]

回報問題時請詳細描述問題, 附上你的地區/ISP/使用的平台/網站, 不然將有可能遭忽略!

---

由#106 在家用路由中應用unblock服務的一些想法
現在由@zhuzhuor和我建立了一個新的unblock伺服器

以下借用一下zhuzhuor的WIKI內容

---

注意，使用本服務代表您同意以下條款

1. 相對於 Chrome 擴展程式，這種代理伺服器的模式會有安全隱患。如果代理伺服器被黑，則可能造成個人隱私洩漏或財產損失。
2. 因為技術上的原因，這種代理模式在功能，連接可用性及反應速度可能會受各種因素影響。

程式作者及伺服器提供者對任何可能的後果概不負責。

代理伺服器資源有限，歡迎技術達人嘗試運行自己的伺服器。下面給出了簡單的介紹。

測試進行時有問題可以在這里回復

---

DNS代理比現在yo.uku.im PAC代理多了以下功能：

1. DNS+反向代理: 就是類似unblock-us那樣，利用DNS+反向代理解封國家限制，只是針對的是中國而不是美國, 用戶可以通過修改DNS設定連接到伺服器。 For reference: https://trafficserver.apache.org/docs/trunk/admin/reverse-proxy-http-redirects/ 。
2. PAC代理，DNS開放非常規端口給位於透明代理/防火牆後的用戶, 以解決類似 ipad有的网络可以设置（true）， 有的不可以(false)，如何处理，谢谢！ #104 問題
3. 伺服器接入HE的IPv6隧道(記得某個帖中有人問IPv6的需求)
4. 破解部分Apps 廣告,影片下載限制 (只限使用DNS並/或自行修改host,pac) (不保證能用)
5. OpenDNS / Norton DNS 過濾各種不良網頁。

．．．請提出你的建議

目前支持的OS

支持PAC的各種瀏覽器, iOS Apps, Android Apps

   由於開通了反向代理服務, Android也可以通過這個服務unblock youku 了喔!
   暫時測試支持的有(以支持Apps為主)
   Apps: youku, tudou, iqiyi, letv, tencent video, sohu, baidu music, qq music, kuwo, kugou, duomi, ttpod.....
   Webpage: youku, tudou, iqiyi, letv, tencent video, sohu, baidu music

設定值：

PAC地址：http://dns.umbridges2014.com/proxy.pac
非常規端口(8000) PAC地址：http://dns.umbridges2014.com/altproxy.pac
DNS IPv4地址：192.241.222.103
DNS IPv6地址：2001:470:832e:1024:6969:5269::1
DNS端口： 53,5353 udp tcp
轉發模式後台： http://berryphp.ap01.aws.af.cm/digito.php

桌面電腦, iOS: 請看 http://ub.uku.im/proxy 把上面的pac地址填上去

Android: 把系統的DNS伺服器地址設定為上面的IP。
已ROOT, 想方便設定的人可以使用Set DNS 直接設定: SetDNS設定里打開override 3G/WiFi, 再回到主介面, 列表中點custom, 然後再輸入DNS的IP。
沒有ROOT的人請打開設定>WIFI>按住自己用的WiFi網絡>修改網絡>顯示進階選項>IP設定，由DHCP轉為靜態，然後再輸入DNS的IP。

---

技術說明：

新的 unblock 伺服器簡單來說就是用了 #106 的privoxy 再串上 WIKI上的Nodejs代理
另外再運行了 dns 轉發伺服器配合記錄了需解鎖域名的資料庫

unblock youku 公共PROXY的運作:

一般域名

User-> US IP DNS -> 3rd party DNS -> get the resolved IP
User-> internet -> target server

白名單域名/包含特殊URL時

User -> US IP DNS / PAC script -> get the Proxy IP
User-> US IP Proxy server -> China server -> internet -> target server

速度和安全性可以這樣高->低比較:

1. 自己架設nodejs 或 自己有國內IP代理配合PAC 做特殊URL轉發
2. 單純privoxy特殊URL轉發向unblockyouku伺服器 或 使用unblockyouku伺服器的pac檔做特殊URL轉發(DNS不變)
3. 使用unblockyouku的DNS反向代理

(1)使用ISP DNS, 連接一般網站時最佳, 除非nodejs / PAC 連接的國內IP代理出問題, 不然不會影響unblock。
缺點: 看 #80

(2)使用ISP DNS, 連接一般網站時最佳, 而一旦unblockyouku伺服器出問題時將不能連接特殊URL, 造成不能unblock。 缺點: 用電腦架設privoxy的話同 #80, 而用路由器架設會有點複雜, 只使用pac的話將不支持android等。

(3)使用unblockyouku的美國DNS轉發器, 連接一般網站時取不到距離自己近的IP, 可能影響瀏覽/下載速度, 而且一旦unblockyouku伺服器出問題而用戶不懂改回DNS設定, 將不能上網。 好處是簡單方便通用。

---

01/27/2014 重大注意事項 - 公共DNS服務

由於最近受到多次 "DNS放大攻擊" 的投訴, DNS服務將實行較嚴格的查詢速率限制。
這有可能會顯著影響您直接設定DNS後網絡瀏覽之速度及可靠性。

如攻擊情況持續, 短期內DNS服務將有可能無預警地被伺服器服務商關閉。
萬一DNS服務遭關閉, 您直接設定DNS的裝置將可能不能正常上網, 此時您需要把DNS設定還原。

預期在DNS服務遭關閉後, 反向代理部分仍能繼續運作
你可以通過安裝以下hosts檔, 把里面的IP改為伺服器IP, 又或者使用它來設置路由器內建的DNS服務，
以代替公共DNS之功能。
https://github.com/karlcheong/unblock_youku_privoxy_rules/blob/master/basehosts

多謝這些天來各位之使用及意見!
karlc.

---

状态监控

Feb 10, 2014 新添了 DNS 的状态监控

详细的历史信息可以访问
http://stats.pingdom.com/7w8lzo3be6k1/1113903

[Migflyway]

哈哈，太酷了！试试

[simonleungs]

可以请教怎设置吗？

[karlcheong]

@simonleungs
桌面電腦, iOS: 請看 http://ub.uku.im/proxy 把上面的pac地址填上去
Android: 把系統的DNS伺服器地址設定為上面的IP。 想方便設定的人可以使用Set DNS 直接設定

[simonleungs]

请问一下，dns怎修改? 我在用这个方法修改:http://blog.csdn.net/jipin246/article/details/8639372

[karlcheong]

@zhuzhuor 去看了下nodejs後台的log, 發現有很多很多的timeout error
好像連接中國那邊不穩定的樣子

[karlcheong]

今天真奇怪。。。先是dns出錯2次。。
然後connection timeout -> restart nodejs -> timeout 不斷循環. ：（ 👎
前幾天都沒有這樣。。現在直接在手機轉用這個dns做下人肉監控 ：）

[zhuzhuor]

是和国内的服务器的 timeout 吗，我这边还算正常
我这边在用 logentries.com 监控 log，特别好用

timeout/reset 平常概率大概有 0.5 %，这个没办法。。。

[karlcheong]

出問題時在varnish的log中基本都是privoxy 504 timeout

node的log就:
Starting in production mode...
11 Sep 22:43:45 - [ub.uku.js] Worker 17277 is now connected to 0.0.0.0:8888
[ub.uku.js] proxy_request error: (ENOTFOUND) getaddrinfo ENOTFOUND
Error: getaddrinfo ENOTFOUND
at errnoException (dns.js:37:11)
at Object.onanswer as oncomplete
[ub.uku.js] proxy_request error: (ENOTFOUND) getaddrinfo ENOTFOUND
Error: getaddrinfo ENOTFOUND
at errnoException (dns.js:37:11)
at Object.onanswer as oncomplete
........
[ub.uku.js] Timeout for h0.dxt.bj.ie.sogou.com. Aborted.
[ub.uku.js] Error when testing h0.dxt.bj.ie.sogou.com: Error: socket hang up
[ub.uku.js] Timeout for h4.dxt.bj.ie.sogou.com. Aborted.
[ub.uku.js] Error when testing h4.dxt.bj.ie.sogou.com: Error: socket hang up
[ub.uku.js] Timeout for h0.edu.bj.ie.sogou.com. Aborted.
[ub.uku.js] Error when testing h0.edu.bj.ie.sogou.com: Error: socket hang up
[ub.uku.js] Timeout for h6.edu.bj.ie.sogou.com. Aborted.
[ub.uku.js] Error when testing h6.edu.bj.ie.sogou.com: Error: socket hang up
[ub.uku.js] Timeout for h4.dxt.bj.ie.sogou.com. Aborted.
[ub.uku.js] Error when testing h4.dxt.bj.ie.sogou.com: Error: socket hang up
[ub.uku.js] Timeout for h1.dxt.bj.ie.sogou.com. Aborted.
[ub.uku.js] Error when testing h1.dxt.bj.ie.sogou.com: Error: socket hang up
[ub.uku.js] Timeout for h4.edu.bj.ie.sogou.com. Aborted.
[ub.uku.js] Error when testing h4.edu.bj.ie.sogou.com: Error: socket hang up
[ub.uku.js] Timeout for h13.dxt.bj.ie.sogou.com. Aborted.
[ub.uku.js] Error when testing h13.dxt.bj.ie.sogou.com: Error: socket hang up
[ub.uku.js] Timeout for h6.dxt.bj.ie.sogou.com. Aborted.
[ub.uku.js] Error when testing h6.dxt.bj.ie.sogou.com: Error: socket hang up
[ub.uku.js] Timeout for h6.edu.bj.ie.sogou.com. Aborted.
[ub.uku.js] Error when testing h6.edu.bj.ie.sogou.com: Error: socket hang up
[ub.uku.js] proxy_request error: (ENOTFOUND) getaddrinfo ENOTFOUND
Error: getaddrinfo ENOTFOUND
at errnoException (dns.js:37:11)
at Object.onanswer as oncomplete
[ub.uku.js] proxy_request error: (ENOTFOUND) getaddrinfo ENOTFOUND
Error: getaddrinfo ENOTFOUND
at errnoException (dns.js:37:11)
at Object.onanswer as oncomplete
.....

restart後就會好一會, 過沒多久又timeout

試過直接ssh tunnel 到nodejs server的8888 當作手動代理都timeout

現在只好先把請求轉發給別的Proxy

到底是那里問題呢...

[zhuzhuor]

getaddrinfo ENOTFOUND
DNS的问题？你把VPS的DNS自己改成google dns试试？

[karlcheong]

一直都是8.8.8.8

[zhuzhuor]

好吧
你装上 logentries + newrelic，把服务器的运行状况和log都记录下来
回头我也看看吧，像ENOTFOUND这种error应该特别少见才对

想起来你把服务器上的nodejs也升级一下吧，前两天貌似爆出来一个security bug

[karlcheong]

嗯。會升級的。

想到我運行nodejs的不同就是用了mitm
還有把所有url表里域名的http請求都丟給了它
心想不會是mitm 一下卡住了。才出問題。。

先睡了。。明天把npm modules重安一次，
url列表先給privoxy過慮, node就只做單純pac proxy

[zhuzhuor]

@karlcheong 你可以试试最新的 master branch 的代码
不过还是不太理解你这些错误日志的问题，猜测是digitialocean的网络问题？

[karlcheong]

現在modules全刪掉重安之後,
把privoxy做url過濾, 又沒事了...感覺反應速度還快了些

ub.uku.js updated to 1.7.0, 看樣子沒什么改變

[up2you6]

我的问题是不知道机顶盒是否root，且按未root处理，但pac没有地方设定。是不是只要将DHCP设为静态，再输入DNS地址即可？能不能把Android的设置图示出来，谢谢。

[karlcheong]

@up2you6
沒有ANDROID TV, 只有手機, 上一下它的設置圖

WIFI設定, 進入你連接的WIFI網絡的內容

IP, Gateway, Netmask 按你網絡設定(一般不用改), DNS1改192.241.222.103, DNS2留空

[up2you6]

非常感谢！

[simonleungs]

好像失效了

[fxshpac]

Got similar result to @simonleungs. With the first DNS entry updated to the one below in Android Wifi setting, I tested Sohu app and it still says not able to play due to the region limitation.

192.241.222.103

Update: I figure the change needs to be effective after rebooting the phone which I did. After it's back I verified that the setting change I made is still there. However the phone is no longer connecting to Internet.

[karlcheong]

@chenjhcg @simonleungs
sohu tested @ this morning GMT+8 and haven't found any problem.
I can change DNS setting in My galaxy note 1 & xiaomi, without reboot. It goes into effect instantly.

Also, the connection to sogou proxy isn't stable all the time.
Sometime timeout/reset happened and we were disconnected.
Just wait few minutes and then retry.

[karlcheong]

連接有時會卡了好久都沒回應..
是國內代理問題還是是varnish應付不了現在的流量呢?

[fxshpac]

Here are my test results over the weekend with primary DNS set to 192.241.222.103:

Youku Windows Client -> not working
QQLive Windows Client -> not working
Youku Android Pad Client -> working
QQLive Android HD Client -> working

I'm only guessing the reason of Windows clients not working is because the rules which were updated per #118 are not yet updated to this solution. I can re-test them that has been changed.

[karlcheong]

@chenjhcg
The dns server isn't planned to support those two pc clients yet, as they require more than plain http reverse proxy.

[karlcheong]

這2天又出問題了
同樣又是不間斷的抽風

ubnode:

Timeout
Socket hangup

今天一下沒留意, 由10AM到6PM一直都是出問題, varnish log一堆504 gateway timeout

現在手工restart後又沒事
天, 都不知道搞什么鬼

再出問題就先用別的代理頂上好了..

[karlcheong]

@zhuzhuor
可能找到出問題的原因..
去8.8.8.8的DNS請求有時會被drop掉

但奇怪, 那其他由privoxy發出的直連request就沒事?..

some of my dig query test (failed)

root@digito:~# dig @8.8.8.8 proxy.uku.im

; <<>> DiG 9.8.1-P1 <<>> @8.8.8.8 proxy.uku.im
; (1 server found)
;; global options: +cmd
;; connection timed out; no servers could be reached

root@digito:~# dig @8.8.8.8 h7.edu.bj.ie.sogou.com

; <<>> DiG 9.8.1-P1 <<>> @8.8.8.8 h7.edu.bj.ie.sogou.com
; (1 server found)
;; global options: +cmd
;; connection timed out; no servers could be reached

update:
Ping也會timeout...

update2:
到23/9 0點切回node代理又不抽風了..
能說什么呢...

[fxshpac]

Just to report a new issue. Wth DNS server set to 192.241.222.103 in Android device Netflix won't connect. Since Netflix service is not available in China. Having DNS changed this way will make it believe it's connecting from a device in China. I can switch to the original DNS to get it connected again but it's a little hassle at least.

[karlcheong]

@chenjhcg Findout the problem is that tunlr netflix unblock service will block US connection to netflix
(since people in US won't need to unblock netflix? : ( ).
I removed netflix entries from the dns forward list, it should be fine now.
Let the people who need it to do custom dns forwarding.

[redline99cs]

I´m getting a lot of lagg / stuttering on Youku Android TV with DNS set to 192.241.222.103. on Xiaomi TV Box (小米盒子)
Is there a solution?
Also can you please look into 小米盒子 mainland china restriction ?;)
American Movies only visible with mainland china IP. :-(
China VPN works but expensive :(
Regards

[karlcheong]

@redline99cs
I have not much ideas with 小米盒子 or any other TVBox. In case of 小米盒子, it seem employed its own mechanism to acquire playlists & play media, and I don't own one. (I have an android phone only.)

If "a lot of lagg / stuttering" mean the video download speed was slow, Then probably the link between your location to the actual video servers is bad.
In issue #124 I said that the domain for IP restriction (api.youku.com, api.3g.youku.com, etc) is different from the one of CDN server (f.youku.com). The videos host on different servers with differerent ISP (CT, CU, CMCC ...) and the CDN server might give you the video server which its ISP is slow to you.
The problem usually don't last long. But if it persists, the only solution I came up with is to try to proxy connections to f.youku.com, so that you can bypass the CDN server and found out which servers are fast to you, like what I did in #124.

The servers are filtering IP and send out different playlists to oversea IPs, that's why some video aren't visible. (Ex: iqiyi mobile app have this kind of filter)
the address of playlists acquisition server is must have In order to bypass the filter.

[YoungKai7]

@karlcheong 還是有這問題嗎？
是不是512k day的問題？ http://en.m.wikipedia.org/wiki/512k_day
八月十二, Verizon 新開了上千的 /24 route, 而超過網路上舊型Cisco router的512k上限.
這得由ISP重route, 跳過這些有問題的router才行.

On Sep 14, 2014, at 10:15 AM, "karlcheong" notifications@github.com wrote:

搞了好久都不知道出了什么問題造成privoxy報錯 Maximum number of open connections reached.

@PeteAce
sorry but I haven't any idea to deal with this oversea restriction of letv Android TV

—
Reply to this email directly or view it on GitHub.

[misakiw]

@PeteAce
At the moment, a workaround for watching 卫子夫 via LeTV source is using "快手" TV APP (Don't know how it works).

[PeteAce]

@misakiw

Thanks. "快手" does have Letv as one of the sources, and it's pretty fast too.

[gambellhq]

@karlcheong
最近两天设置DNS的盒子都看不了任何视频了（搜狐、优酷...），是服务器down了么？谢谢！

[li0001]

今天一般网站打不开，删去dns后就好了，ip美国，麻烦看一下是否哪里出问题，最近还是出现这样的问题ip192.68.0.6

[Kanaeva]

@karlcheong

想请问@karlcheong，小弟的安桌机顶盒(Himedia Q16 四核)安装 ‘乐视网XL版’ 以及 ‘乐视网TV版‘ 使用192.241.222.103的DNS但是无效，无法bypass geo-blocking，它依然detect到说只支持中国地区 :( 但是在同一个网络下使用乐视letv的手机或是平板版本使用192.241.222.103的DNS却能够bypass到.... 这样的情况应该是什么问题啊？ 您有什么方法能够建议一下吗? 谢谢 !

乐视网XL版:
http://www.dangbei.com/app/tv/2014/0726/924.html

乐视网TV版
http://itv.letv.com/

[PeteAce]

@Kanaeva
我也有同样的问题。.我建议你使用"芒果TV", "快手TV"或"VST聚力2.0".

[Kanaeva]

@PeteAce
可是我是乐视490元的会员啊.... 乐视比其他中国付费的视频网站流畅多了。
btw，你也是用Q16 四核吗?

[Kanaeva]

@karlcheong

请问karlcheong是不是需要把‘乐视网XL版‘/‘乐视网TV版‘也加入unblock_youku_privoxy_rules里头才能够用192.241.222.103的DNS来bypass‘乐视网XL版‘/‘乐视网TV版‘的geo-blocking？ 因为小弟昨天尝试将Pad版本的乐视安装到安桌机顶盒里结果成功bypass geo-blocking... 谢谢 !

unblock_youku_privoxy_rules:
https://github.com/karlcheong/unblock_youku_privoxy_rules/blob/master/basehosts

[karlcheong]

我這里連接LETV TV版會timeout, 暫時fix不了, 如果其他人有好方法的不妨告知

[Kanaeva]

@karlcheong

谢谢你的回复。
你的意思是你连接LETV TV版时是会'连接timeout'，而不是显示‘由于版权问题，本视频只能在中国地区播放'之类的信息吗? 最近由于中国广电局有行动，可能因此连接timeout... 但是我的情况是无法bypass到它的geo-blocking而显示‘由于版权问题，本视频只能在中国地区播放‘信息.....

[PeteAce]

今天出问题了吗? 无法bypass版权限制, 以前是可以的.

[klib9739]

今日使用hosts反向代理會出現503錯誤網頁

[crazy-calm]

@karlcheong

你好，我发现使用DNS的方法在电脑和android中对xiami的app和网页都已经失效了。更改DNS前，电脑上的chrome + unblock youku的配置可以正常打开www.xiami.com的网页，而IE显示IP封锁。更改DNS后IE依然无法正常打开xiami的网页，显示IP封锁，而此时打开检测网站显示的value为true。是否最近xiami更改了检测方式，希望有办法可以解决，谢谢。

[batiatus]

请问看sohu为啥只能播片尾？

[kclonline]

伺服器状态是Uptime。
但转发模式后台测试： http://berryphp.ap01.aws.af.cm/digito.php
回应：ERROR: url not specified
是我个人的问题吗？ 大家会这样吗？

[mofaalan]

我也會. ERROR: url not specified

2014-10-27 17:09 GMT+08:00 kclonline notifications@github.com:

伺服器状态是Uptime。
但转发模式后台测试： http://berryphp.ap01.aws.af.cm/digito.php
回应：ERROR: url not specified
是我个人的问题吗？ 大家会这样吗？

—
Reply to this email directly or view it on GitHub
#112 (comment)
.

Should you have any enquiries, please don't hesitate to contact me.

Best Regards,

Alan Law

Chief Operation Officer

Innovate Enterprise development LTD
G/F, 10 San Lok Street , Sheung Shui, New Territories,Hong Kong.

Direct Line: 2671 3838 Mobile: 6182 6189
General Office Tel: 31739887
24-Hour Emergency Hotline.:6699 8022
Support Hotline: 66998033
Web Site : http://www.innovateid.com

[sasasun]

hi, 我在美國,之前一直使用更改dns的方法都很方便,可是自從更新成 android 5.0後,想要從 wifi 設定改dns的地址,卻不能儲存更改...打入了2001之後,儲存鍵就不能用,好像只能打特定的地址....請問有什麼方法可以解決嗎? 非常感謝回覆....我使用的是Nexus 7

[jixunmoe]

百度音乐需要匹配的地址

# 将曲目加入收藏 (POST 请求)
http://music.baidu.com/data/user/collect

重新测试了下，只要这个地址被代理就行了。百度音乐会对已收藏的音乐放行解析请求。

[k1n]

网站：

Xiami is currently not available in your country.

虾米音乐在您所处的国家或地区暂时无法使用。

错误：Error 503 Service Unavailable
平台：MAC OS X 10.10.1
ISP：香港宽频

[ivyontheway]

网站：爱奇艺
呃......播放失败了
移动端上：
网络不给力，请稍后重试

平台：Win8+Mac OS+Ipad
ISP：香港网上行

dns和pac都有尝试

[karlcheong]

fixed

sent by Karl, from gmail.

2015-02-02 21:29 GMT+08:00 ivyontheway notifications@github.com:

网站：爱奇艺
呃......播放失败了
移动端上：
网络不给力，请稍后重试

平台：Win8+Mac OS+Ipad
ISP：香港网上行

dns和pac都有尝试

—
Reply to this email directly or view it on GitHub
#112 (comment)
.

[tywtyw2002]

建议把这个issue的内容总结一下写入wiki，然后从新起一个issue，260+的回复load起来很慢，维护性不佳

[gitawego]

同意。。。的确看起来很吃力。。。

[mkliu]

今天早上从android看搜狐还可以，晚上打开时候就不行了。从浏览器试图打开视频的时候说503 service unavailable. pingdom倒是没有看到down time

[li0001]

这两天在iPad上下载都不能下载。也没有说是在美国地区的原因就是下载不了。乐视app也无法下载，请问是不是都DNS有问题了

[zhuzhuor]

@li0001 最近我们服务器遭到 拒绝服务 (DoS) 攻击，见 #452