RSS   



  可打印版本 | 推薦給朋友 | 訂閱主題 | 收藏主題 | 純文字版  


 
 46  1/4  1  2  3  4  > 


 
主題: [原創][教學]WebCache超簡易教學   字型大小:||| 
holyfox
青銅驢友
等級: 11等級: 11等級: 11等級: 11


 . 積分: 202
 . 文章: 615
 . 收花: 750 支
 . 送花: 742 支
 . 比例: 0.99
 . 在線: 1812 小時
 . 瀏覽: 45080 頁
 . 註冊: 7452
 . 失蹤: 4619
 . 黃光燈泡的房間
#1 : 2004-11-10 08:47 AM     只看本作者 引言回覆

版主 Madcat : 感謝您...細心整理告知

評分:+2   
看到一堆人在問WabCache,就寫了這篇教學來跟大家分享。


一、什麼是WebCache?
WebCache是一種讓騾子上傳經過proxy(代理伺服器)的技術,這個跟瀏覽器可以設定的proxy是同一個東東,基本原理也一樣:客戶端經過proxy要求資料,proxy抓取你要的檔案並且留下副本,下次有別的客戶端要求相同資料時便可以直接從proxy下載。
圖片說明:
點擊查看全圖


二、這樣做對騾子的下載有好處嗎?
當然,直接從proxy下載,就如同給騾子VIP待遇一樣,免排隊直接下載,下載速度幾乎是頻寬的最大值,可以達到"瞬間完檔"。


三、要如何設定?
很簡單,首先確認ISP有沒有提供Porxy,然後找個有WebCache的騾子(以ES 8.4為例),接著讓騾子連接上伺服器
點擊查看全圖
設置->MOD->WebCache裡,把Enable Webcache Downloads打勾,再按一下下面的Autodetect Webcache按鈕,就會自動偵測ISP的proxy,像下圖一樣
點擊查看全圖
按下Yes,重新開啟一次騾子,設定便完成了。
自動偵測失敗的話,就得要手動輸入ISP Proxyserver Settings中的資訊,先在google打上"seednet+代理伺服器"之類的字去找ISP的proxy資訊,或是去ISP官網找也可以,然後在Address裡填入proxy主機網址,Port填入連接埠號,設定完按下Test webcache configuration.Might take up to 30 Seconds.,找到的話就像上圖一樣,找不到的話,下面會說明。


四、找不到怎麼辦?
找不到的可能原因有四個(目前已知):
1.連線選項內隨機的連接埠開啟
2.LowID
3.學網
4.ISP沒有proxy
其中1.只要把隨機的連接埠關掉,2.只要想辦法取得HighID便可以解決,3.請自行詢問學校的proxy。
最麻煩的要算是4.,對於沒有proxy的ISP而言,雖然可以隨便找一個公開的proxy來設定,可是這樣有設跟沒設一樣,不如當作就沒有WebCache,至於為什麼,請看下面說明。


五、設定了老半天也沒有看到WebCache在動作啊?
請把proxy想成是一個檔案的備份點,如果沒有人上傳檔案經過proxy備份,proxy又怎麼可能憑空變出檔案給你抓呢?還有,不同的proxy檔案是不能互通的,所以在同一個proxy上面的騾是越多越好,就像騾子的特性一樣,來源數越多的檔案越好下(西瓜偎大邊效應),並不是隨便設一個proxy就可以感受到WebCache的威力。


這是最近用WebCache還有爬文的心得,可能有些錯誤,請大家指點指點,也歡迎大家分享彼此的心得。

[holyfox 在 2004-11-10 08:49 AM 作了最後編輯]



[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
socool
鍛鐵驢友
等級: 7等級: 7等級: 7


 . 積分: 85
 . 文章: 267
 . 收花: 381 支
 . 送花: 225 支
 . 比例: 0.59
 . 在線: 5 小時
 . 瀏覽: 20 頁
 . 註冊: 7319
 . 失蹤: 5435
 . 香格里里拉拉
#2 : 2004-11-10 09:26 AM     只看本作者 引言回覆

Proxy是ISP伺服器提供
那請問,那檔案不會被ISP發現砍掉?



[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
holyfox
青銅驢友
等級: 11等級: 11等級: 11等級: 11


 . 積分: 202
 . 文章: 615
 . 收花: 750 支
 . 送花: 742 支
 . 比例: 0.99
 . 在線: 1812 小時
 . 瀏覽: 45080 頁
 . 註冊: 7452
 . 失蹤: 4619
 . 黃光燈泡的房間
#3 : 2004-11-10 10:10 AM     只看本作者 引言回覆

由於檔案是以分割成多個的小區塊方式留在proxy上,加上有經過加密,所以被發現的機率很低。


[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
chacha
銀驢友〔初級〕
等級: 12等級: 12等級: 12


今日心情

 . 積分: 454
 . 文章: 1323
 . 收花: 2091 支
 . 送花: 401 支
 . 比例: 0.19
 . 在線: 41 小時
 . 瀏覽: 1500 頁
 . 註冊: 8205
 . 失蹤: 3105
#4 : 2004-11-11 11:38 AM     只看本作者 引言回覆

剛發現eMule V0.44b eF-Mod 1.3b也有WebCache功能,也來試試。


[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
ROACH
版主
等級: 30等級: 30等級: 30等級: 30等級: 30等級: 30等級: 30等級: 30
減肥中!請勿餵食

十週年紀念徽章(四級)  

 . 積分: 15119
 . 精華: 14
 . 文章: 11767
 . 收花: 140853 支
 . 送花: 6005 支
 . 比例: 0.04
 . 在線: 8870 小時
 . 瀏覽: 85616 頁
 . 註冊: 8213
 . 失蹤: 8
 . 鄉下地方
#5 : 2004-11-13 01:35 PM     只看本作者 引言回覆

請問一下!這個跟直接設定代理?
是一樣的嗎??


 附件: 您所在的用戶組無法下載或查看附件


[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  訪問主頁  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
chang091
鐵驢友〔初級〕
等級: 4


今日心情

 . 積分: 29
 . 文章: 213
 . 收花: 113 支
 . 送花: 224 支
 . 比例: 1.98
 . 在線: 665 小時
 . 瀏覽: 7280 頁
 . 註冊: 7328
 . 失蹤: 339
 . TW
#6 : 2004-11-13 02:47 PM     只看本作者 引言回覆

謝謝分享喔
透過你的說明
又多了解了一些~



[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
wex
銅驢友〔高級〕
等級: 10等級: 10等級: 10


 . 積分: 185
 . 文章: 594
 . 收花: 663 支
 . 送花: 5641 支
 . 比例: 8.51
 . 在線: 5801 小時
 . 瀏覽: 77172 頁
 . 註冊: 8213
 . 失蹤: 0
 . 核ㄨˇ廠
#7 : 2004-11-13 06:08 PM     只看本作者 引言回覆


引用:
ROACH寫到:
請問一下!這個跟直接設定代理?
是一樣的嗎??


不同...這個是用在網路連接上
不是下載檔案方面



[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
brodigit
青銅驢友
等級: 11等級: 11等級: 11等級: 11
老驢友〔低級〕

 . 積分: 245
 . 文章: 1684
 . 收花: 1534 支
 . 送花: 2430 支
 . 比例: 1.58
 . 在線: 3627 小時
 . 瀏覽: 14942 頁
 . 註冊: 8154
 . 失蹤: 1299
#8 : 2004-11-14 11:57 PM     只看本作者 引言回覆

WebCache是一種讓騾子上傳經過proxy(代理伺服器)的技術,這個跟瀏覽器可以設定的proxy是同一個東東,基本原理也一樣:客戶端經過proxy要求資料,proxy抓取你要的檔案並且留下副本,下次有別的客戶端要求相同資料時便可以直接從proxy下載。

好像一樣阿?
讓驢子的hash檔也能使用proxy的cache功能?



[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
drinktea28
銀驢友〔中級〕
等級: 13等級: 13等級: 13等級: 13


 . 積分: 550
 . 文章: 789
 . 收花: 3212 支
 . 送花: 350 支
 . 比例: 0.11
 . 在線: 6665 小時
 . 瀏覽: 32567 頁
 . 註冊: 8203
 . 失蹤: 35
#9 : 2004-11-19 12:01 AM     只看本作者 引言回覆

嘿...那我們大家是不是找一個free proxy,然後就可以集結大家的力量了...
小弟我找到一個網站..有出許多的proxy...
http://www.proxy4free.com/page1.html

211.20.246.3 8080 transparent Taiwan
211.22.137.100 80 transparent Taiwan
210.201.143.249 3128 transparent Taiwan

呼~~衝吧...



[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
socool
鍛鐵驢友
等級: 7等級: 7等級: 7


 . 積分: 85
 . 文章: 267
 . 收花: 381 支
 . 送花: 225 支
 . 比例: 0.59
 . 在線: 5 小時
 . 瀏覽: 20 頁
 . 註冊: 7319
 . 失蹤: 5435
 . 香格里里拉拉
#10 : 2004-11-23 12:02 AM     只看本作者 引言回覆


引用:
drinktea28寫到:
嘿...那我們大家是不是找一個free proxy,然後就可以集結大家的力量了...
小弟我找到一個網站..有出許多的proxy...
http://www.proxy4free.com/page1.html

211.20.246.3 8080 transparent Taiwan
211.22.137.100 80 transparent Taiwan
210.201.143.249 3128 transparent Taiwan

呼~~衝吧...

怎麼區別proxy好壞?
有的transparent
有的anonymous



[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
Acute
論壇第一大毒王
等級: 18等級: 18等級: 18等級: 18等級: 18
論壇第一小神童

 . 積分: 3281
 . 精華: 8
 . 文章: 11574
 . 收花: 14037 支
 . 送花: 3260 支
 . 比例: 0.23
 . 在線: 323 小時
 . 瀏覽: 2250 頁
 . 註冊: 8218
 . 失蹤: 5571
#11 : 2004-11-23 02:25 AM     只看本作者 引言回覆


引用:
brodigit寫到:
WebCache是一種讓騾子上傳經過proxy(代理伺服器)的技術,這個跟瀏覽器可以設定的proxy是同一個東東,基本原理也一樣:客戶端經過proxy要求資料,proxy抓取你要的檔案並且留下副本,下次有別的客戶端要求相同資料時便可以直接從proxy下載。

好像一樣阿?
讓驢子的hash檔也能使用proxy的cache功能?


不一樣啦
我不玩驢子了, 所以沒興致去仔細研究
但是從技術上去思考這件事情, 他應該是這樣的:

一般連線用的proxy, 對browser 而言會有效, 因為proxy 知道HTTP protocol, 知道HTML 網頁的資訊, 所以, 他也能知道是否其他人就是要那樣東西
而以前驢子的proxy, 他是用來協助驢子連線的, 因為有些單位會有規定沒透過proxy 不能往外連線

webcache 理論上運作模式如同原發文者所描述, 但是, proxy 不可能知道檔案區塊是不是你要的, proxy 又沒有辦法去辨認驢子的protocol, 所以, 理論上, 驢子是把檔案的每一個小區塊"假裝"成一個網頁資訊, 例如利用hash 當成網址的一部分, 同樣的, 接收的一端也需要知道怎樣產生那個hash 網址, 然後用那個hash 網址透過proxy 抓資料, 這時候, proxy 發現是一個HTTP 的request, 就會把資料當作網頁一般的處理, 將"網頁"資料cache 在server 裏面, 當有其他人也需要該份資料時, 就不需要找原供應者, 而從cache 裏面把資料直接扔給想抓的人.

這個架構其實頂好玩的, 不知道哪個作者想出來的妙招, 確實值得喝采, 因為, 如果大家都經過proxy 來玩, 那上傳者只需要上傳一次, 所有經過該proxy 的人, 都能直接從proxy 取得資料, 如此, 可以避開上傳者頻寬不足的窘境, 然後大家都可以下載的粉過癮, 因為, 都是直接找ISP 要資料而已. 當然, 這時候proxy server 是不是你的ISP 提供的, 就會很重要, 如果你是hinet 用戶, 卻跑去跟大家擠seednet 的proxy, 其實, 你的速度會受影響的, 但是, 還是會比直接從上傳者那兒抓資料快才對. so, 其實不一定要擠同一個proxy, 而是要幾個同ISP 的, 一起掛上ISP 的proxy, 才能達到最高效率.

這個架構底下, 有個可能潛在的漏洞跟風險
1. 如果某個人的壞資料上傳後被proxy cache 住了, 凡是企圖從該人抓檔案的人, 永遠都會抓到壞資料, 除非關閉webcache 功能 @_@
2. ISP 會不會針對此偽裝HTTP protocol 的方式進行攔截 (理由在後面)
3. 因為要讓proxy server 能夠辨認, 要有網址, 而網址應該是由上傳者的IP+區塊Hash 組成, 所以, 一堆人時, 可能對ISP proxy 造成極大困擾外 (要記住, 同樣的東西, 很多人都造假了一份放在proxy 裏面, 因為IP 不同, proxy server 不知道是一樣的東西), 如果沒有連接到同一個上傳者, 其實還是沒有用, 除非驢子有增加把上次從proxy 那兒抓來的東西的資訊傳出去的protocol, 否則, 一堆造假資料, 會嚴重破壞proxy 的效能, ISP 應該是會翻臉的 ^^"

anyway, 我沒有去研究驢子的東西, 不知道他是否可以確保一份上傳至proxy 的資料, 可以被所有人都分享得到, 理論上, 聰明的作者應該有想到才對啦, 實際上, 因為驢子用戶實在太多了, so, 總是有可能失控的, 呵呵

不過, 這個方法真的粉妙, 實在應該給想出來的作者強力喝采一下

Acute.



[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
Jar
鐵驢友〔高級〕
等級: 6等級: 6


今日心情

 . 積分: 60
 . 文章: 300
 . 收花: 352 支
 . 送花: 203 支
 . 比例: 0.58
 . 在線: 2112 小時
 . 瀏覽: 6634 頁
 . 註冊: 8208
 . 失蹤: 995
#12 : 2004-11-23 07:33 PM     只看本作者 引言回覆


引用:
drinktea28寫到:
嘿...那我們大家是不是找一個free proxy,然後就可以集結大家的力量了...
小弟我找到一個網站..有出許多的proxy...
http://www.proxy4free.com/page1.html

211.20.246.3 8080 transparent Taiwan
211.22.137.100 80 transparent Taiwan
210.201.143.249 3128 transparent Taiwan

呼~~衝吧...


這個也不少...
http://www.stayinvisible.com/ind ... y%20desc&offset=500

我是學網的...剛剛把學網的 Free Proxy 都測試過...

140.131.122.4 80 high anonymity Taiwan 2004-11-22

這個好像不錯說..
整體速度都很快..而且webcache測試成功..

如果有用學網的..可以考慮都集中到這個 Server 來跑唷~

[Jar 在 2004-11-23 07:35 PM 作了最後編輯]



[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
holyfox
青銅驢友
等級: 11等級: 11等級: 11等級: 11


 . 積分: 202
 . 文章: 615
 . 收花: 750 支
 . 送花: 742 支
 . 比例: 0.99
 . 在線: 1812 小時
 . 瀏覽: 45080 頁
 . 註冊: 7452
 . 失蹤: 4619
 . 黃光燈泡的房間
#13 : 2004-11-23 09:11 PM     只看本作者 引言回覆


引用:
Jar寫到:

引用:
drinktea28寫到:
嘿...那我們大家是不是找一個free proxy,然後就可以集結大家的力量了...
小弟我找到一個網站..有出許多的proxy...
http://www.proxy4free.com/page1.html

211.20.246.3 8080 transparent Taiwan
211.22.137.100 80 transparent Taiwan
210.201.143.249 3128 transparent Taiwan

呼~~衝吧...


這個也不少...
http://www.stayinvisible.com/ind ... y%20desc&offset=500

我是學網的...剛剛把學網的 Free Proxy 都測試過...

140.131.122.4 80 high anonymity Taiwan 2004-11-22

這個好像不錯說..
整體速度都很快..而且webcache測試成功..

如果有用學網的..可以考慮都集中到這個 Server 來跑唷~

[Jar 在 2004-11-23 07:35 PM 作了最後編輯]

要不要試試這個,
cache.sinica.edu.tw  3128  
中研院的proxy,推薦這個的原因是他的Cache Size達到12GB之多,又是開放的,不過學網不知可不可以用。

在這裡看到的
http://www.roxland.com/big/time/proxy.htm



[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
d22977
銀驢友〔初級〕
等級: 12等級: 12等級: 12
旻翰

今日心情

 . 積分: 496
 . 文章: 1862
 . 收花: 3684 支
 . 送花: 8396 支
 . 比例: 2.28
 . 在線: 2826 小時
 . 瀏覽: 15266 頁
 . 註冊: 8212
 . 失蹤: 2222
#14 : 2004-11-23 11:49 PM     只看本作者 引言回覆

不知道有無版有知道giga的proxy在哪

我在網路上找的都不能用



[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記
Jar
鐵驢友〔高級〕
等級: 6等級: 6


今日心情

 . 積分: 60
 . 文章: 300
 . 收花: 352 支
 . 送花: 203 支
 . 比例: 0.58
 . 在線: 2112 小時
 . 瀏覽: 6634 頁
 . 註冊: 8208
 . 失蹤: 995
#15 : 2004-11-24 04:12 AM     只看本作者 引言回覆


引用:
drinktea28寫到:
要不要試試這個,
cache.sinica.edu.tw  3128  
中研院的proxy,推薦這個的原因是他的Cache Size達到12GB之多,又是開放的,不過學網不知可不可以用。

在這裡看到的
http://www.roxland.com/big/time/proxy.htm


這個學網不能用說....



[如果你喜歡本文章,就按本文章之鮮花~送花給作者吧,你的支持就是別人的動力來源]
本文連接  
檢閱個人資料  發私人訊息  Blog  快速回覆 新增/修改 爬文標記

 46  1/4  1  2  3  4  > 
   

快速回覆
表情符號

更多 Smilies

字型大小 : |||      [完成後可按 Ctrl+Enter 發佈]        

溫馨提示:本區開放遊客瀏覽。
選項:
關閉 URL 識別    關閉 表情符號    關閉 Discuz! 代碼    使用個人簽名    接收新回覆信件通知
發表時自動複製內容   [立即複製] (IE only)


 



所在時區為 GMT+8, 現在時間是 2024-11-24 10:30 PM
清除 Cookies - 連絡我們 - TWed2k © 2001-2046 - 純文字版 - 說明
Discuz! 0.1 | Processed in 0.045915 second(s), 11 queries , Qzip disabled