佳木斯湛栽影视文化发展公司

主頁(yè) > 知識(shí)庫(kù) > squid 強(qiáng)制緩存動(dòng)態(tài)頁(yè)面

squid 強(qiáng)制緩存動(dòng)態(tài)頁(yè)面

熱門標(biāo)簽:外呼系統(tǒng) 美團(tuán) 硅谷的囚徒呼叫中心 解決方案 服務(wù)器配置 家政服務(wù)網(wǎng)絡(luò) 百度競(jìng)價(jià)點(diǎn)擊價(jià)格的計(jì)算公式 電話機(jī)器人搭建

其實(shí)我本不想寫這個(gè)標(biāo)題,我的本意是緩存yupoo api的查詢數(shù)據(jù),這個(gè)過(guò)程中找到了參考方法(Caching Google Earth with Squid)。呵呵,所以偶也來(lái)一回標(biāo)題黨。

這篇參考流傳非常廣,Digg上也被提過(guò),我也不知道原出處是哪里了。

可是。。。。你按照它的指示設(shè)置,它并不能正確工作?。?/p>

話說(shuō)回來(lái),先說(shuō)說(shuō)我的需求。

最近yupoo的訪問(wèn)速度很慢,我有一堆a(bǔ)pi請(qǐng)求經(jīng)常無(wú)法完成,猜測(cè)要么對(duì)方限制了同一ip的連接數(shù),要么是yupoo又遇到了新一輪的流量瓶頸。跟Yupoo的zola聯(lián)系后,確認(rèn)是他們的負(fù)荷太高引起的,并沒(méi)有限制連接數(shù)。所以我要想辦法在我這邊做一些緩存了。

因?yàn)槲疫@邊本身就是用squid代理來(lái)解決Ajax中調(diào)用API的跨域問(wèn)題的,所以自然是目標(biāo)瞄準(zhǔn)了squid的配置文件。

yupoo api的請(qǐng)求地址是 www.yupoo.com/api/rest/?method=xxxxxxxxx...

大家都知道squid會(huì)自動(dòng)緩存靜態(tài)文件,可對(duì)于這種動(dòng)態(tài)網(wǎng)頁(yè)怎么讓它也緩存起來(lái)呢,所以在google上找啊找,找到上面提得那片緩存Google Earth的博客文章。
他的方法是:

acl QUERY urlpath_regex cgi-bin \? intranet
acl forcecache url_regex -i kh.google keyhole.com
no_cache allow forcecache
no_cache deny QUERY

# ----
refresh_pattern -i kh.google 1440 20% 10080 override-expire override-lastmod reload-into-ims ignore-reload

refresh_pattern -i keyhole.com 1440 20% 10080 override-expire override-lastmod reload-into-ims ignore-reload

原理就是用 no_cache allow 和 refresh_pattern 來(lái)設(shè)定一些緩存規(guī)則,將google earth的請(qǐng)求強(qiáng)行緩存起來(lái)。

此文一出,自然早有人去驗(yàn)證,可是沒(méi)人成功,原作者也音訊全無(wú)  ... squid的郵件列表里也提到。 ( 看標(biāo)題進(jìn)來(lái)的朋友,不要急,繼續(xù)往下讀,不會(huì)讓你空手而回的  )

我也沒(méi)在意,估計(jì)人家功力問(wèn)題  。先試著用改寫一下解決yupoo api的緩存問(wèn)題。

acl QUERY urlpath_regex cgi-bin \?
acl forcecache url_regex -i yupoo\.com
no_cache allow forcecache
no_cache deny QUERY

refresh_pattern -i yupoo\.com 1440 50% 10080 override-expire override-lastmod reload-into-ims ignore-reload

嘿,果然nnd毫無(wú)用處,訪問(wèn)記錄里還是 一坨坨 TCP_MISS

于是翻來(lái)覆去看文檔,找資料,發(fā)現(xiàn)是squid的bug惹得禍,不過(guò)早已經(jīng)修正(嚴(yán)格來(lái)說(shuō)是功能擴(kuò)展補(bǔ)?。?。

我的squid是2.6.13,翻了一下源代碼,確實(shí)已經(jīng)打好補(bǔ)丁了。

解決這個(gè)問(wèn)題需要refresh_pattern的幾個(gè)擴(kuò)展參數(shù)(ignore-no-cache ignore-private),這幾個(gè)參數(shù)在squid的文檔和配置例子中均沒(méi)有提到,看來(lái)squid還不夠與時(shí)俱進(jìn)。

下面講一下問(wèn)題所在。

先看看yupoo api返回的HTTP頭部信息(cache 相關(guān)部分)

Cache-Control: no-cache, must-revalidate
Pragma: no-cache

這兩行是控制瀏覽器的緩存行為的,指示瀏覽器不得緩存。squid也是遵循RFC的,正常情況下自然不會(huì)去緩存這些頁(yè)面。override-expire override-lastmod reload-into-ims ignore-reload 統(tǒng)統(tǒng)不能對(duì)付它。

而那個(gè)補(bǔ)丁正是對(duì)付這兩個(gè)Cache-Control:no-cache 和 Pragma: no-cache的。

因此把 refresh_pattern那句要改寫成

refresh_pattern -i yupoo\.com 1440 50% 10080 override-expire override-lastmod reload-into-ims ignore-reload ignore-no-cache ignore-private

這樣就大功告成了, squid -k reconfigure 看看 access.log ,這回里面終于出現(xiàn)
TCP_HIT/200 TCP_MEM_HIT/200 了,說(shuō)明緩存規(guī)則確實(shí)起作用了,那個(gè)激動(dòng)啊 555~~~~

====================
補(bǔ)充:
后來(lái)我看了一下google earth 服務(wù)器 hk1.google.com的HTTP頭部,只有

Expires: Wed, 02 Jul 2008 20:56:20 GMT
Last-Modified: Fri, 17 Dec 2004 04:58:08 GMT

,這么看來(lái)照理不需ignore-no-cache ignore-private也能工作,可能是作者這里寫錯(cuò)了
kh.google 應(yīng)該是 kh.\.google才對(duì)。

最后總結(jié)一下,緩存Google Earth/Map的正確的配置應(yīng)該是

acl QUERY urlpath_regex cgi-bin \? intranet
acl forcecache url_regex -i kh.\.google mt.\.google mapgoogle\.mapabc keyhole.com
no_cache allow forcecache
no_cache deny QUERY

# ----
refresh_pattern -i kh.\.google 1440 20% 10080 override-expire override-lastmod reload-into-ims ignore-reload ignore-no-cache ignore-private
refresh_pattern -i mt.\.google 1440 20% 10080 override-expire override-lastmod reload-into-ims ignore-reload ignore-no-cache ignore-private
refresh_pattern -i mapgoogle\.mapabc 1440 20% 10080 override-expire override-lastmod reload-into-ims ignore-reload ignore-no-cache ignore-private

refresh_pattern -i keyhole.com 1440 20% 10080 override-expire override-lastmod reload-into-ims ignore-reload ignore-no-cache ignore-private

注:
khX.google.com 是google earth的圖片服務(wù)器
mtX.google.com 是google map 的圖片服務(wù)器
mapgoogle.mapabc.com 是google ditu的圖片服務(wù)器
http://nukq.malmam.com/archives/16

標(biāo)簽:邢臺(tái) 韶關(guān) 南昌 撫州 烏蘭察布 臨沂 防城港 北海

巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《squid 強(qiáng)制緩存動(dòng)態(tài)頁(yè)面》,本文關(guān)鍵詞  ;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問(wèn)題,煩請(qǐng)?zhí)峁┫嚓P(guān)信息告之我們,我們將及時(shí)溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無(wú)關(guān)。
  • 相關(guān)文章
  • 收縮
    • 微信客服
    • 微信二維碼
    • 電話咨詢

    • 400-1100-266
    滨州市| 仲巴县| 佳木斯市| 鹤山市| 庆云县| 霍城县| 民勤县| 静宁县| 南部县| 河曲县| 巴里| 志丹县| 扬州市| 毕节市| 和静县| 山丹县| 盐池县| 六安市| 招远市| 寻乌县| 双桥区| 无锡市| 新民市| 台中市| 汝南县| 兴城市| 咸丰县| 拜城县| 湖州市| 永平县| 嵊州市| 小金县| 宜宾县| 垣曲县| 沁阳市| 广东省| 金川县| 石阡县| 台州市| 通州区| 偏关县|