在之前的文檔中無憂主機小編已講到過，重復(fù)的內(nèi)容的頁面如果被搜索引擎收錄會有被懲罰的后果。允許搜索蜘蛛機器人在不采用會跟蹤其在網(wǎng)站上瀏覽路徑的會話 ID 或參數(shù)的情況下抓取您的網(wǎng)站。這些技術(shù)對跟蹤單個用戶的行為非常有用，但蜘蛛機器人的訪問模式卻完全不同。”比如zencart程序產(chǎn)生的 index.php?main_page=site_map與index.php?main_page=site_map& language=gb內(nèi)容完全一致，導(dǎo)致重復(fù)頁面的產(chǎn)生，顯然會降低整個網(wǎng)站在搜索引擎算法評估中得出的質(zhì)量。Zen Cart實現(xiàn)偽靜態(tài)后，動態(tài)依然存在，這樣很容易造成了搜索引擎抓取了很多重復(fù)頁面，接下來我們可以利用robots.txt文件來屏蔽蜘蛛抓取這些重復(fù)的頁面。 Zen Cart如何正確的書寫Robots文件步驟如下： 1、在php空間根目錄新建一個robots.txt 2、在文件中輸入如下代碼：

User-agent: *
Disallow: /cgi-bin/
Disallow: /images/
Disallow: /cache/
Disallow: /docs/
Disallow: /extras/
Disallow: /tempEP/
Disallow: /*?
Disallow: /*?zenid*
Disallow: /*alpha_filter_id*
Disallow: /*?language
Disallow: /*cPath
Disallow: /privacy.html
Disallow: /gv_faq.html
Disallow: /discount_coupon.html
Disallow: /unsubscribe.html
Disallow: /conditions.html
Disallow: /popup_image_additional.html
Disallow: /tell_a_friend.html
Disallow: /product_reviews_write.html
Disallow: /pages-popup_image.html?
Disallow: /popup_image_additional.html?
Disallow: /index.php?main_page=create_account
Disallow: /index.php?main_page=shippinginfo
Disallow: /index.php?main_page=privacy
Disallow: /index.php?main_page=conditions
Disallow: /index.php?main_page=unsubscribe
Disallow: /index.php?main_page=login
Disallow: /index.php?main_page=product_reviews_write
Disallow: /index.php?main_page=featured_products
Disallow: /index.php?main_page=products_new
Disallow: /index.php?main_page=popup_image
Disallow: /index.php?main_page=product_info&cPath
Disallow: /index.php?main_page=product_info&products_id
Disallow: /index.php?main_page=tell_a_friend

本文地址：http://www.love62.cn/zencart/20748.html