新增robots.txt完成
發表於 : 2010年 5月 12日, 21:19
為能讓搜尋引擎更佳對於本站的內容快取, 進行 robots.txt 上線.
內容參考了其他網站及 phpbb.com 官方網站, 使用如下內容:
或直接訪問 http://bbs.diary.tw/robots.txt 就可以看到囉!
內容參考了其他網站及 phpbb.com 官方網站, 使用如下內容:
代碼: 選擇全部
User-agent: *
Disallow: /admin/
Disallow: /db/
Disallow: /images/
Disallow: /includes/
Disallow: /language/
Disallow: /templates/
Disallow: /common.php
Disallow: /config.php
Disallow: /faq.php
Disallow: /groupcp.php
Disallow: /login.php
Disallow: /memberlist.php
Disallow: /modcp.php
Disallow: /posting.php
Disallow: /privmsg.php
Disallow: /profile.php
Disallow: /search.php
Disallow: /viewonline.php
Disallow: /styles/forum/
User-agent: msnbot
Crawl-delay: 600