世界之窗论坛 » 站务广场 » 论坛应当考虑一下限制搜索引擎抓取页面

返回列表发帖

Rank: 12

UID: 2129
帖子: 4614
精华: 0
贡献: 2
推广: 0
有效BUG: 0
注册时间: 2005-8-8

体验用户5个内有效BUG

1^# 跳转到 » 倒序看帖

字体大小: tT

发表于 2009-7-24 21:32 | 显示全部帖子

论坛应当考虑一下限制搜索引擎抓取页面

页面, 论坛, 搜索引擎

http://bbs.ioage.com/cn/stats.php?type=agent
Spiders高达56.6%，这说明有论坛一半的流量被搜索引擎给侵占了，如果能限制搜索引擎抓取页面，那么可以使大家访问论坛的速度加快