故事库-中国往事  > 所属分类  > 
[0] 评论[0] 编辑

中国搜索spider

Chinasospider是中国搜索引擎的一个自动程序,它的作用是访问互联网上的网页,建立索引数据库,使用户能在中国搜索引擎中搜索到您网站上的网页。

目录

Chinasospider是中国搜索引擎的一个自动程序,它的作用是访问互联网上的网页,建立索引数据库,使用户能在中国搜索引擎中搜索到您网站上的网页。

user-agent

中国搜索使用的user-agent:Chinasospider

常见问题

1. Chinasospider对一个网站服务器造成的访问压力如何?

为了达到对目标资源较好的检索效果,Chinasospider需要对您的网站保持一定量的抓取。我们尽量不给网站带来不合理的负担,并会根据服务器承受能力,网站质量,网站更新等综合因素来进行调整。如果您觉得chinasospider的访问行为有任何不合理的情况,您可以反馈至反馈中心。

2. 为什么Chinasospider不停的抓取我的网站?

对于您网站上新产生的或者持续更新的页面,Chinasospider会持续抓取。此外,您也可以检查网站访问日志中Chinasospider的访问是否正常,以防止有人恶意冒充Chinasospider来频繁抓取您的网站。 如果您发现Chinasospider非正常抓取您的网站,请通过反馈中心反馈给我们,并请尽量给出Chinasospider对贵站的访问日志,以便于我们跟踪处理。

3. 我不想我的网站被Chinasospider访问,我该怎么做?

Chinasospider遵守互联网robots协议。您可以利用robots.txt文件完全禁止Chinasospider访问您的网站,或者禁止 Chinasospider访问您网站上的部分文件。 注意:禁止Chinasospider访问您的网站,将使您的网站上的网页,在中国搜索搜索引擎以及所有中国搜索提供搜索引擎服务的搜索引擎中无法被搜索到。

关于 robots.txt的写作方法,请参看如下介绍: 

以下robots实现禁止所有来自中国搜索的抓取:

User-agent: Chinasospider

Disallow: /

以下robots实现禁止中国搜索抓取/image/目录(其他目录写法类似):

User-agent: Chinasospider

Allow: /image/

4. 为什么我的网站已经加了robots.txt,还能在中国搜索出来?

因为搜索引擎索引数据库的更新需要时间。虽然Chinasospider已经停止访问您网站上的网页,但中国搜索引擎数据库中已经建立的网页索引信息,可能需要一两个月时间才会清除。另外也请检查您的robots配置是否正确。

如果您的拒绝被收录需求非常急迫,也可以通过反馈中心反馈请求处理。

5. Chinasospider抓取造成的带宽堵塞?

Chinasospider的正常抓取并不会造成您网站的带宽堵塞,造成此现象可能是由于有人冒充Chinasospider恶意抓取。如果您发现有名为Chinasospider的agent抓取并且造成带宽堵塞,请尽快和我们联系。您可以将信息反馈至反馈中心,如果能够提供您网站该时段的访问日志将更加有利于我们的分析。


附件列表


0

故事内容仅供参考,如果您需要解决具体问题
(尤其在法律、医学等领域),建议您咨询相关领域专业人士。

如果您认为本故事还有待完善,请 编辑

上一篇 贻阮隐居    下一篇 于漪

同义词

暂无同义词
  • 友情链接:
  • 中原企业家
  • 华锐社区
  • 法学学习
  • 故事库
  • 舆情信息
  • 郑州商业观察
  • 美丽中国
  • 药食同源
  • Lovely China
  • 纯欲天花板
  • 留学生