360搜索对Robots协议的支持

seo优化 2022-07-27 12:20www.1681989.comseo排名

360搜索支持Robots协议的主要命令,推火网以下为具体说明

1. user-agent

360搜索各产品的爬虫user-agent为

- 网页搜索 360Spider

- 图片搜索 360Spider-Image

- 视频搜索 360Spider-Video

2. Allow

站长可通过Allow命令指定建议收录的文件、目录 。

3. Disallow

站长可通过Disallow命令指定不建议收录的文件、目录。


Copyright © 2016-2025 www.1681989.com 推火网 版权所有 Power by