首页 SEO技术 robots

SEO技术 robots

  • 创建robots需要了解的参数

    创建robots需要了解的参数

      上文讲到robots的重要性和注意事项,接下来就给大家讲解下robots文件需要了解的参数。  robots参数  User-agent表示描绘搜索引擎蜘蛛的姓名  举例说明:  User-agent:*=描绘一切蜘蛛  User-agent:BaiduSpider=描绘百度蜘蛛  各大搜索引擎蜘蛛名称  百度蜘蛛:BaiduSpider  搜狗蜘蛛:Sogou web spider  谷歌蜘蛛:Googlebot  360蜘蛛:360Spider  宜搜蜘蛛:EasouSpider...

    SEO技术 2019-03-18 38 0 SEO技术 robots
1