英文seo技术博客是交流学习英文网赚,国外网赚项目及各种黑帽白帽SEO方法的博客,提供seo培训

[免费英文SEO培训]robots.txt写法

http://iyunkercourse.kuaiyunds.com/iyunkercourse/tobots.txt.mp4

什么是robots.txt

robots.txt写法

robots.txt 是一个TXT的文本,作用是允许或者屏蔽搜索引擎抓取网站内的某些目录或文件。

例如:www.iyunker.com/robots.txt

User-agent: *

Disallow: /

Disallow: /wp-admin

------------------------------------------

User-agent: baiduspider

Disallow: /

发表评论

电子邮件地址不会被公开。 必填项已用*标注