google上線半年收錄頁面不到一半什么原因
最主要的原因是爬蟲阻礙問題,有些非主流SEO插件別用,要用就用YOASTSEO和RANKMATH,其他的插件會在ROBOTS.TXT文件中亂加一些無用代碼。
robots標準示范:
博客站:
User-agent:*
Disallow:
Sitemap:https://www.domain.com/sitemap_index.xml
另外也可以這樣:
電商站:
User-agent:*
Disallow:/wp-admin/
Allow:/wp-admin/admin-ajax.php
在你網(wǎng)站域名后面/robots.txt就看到了。