AhrefsBot: Difference between revisions
| Line 31: | Line 31: | ||
Harap perhatikan juga bahwa jika <code>robots.txt</code> Anda berisi kesalahan dan AhrefsBot tidak akan dapat mengenali perintah Anda, ia akan terus merayapi situs web Anda seperti sebelumnya. | Harap perhatikan juga bahwa jika <code>robots.txt</code> Anda berisi kesalahan dan AhrefsBot tidak akan dapat mengenali perintah Anda, ia akan terus merayapi situs web Anda seperti sebelumnya. | ||
== | ==Source== | ||
*[https://ahrefs.com/robot ahrefsdotcom] | *[https://ahrefs.com/robot ahrefsdotcom] | ||