網站通過Robots協議告訴搜索引擎哪些頁面可以抓取，哪些頁面不能抓取，robots默認都是放在網站根目錄。剛建好的WordPress網站，打開robots.txt是能訪問的，但是在網站目錄卻找不到任何robots.txt文件，其實默認的robots文件放在wp-includes/functions.php中，通過搜索robots大概在1319行可進行修改
免責聲明！
本站轉載的文章為個人學習借鑒使用，本站對版權不負任何法律責任。如果侵犯了您的隱私權益，請聯系本站郵箱yoyou2525@163.com刪除。