百度蜘蛛只爬JPG图片,不爬HTML文件,怎么操作?

【百度蜘蛛只爬JPG图片,不爬HTML文件,怎么操作?】

百度蜘蛛只爬JPG图片,不爬HTML文件,怎么操作?

文章插图
百度只抓取JPG图片,不抓取HTML文件 。怎么操作呢?百度只抓取JPG图片,不抓取HTML文件 。怎么操作呢?简介:连续2周发现百度蜘蛛不怕HTML文件,只爬JPG图片 。不知道为什么,谷歌蜘蛛爬行正常 。我的机器人 。TXT是空白 。ltpgt ltstronggt暮光说:ltpgt