日韩欧美亚洲 _ 欧美亚洲一区 _ 日本亚洲欧美 _ 亚洲精品欧美国产白袜脚足J棉袜在线观看_亚洲熟妇av一区二区三区_久久天天躁狠狠躁夜_精品众筹模特私拍在线

填空題

為了方便網(wǎng)站管理員通知爬蟲更新網(wǎng)站的內(nèi)容，網(wǎng)站提供了（）文件。

答案： Sitemap.xml

你可能感興趣的試題

網(wǎng)站通過(guò)一個(gè)文件（）來(lái)告訴搜索引擎哪些頁(yè)面可以抓取，哪些頁(yè)面不能抓取。

答案： robots.txt

現(xiàn)在網(wǎng)站會(huì)采取一些（）措施來(lái)阻止網(wǎng)絡(luò)爬蟲的不當(dāng)爬取行為。

答案：防爬蟲