robots
含有「robots」共 2 篇內容
全部內容
發佈日期由新至舊
Chrome 的開發者工具中，你可以模擬 Googlebot 或其他搜尋引擎爬蟲的網頁抓取情況。
Meta Robots是Meta Tags中的一種。主要是為搜尋引擎的爬蟲，告訴他們「要如何」對網頁進行爬蟲或索引。這個與「robots.txt」文件有相似的作用，但Meta Robots可以告訴爬蟲更清楚的網頁索引需求。