google高级搜索 – 强的部落格

有时需要对某个网站子目录下的网页进行抓取页面，但事先并不知道要爬取哪些页面，可以借助google高级搜索功能和api来提取相应的页面网址，比如：搜索特定网站中的内容：输入 site:，后跟相应网站或域名。例如 [site:youtube.com 猫视频]。