Tag Archives: 搜索引擎

识别真假搜索引擎(搜索蜘蛛)方法(baidu,google,Msn,sogou,soso等)

最近工作中遇到个问题,就是有一些资源,不希望别人很派发的抓取,这样会占用我们带宽 … Continue reading

Posted in web原理, 学习心得 | Tagged , | Leave a comment