1. 百度蜘蛛的构建的原理。  搜索引擎构建一个调度程序，来调度百度蜘蛛的工作，让百度蜘蛛去和服务器建立连接下载网页，计算的过程都是通过调度来计算的，百度蜘蛛只是负责下载网页，目前的搜索引擎普遍使用广布式多服务器多线程的百度蜘蛛来达到多线程的目的。2. 百度蜘蛛的运行原理。   （1）：通过百度蜘蛛下载回来的网页放到补充数据区，通过各种

     搜索引擎派出他的爬虫去访问、索引网站内容，SEOer也默认、欢迎它们来访。但是由于搜索引擎派机器人来访会在一定程度上影响网站性能，因此并非所有的机器人都是无害的，有一些非法机器人伪装成主流搜索引擎漫游器对网站大量遍历，并且不遵循robots.txt规范，会严重拖垮网站性能而又无其它益处。因此，网站管理员需要验证每个机器人身份是否合法。在你的服务器日志文件中，

    要学好SEO,必须要对搜索引擎有所了解,知己知彼方能百战百胜,今天我们来了解搜索引擎机器人也就是网络蜘蛛的广度优先和深度优先.    广度优先 是指网络蜘蛛会先抓取起始网页中链接的所有网页，然后再选择其中的一个链接网页，继续抓取在此网页中链接的所有网页。这是最常用的方式，因为这个方法可以让网络蜘蛛并行处理，提高其抓取速度

这段时间试验了好几个页面，产生出了一些想法，下面从几个因素分析一下百度与goole最近的区别,以下文章仅适合新手茶余饭后消遣阅读，高手请轻轻的飘过。一.百度喜欢从一个网站的链接找到另外一个网站，我现在做站一般都不去提交，而是找几个蜘蛛经常去的站加几个链接，比如在落伍挂个签名，灌几下水，第二天就收录了。然后慢慢的更新，慢慢的收录。通过链接来让SE收录是个不错的选择，大家可以尝试一下。GOOGLE喜欢