中文搜索引擎有哪些？

常见的有百度，360，搜狗，有道，必应，中搜，易搜等。

开放目录有哪些？什么是开放目录？

开放目录是最有信用的目录站，能够被收录到Dmoz的分类中，将大大提升这个网站在搜索引擎相关网站分类中的地位。常见的开放目录有：雅虎，开放目录，hao123等

目录网站

搜索引擎和目录各自的优缺点有哪些？

搜索引擎存储的数据量多，收录更新速度快，采用程序自动抓取数据

目录网站存储数量相对较少，收录速度慢，甚至有些信息较为陈旧。但是目录都是人工编撰和审核的，对网站要求高，审核较为严格。

目录网站提交网站需要手工编辑网站信息，选定相应的栏目分类，工作人员审核通过之后放置在相应的版块儿

robots文件的作用

robots文件是用文本文档编写放在网站根目录下的文件。当搜索引擎通过链接到网站上面去抓取信息的时候，首先需要访问网站根目录下的robots文件，如果允许相关搜索引擎抓取网站内容，那么就可以抓取；如果不允许网站内容被抓取，那么就禁止搜索引擎抓取网站内容。比如：今日头条，淘宝等robots文件就限制了百度搜索引擎抓取网站内容。今日头条和淘宝网站里面的信息都是不被百度抓取的。如果一旦限制抓取内容，那么对网站优化是致命的。关于robots文件的详细写法，在后面会跟大家详细分享。

百度

网站日志

网站日志记录了各大搜索引擎对网站抓取的记录，只要去网站里面抓取内容了，都会形成相应的网站日志文件。网站日志是我们参考搜索引擎是否抓取网站的重要依据，哪些搜索引擎什么时候来抓取的哪些页面，抓取是否成功，都体现在了网站日志里面。要想看懂网站日志里面的内容，必须要知道各大搜索引擎抓取程序的名字，比如百度叫baiduspider 360叫360bot 谷歌叫googlebot。