城市-地产-生活聊聊城社区

标题: 聊城房产网，是立足聊城本地，提供最新房产信息及资料 [打印本页]

作者: 游客 时间: 2014-2-15 10:28
标题: 聊城房产网，是立足聊城本地，提供最新房产信息及资料
目前百度是中国最大搜索引擎，每天数亿次的关键词搜索，方便了大家。而且百度技术很先进，目前支持Robots协议（搜索引擎蜘蛛标准抓取协议）
robots.txt文件尤其重要，当一个搜索蜘蛛访问一个站点时，它会首先检查该站点根目录下是否存在robots.txt，如果存在，搜索机器人就会按照该
文件中的内容来确定访问的范围；如果该文件不存在，所有的搜索蜘蛛将能够访问网站上所有没有被口令保护的页面。百度官方建议，仅当您的网站
包含不希望被搜索引擎收录的内容时，才需要使用robots.txt文件。如果您希望搜索引擎收录网站上所有内容，请勿建立robots.txt文件。
对此聊城房产网建设了自己的的robots文件，如： http://www.lcfcw.com/robots.txt例如聊城房产网，是立足聊城本地，提供最新房产信息及资料，免费信息大家都可以查看，编辑每天审核及维护相关内容，为聊城人民服务

作者: 匿名 时间: 2014-2-20 11:38
一诺林花小筑的问题怎么不见报道啊

欢迎光临城市-地产-生活聊聊城社区 (http://bbs.lcfcw.com/)

城市-地产-生活 聊聊城社区

城市-地产-生活聊聊城社区