Robot制定的两个原则：搜索技术应服务于人类，尊重信息提供者的意愿，并维护其隐私权；网站有义务保护其使用者的个人信息和隐私不被侵犯。obots协议目的是为了限制谷歌，但最终却帮助Google和百度这样的垄断企业遏制了后起的竞争者。因为，Google当年在制定这个协议时，特意留下了后门，即：协议中不仅包括是否允许搜索引擎进行搜索的内容，还包括允许谁和不允许谁进行搜索内容。Google和百度在实现了垄断地位之后，就利用这些排斥性规则挡住了后来的进入者。
