一般来说，阻挠搜索引擎录入也或许成为一个SEO问题，尽量让搜索引擎抓取和索引更多内容是SEO们常常头疼的一个问题，没有录入索引就无从谈排名。特别对到达必定规划的网站来说，使上海搜索引擎优化的网站充沛录入是个颇令人费心的SEO技能，当页面到达比如说几十万，不管网站架构怎样规划多么优化，00百分之录入都是不或许的，只能尽量进步录入率。
但有时分怎样阻挠搜索引擎录入也或许成为一个问题，网站不录入近几年越来越成为SEO问题。需求阻挠录入的状况如保密信息仿制内容广告链接等。曩昔常用的阻挠录入办法包含密码保护把内容放在表格后边运用JS/Ajax运用Flash等。
运用FlashGoogle几年前就开端测验抓取Flash内容了，简略文字性内容现已能抓取。Flash里边的链接也能被盯梢。表格Google蜘蛛也能填表，也能抓取POST恳求页面。这个早就能从日志中看到。
JS/Ajax运用JS链接一直以来被当作不搜索引擎友爱的办法，因而能够阻挠蜘蛛匍匐，但两三年前我就看到JS链接不能阻挠Google蜘蛛抓取，不只JS中呈现的URL会被爬，简略的JS还能被执行找到更多URL.
Robots文件现在仅有确保内容不被录入的办法是robots文件制止。但也有个害处，会丢失权重，尽管内容是不能录入了，但页面成了只承受链接权重不流出权重的无底洞。NofollowNofollow并不能确保不被录入。就算自己网站一切指向页面的链接都加了NF,也不能确保他人高端网站建造不给这个页面弄个链接，搜索引擎仍是能发现这个页面。
