软404

改了一版404模板，页面上写着“抱歉，页面不存在”，用户看到的就是这句话。用curl-I打一次响应头，第一行返回的却是200OK，而搜索引擎只认后面那个，状态码不在模板的改动范围里。状态码是给爬虫看的判据，模板是给人看的。返回200再加一段空内容，在爬虫那边就是软404，会当成内容单薄的正常页收进去，长期占着索引位，用户点进来看到的是空白。查法最直接的一条是curl-I地址，看返回的第一行。Win