过去有一个商品，本来Google网站收录量达到了3000万，百度网站收录2000万，流量也很好，精力挪到别的商品上去了。 过了1个月发现流量有所下滑，以为是季节原因，没在乎，又过了2个月，流量降低很多。仔细检查了一下发现一个惊人的变化。其中/search/目录在robots.txt中是Disallow的 4，在随后的2周内，网站收录量最低降到了300万左右。
我期望能有个系统自动的帮我梳理这类问题，让我不再天天担心网站优化的需要又不了解被哪个弄掉了，假如有问题，能让开发测试的同事立刻就收到警报，让“擦屁股”的事情不再占用我太多时间。 内容思维导图，元信息，页面单元测试，蜘蛛日志监控
鉴于前边什么时间，我的解决方法是池州网站优化之网站长期的网站优化健康度
从网站优化的角度看，网站的结构是如此由各类用户搜索需要组成的，也是有合理层级关系的池州网站优化之网站长期的网站优化健康度 1，网站有什么内容节点 2，什么命中了用户的需要 3，什么是毫无检索意义的 4，缺少什么节点 5，应该怎么样部署层级关系 思维导图绝对不是一劳永逸的，每当商品有新的pattern上线，或者旧的pattern下线，需要准时更新。每当你发现新的用户搜索习惯，也应该更新，并且推送给商品同事了解。 •元信息我这里说的不是， 而是所有网站优化有关的，有规律的(最好是可以用正则表达的)，可量化的信息。包含池州网站优化之网站长期的网站优化健康度 首页池州网站优化之网站长期的网站优化健康度 www.cdcxhl.com/channel/ 首页-频道1-维度1池州网站优化之网站长期的网站优化健康度 www.cdcxhl.com/channel/abc/xyz/ 首页-频道1-详细页池州网站优化之网站长期的网站优化健康度 •www.cdcxhl.com/channel/？category=abc&brand=xyz&tracking=other_website •www.cdcxhl.com/channel/？item=12345
假如下一版改成如此也没问题的池州网站优化之网站长期的网站优化健康度 •页面单元测试这个“单元测试”是借用了一个研发的术语，原本是测试某一个函数或类的。我是用来测试网站优化的一个具体的细节概念。工具也是借用了“Rspec”来二次开发的。这个模块可以分为两个环境来运行，production和testing。 其中production的测试，大家叫“回归测试”，目的是保证之前已经上线的网站优化需要，依旧好好的呆在那里，假如报警需要准时修复。 testing环境中，是为了给研发职员做类似TDD(测试驱动开发)用的。它包括了production的回归测试也包括了testing中新的需要，可以被当做是需要文档。只须研发职员把这个测试都跑通，就说明你的需要完成了。当这类需要上线后，把测试合并到production一块做回归测试，如此就圆满了。 测试的内容可以涵盖池州网站优化之网站长期的网站优化健康度 1，全站85%的访问，response code都是301。 2，蜘蛛抓取量的50%都是抓异步请求(ajax，iframe)的URL。 3，某些类别的页面平均响应时间超越10秒/次。 4，response code 200的访问中60%的请求都不是网站优化需要的URL。附图仅展示一些字段给大伙做参考池州网站优化之网站长期的网站优化健康度池州网站优化之网站长期的网站优化健康度目前路径：
