设计爬虫时，通常都回避动态网页(如Charkabarti，Joshi，Punera，&Pennock，2002)。识别动态网页时，只需要看URL中是否出现问号，含问号的就是动态网页。忽略动态网页是因为它们容易造成蜘蛛陷阱。蜘蛛陷阱理论上是一个无限的网页集合，而蜘蛛永远不能完整地遍历这个集合。在线日历就是一个容易被忽略的蜘蛛陷阱，它生成的动态网页中可以标上任何日期，并包含指向后一天网页的链接。一个爬虫从这个日历中找到一个网页后，便会无止境地请求后一天的网页。

一般来说，网站优化是非常困难的优化图片，因为我们都知道搜索引擎不认识图片。一个高质量的网站应该既有文字又有图片。如果网站上没有图片，会降低用户体验。那么我们在优化网站的时候应该如何使用网站上的图片呢?

在网站优化行业，欺骗通常被称为黑帽，形式化的方法被称为白帽。使用黑帽子或欺骗有时被站长无意中滥用，因为他不理解，有时故意用来提高排名和交通。作弊往往导致被搜索引擎惩罚，甚至网站被完全删除。另外，由于搜索引擎发布的质量标准和指导方针一般，往往有解释的空间，不能清楚地分为黑色或白色帽子，两种方法之间的优化称为灰色帽子。

每位站长都希望自己优化的网站能够得到搜索引擎的青睐，有一个好的排名，但是实际上操作起来也并不是一件简单的事。其中的一个原因就是大家都把优化的焦虑过于集中，其网站的自身问题导致搜索引擎排名排不上去。其实网站优化就从这几个方面上加强：

优化长尾词不能忽视，长尾词流的精度。在网站优化中也许许许多优化者已经发现了这一点，许多优化者还没有发现这一规则，文章出现在主页上，页面重量相对较高，一起可以被记录在一起，所以很多网站出现在文章列表上。用户不仅可以阅读，还可以传输内部页面权重。

软文写作是网络营销的重要组成部分，一篇好的软文往往能为你的产品、网站优化带来意想不到的传播效果。这个大家都知道!那怎样才能写好呢!下面就是笔者分享一篇在网上看到的一篇文章，个人认为关于软文写作写的很好。