28Oct

中文分词 210天前•围观热度 84•经验之谈 2.2.2中文分词 分词是中文搜索引擎中特有的技术。在英文中以单词为单位，单词之间会有空格，并且每个单词都有特定的意思，计算机很容易理解英文语句的意思。但是中文以字为单位 . . .

27Oct

内容处理 211天前•围观热度 98•经验之谈 2.2.1内容处理 内容处理即搜索引擎对Spider抓取回来的页面进行处理。处理步骤简单介绍如下。 要判断该页面的类型 首先要判断该页面的类型是普通网页，还是PDF、Word.Excel等特殊文件文 . . .

27Oct

内容处理、中文分词和索引 211天前•围观热度 148•经验之谈 2.2内容处理、中文分词和索引 这一部分内容应该是搜索引擎原理中非常重要的一部分，并且网络上和其他SEO相关书籍中已经把这部分内容分析得很透彻，笔者并不能够对这些原理性的内 . . .

27Oct

Spider和普通用户的区别 211天前•围观热度 124•经验之谈 2.1.7Spider和普通用户的区别 所有的全文搜索引擎都表示自己的Spider对网站的抓取行为和普通用户的访问行为没有太大区别。 站在普通用户的角度这句话的确没有问题，但是站在站长和 . . .

27Oct

分布式Spider和降权蜘蛛 211天前•围观热度 91•经验之谈 2.1.6分布式Spider和降权蜘蛛 由于Spider所要抓取的网页太多，如果只有单一的一个Spider进行抓取作业，那么将需要非常巨大的计算能力，同时也会消耗更多的抓取时间。这里就引入了分布 . . .

25Oct

百度阿拉丁解决暗网抓取 213天前•围观热度 191•经验之谈 百度阿拉丁解决暗网抓取前面已经介绍过暗网，这些网页和非暗网网页是脱钩的，也就是说Spidei?通过普通的抓取机制永远都不可能抓取到这些页面。 用户浏览这些暗网页面一般都是通 . . .

25Oct

Spider再次抓取更新策略 213天前•围观热度 119•经验之谈 Spider再次抓取更新策略 Spider把网页抓取到本地，该网页被分析索引并参与了排名，并不意味着Spider针对该网页的工作已经结束了。 现在互联网网页内容多是动态变化的，甚至有时网页 . . .

25Oct

Spider抓取大站优先策略 213天前•围观热度 131•经验之谈 Spider抓取大站优先策略 大站优先策略，这个思路很简单。被搜索引擎认定为大站的网站，一定有着稳定的服务器、良好的网站结构、优秀的用户体验、及时的资讯内容、权威的相关资料 . . .

25Oct

全面挖掘搜索引擎优化的核心秘密 213天前•围观热度 193•经验之谈 全面挖掘搜索引擎优化的核心秘密 做SEO的人应该要对搜索引擎的基本原理有一些了解，从搜索引擎发现网址到该页面拥有排名，以及后续更新整个过程中，搜索引擎到底是怎么工作的， . . .

25Oct

Spider的抓取策略 213天前•围观热度 90•经验之谈 Spider的抓取策略 在大型搜索引擎Spider的抓取过程中会有很多策略，有时也可能是多种策略综合使用。这里简单介绍一下比较简单的Spider抓取策略，以辅助大家对Spider工作流程的理解。 . . .