Internet上的信息日益增多，就存在如何有效地搜索信息的问题，搜索引擎出现了，它的核心就是抓取原理（Crawling Principles）。
抓取原理是指自动收集、检索网络，然后存线到存储技术，编制全文索引（Full-text Index），再通过搜索优化，综合归类搜索出想要的结果。
搜索引擎抓取的第一步就是链接爬取，即设置一些爬虫，他们会不断搜索新的链接，把自己没有访问过的链接加入到自己的抓取列表，抓取器从抓取列表不断抓取页面，抓取的链接会被添加到抓取列表，然后再抓取，以此来逐步抓取网络上所有的页面。
此外，搜索引擎还会将页面内容进行解析。不同的搜索引擎采用不同的解析方法，比如说结构型分析、Statistical分析、Natural Language Processing和Machine intelligence。结构型分析是通过使用结构化的解析来解析文本内容。Statistical分析会计算文章中某些单词出现的频率等信息；Natural Language Processing是把文章切分为不同的短句，然后解析出句子里的语义和语法等信息；机器智能将计算机程序和模型，用来解决复杂问题，例如计算文章的内容、句子的含义和图片的内容等。
因此，搜索引擎抓取原理就是通过不断爬取链接，并且把抓取的内容进行解析，从而更好地了解网络世界，从而为用户提供准确快捷的搜索结果。
