(1) 网络爬虫又称网络蜘蛛，可以自动化浏览网络中的信息，进行互联网信息的自动检索(2) 搜索引擎会在海量的互联网信息中爬取优质信息并收录，当用户在搜索引擎上检索对应关键词时，会从收录的网页中按照一定的算法或排名规则呈现给用户(3) 大数据也离不开网络爬虫，需要使用网络爬虫去一些比较大型的站点爬取数据源，进行大数据分析或数据挖掘