爬虫

爬虫是一种用来爬取网页信息的程序或脚本，比如搜索引擎就是通过爬虫来获取网页信息进而优化搜索算法，由于Python具有良好的爬虫生态，所以爬虫程序一般都是由Python编写。不过爬虫需要合理合法爬，如果违法违规爬取网页信息造成服务器负载过重或是爬取隐私信息，必然会受到法律的惩治，所以爬虫需谨慎，不能乱爬。