《Python从小白到大牛》(第2版)23.1 网络爬虫技术概述。网络爬虫(又被称为网页蜘蛛,网络机器人),是一种按照一定的规则,自动地爬取互联网数据的计算机程序。编写网络爬虫程序主要涉及的技术有网络通信技术、多线程并发技术、数据交换技术、HTML等Web前端技术、数据解析技术和数据存储技术等。