IT博客汇
首页
精华
技术
设计
资讯
扯淡
权利声明
登录
注册
Python爬虫编程思想(153):使用Scrapy抓取数据,抓取多个Url
nokiaguy
发表于
2022-06-28 17:34:24
love
0
在前面的案例中都是只抓取了一个Url对应的页面,但在实际应用中,通常需要抓取多个Url,在爬虫类的start_urls变量中添加多个Url,运行爬虫时就会抓取start_urls变量中所有的Url。下面的代码在start_urls变量中添加了2个Url,运行MultiUrlSpider爬虫后,就会抓取这两个Url对应的页面。...