From 56f026812fd2f23fcb3001d808d7f825dcaab04f Mon Sep 17 00:00:00 2001 From: psqoycetx <1767552118@qq.com> Date: Sat, 22 Apr 2023 18:09:28 +0800 Subject: [PATCH] Update README.md --- README.md | 8 +++++--- 1 file changed, 5 insertions(+), 3 deletions(-) diff --git a/README.md b/README.md index 2b0e63c..75cb306 100644 --- a/README.md +++ b/README.md @@ -10,7 +10,8 @@ *[启动爬虫](#启动爬虫) ###下载安装 -pip install -r requirements.txt +1、安装redis +2、安装依赖库,pip install -r requirements.txt ###创建一个分布式爬虫 scrapy startproject XXX(项目名) @@ -22,7 +23,8 @@ scrapy genspider xxx(爬虫名) www.baidu.com(域名-示例) 2、根据任务需求更改items.py,middlewares.py,pipelines.py文件 ###启动爬虫 -1、运行"获取所有视频的url.py"文件将视频的url加入到redis中 -2、打开命令行,输入 scrapy runspider bilibili.py 开始爬取视频 +1、启动redis服务,在命令行输入 redis-server +2、运行"获取所有视频的url.py"文件将视频的url加入到redis中 +3、运行bilibili.py文件,你需要找到该文件并在命令行中输入 scrapy runspider bilibili.py(可以打开多个脚本任务)