标签：容器 ps 部署 qsbk sudo spider scrapy docker

将scrapy爬虫或者分布式爬虫通过docker发布到docker hub 上
1.准备工作，本机有docker
2.在项目的根目录下创建 requirements.txt 和Dockerfile 文件（Dockerfile文件没有后缀名）
3.在requirements.txt 列出项目需要的第三方库+版本 ，也可以不加版本：
Scrapy>=1.8.0
scrapy-redis>=0.7.1
pymongo>=3.12.1

4.在Dockerfile文件中：
FROM python:3.8 #自己Python版本
ENV PATH /usr/local/bin:$PATH
ADD . /code
WORKDIR /code
RUN pip install -r requirements.txt
CMD scrapy crawl qsbk_spider # qsbk_spider 这个名字随意
5. sudo docker build -t qsbk_spider:latest . 构建镜像，加latest 按指定版本下载，否则，下最新版本，注意后面有个点，qsbk_spider这是爬虫名
6. sudo docker images
7. sudo docker run ef9f4fa69b0f
8. sudo docker rmi -f d237c372d252 强制删除
9. sudo docker rmi d237c372d252 普通删除
10. docker ps // 查看所有正在运行容器
docker stop containerId // containerId 是容器的ID
docker ps -a // 查看所有容器
docker ps -a -q // 查看所有容器ID
docker start $(docker ps -a -q) // start启动所有停止的容器
docker stop $(docker ps -a -q) // stop停止所有容器
docker rm $(docker ps -a -q) // remove删除所有容器
docker kill 容器id/容器名字
查看自己主机外网IP：sudo apt-get install curl curl ifconfig.me 即可查看

标签：容器,ps,部署,qsbk,sudo,spider,scrapy,docker
来源： https://blog.csdn.net/qq_44042040/article/details/121598187

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。