可以把每一个节点想想成python的一个虚拟环境,可以为不同的任务使用。
在将自己的Crawlab跑起来之后,用cmd命令
docker ps # 查看正在运行的容器
# 或查看所有容器(包括停止的)
docker ps -a
worker是我的工作节点,master是我的主节点。
我们进入单独节点的环境里,这里 以主节点为例:
# 格式:docker exec -it 容器名 bash
docker exec -it crawlab_master bash # 这个是进入主节点
进入后我们可以用pip命令安装或者查我们想要的包是否存在(拒绝访问则以管理员身份运行cmd窗口)显示下面这个就表示已经进入到这个容器里了。
pip install DrissionPage
(提示:若是你现实安装成功了,但是在Crawlab的环境没有找到,从Docker重启服务,千万不要去docker-compose up之类的,不然会杀死之前配置好的节点,每次只需要直接打开Docker直接运行就行,不要再用命令去整)