
RabbitMQ
笑笑布丁
个人博客:https://madpudding.github.io/
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
使用HAProxy为rabbitmq实现负载均衡
背景:实际上rabbitmq远没有达到性能瓶颈,但是celery与mq对接总是有些问题,在github找到了解决之道,便试着解决,后续观察效果1、安装haproxysudo apt-get install haproxyvim /etc/haproxy/haproxy.cfg # 这一步是配置haproxy配置项#---------------------------------------------------------------------# Global settings#原创 2020-11-11 11:38:07 · 1064 阅读 · 0 评论 -
supervisor部署celery实践
原因想用celery执行一些爬虫的后续操作,不占用爬虫爬取的时间.尝试了不同的方法感觉supervisor最靠谱,这也是celery官方推荐的做法.做法:1 安装 supervisorpip install supervisor2 进入项目文件夹,创建 conf 文件cd projectecho_supervisord_conf> supervisord.conf结果如下所...原创 2020-03-02 16:58:52 · 912 阅读 · 4 评论 -
关于celery连接rabbitMQ错误:ConnectionResetError: [Errno 104] Connection reset by peer
爬虫使用celery从RabbitMQ取数据的时候,会遇到这个错误,关于错误的原因在于:网络不稳定或者连接时间过长.我的原因是在于时间过长,因为爬虫消化需要一定的时间.下面开始我的填坑之路:1、在github issue里面,发现有人跟我是同样的错误,遂采用它得到的解决办法:broker_pool_limit = None结论: 不行.2 在kombu 包的pidbox文件的rep...原创 2019-11-27 10:25:35 · 3148 阅读 · 0 评论 -
Error response from daemon: OCI runtime create failed: container_linux.go:344
Error response from daemon: OCI runtime create failed: container_linux.go:344 starting container process caused “exec: “docker-entrypoint.sh”: executable file not found in $PATH”: unknown.用docker跑ra...原创 2019-06-27 14:38:22 · 16072 阅读 · 1 评论 -
docker搭建rabbitmq
1. docker search rabbitmq2. docker pull rabbitmq (镜像未配有控制台),docker pull rabbitmq:management (镜像配有控制台)3. 安装命令:docker run --name rabbitmq -d -p 15672:15672 -p 5672:5672 rabbitmq:management4.启动容器: doc...原创 2019-08-20 17:50:31 · 158 阅读 · 0 评论