在Python Celery中,如何在连续的工作调用中持久保存对象?

我正在使用Celery来自动化一些屏幕抓取.我正在使用Selenium打开Chrome webdriver,操作页面,保存一些数据,然后转到队列中的下一页.问题在于它为队列中的每个任务构建和分解Web驱动程序,这非常耗时且占用大量资源. 如何在通话中保留对象?我已经阅读了有关Celer

python – Celery死于DBPageNotFoundError

我有3台机器与芹菜工人和rabbitmq作为经纪人,一名工人正在运行与击败旗,所有这一切都由主管管理,有时芹菜死亡有这样的错误. 此错误仅出现在节拍工作人员身上,但当出现时,所有计算机上的工作人员都会死亡. (celery == 3.1.12,kombu == 3.0.20) [2014-07-05 08:

返回顶部