• 请不要在回答技术问题时复制粘贴 AI 生成的内容
no13bus
V2EX  ›  程序员

celery 最佳实践

  •  
  •   no13bus ·
    no13bus · Jul 21, 2014 · 4801 views
    This topic created in 4348 days ago, the information mentioned may be changed or developed.
    14 replies    2014-10-14 16:03:40 +08:00
    no13bus
        1
    no13bus  
    OP
       Jul 21, 2014
    第一个文章里面的回复里面有个解决作者关于不能直接传object的解决办法。可以看看。
    刚才发现了这个地址。原来官网一直有好东西。自己没注意。嗨
    http://www.celeryproject.org/community/
    stillzhl
        2
    stillzhl  
       Jul 21, 2014
    @no13bus 赞一个
    dafang
        3
    dafang  
       Jul 21, 2014
    好吧,真心觉得很水的一篇best practice。。。
    no13bus
        4
    no13bus  
    OP
       Jul 21, 2014
    @dafang 你那里有好文章也分享出来呀。
    MasterYoda
        5
    MasterYoda  
       Jul 21, 2014
    今天刚刚掉进一个奇怪的celery坑里,对broker(redis)的连接数暴增到10000+。
    no13bus
        6
    no13bus  
    OP
       Jul 21, 2014
    @MasterYoda 后来呢?啥原因呢?我broker也是用的redis。
    MasterYoda
        7
    MasterYoda  
       Jul 21, 2014
    @no13bus 没有找到原因啊,尴尬的很,task.delay时报错已经max number of clients了,一看连接到10000+了,到了redis conf里的上限。
    MasterYoda
        8
    MasterYoda  
       Jul 21, 2014
    @no13bus
    之前issue里有别人提过这个,不过新版本应该已经fix了。我这个问题的原因还在查。
    no13bus
        9
    no13bus  
    OP
       Jul 21, 2014
    @MasterYoda 你得是3.1?新版本是3.2.我用的也是3.1
    修复好了,可以分享下。一起来防坑
    MasterYoda
        10
    MasterYoda  
       Jul 22, 2014
    @no13bus 3.1.12 突然间出的问题,也没有原因的恢复了,我把broker迁到了另一个机器上,连接数稳定在19了。
    no13bus
        11
    no13bus  
    OP
       Jul 23, 2014
    @MasterYoda 有空交流交流celery的使用?最近用的比较多。qq 364416072. 不知道你们celery的监控室怎么做的。我用了他官方推荐的flower,是tornado写的。
    MasterYoda
        12
    MasterYoda  
       Oct 14, 2014
    @no13bus 上次那个连接数的问题,redis达到它的maxmemory后,task.delay每次都会开一个新连接,原因未知。
    no13bus
        13
    no13bus  
    OP
       Oct 14, 2014
    @MasterYoda 你怎么查看的redis的当前的连接数量?
    no13bus
        14
    no13bus  
    OP
       Oct 14, 2014
    @MasterYoda 看到了redis-cli info就能看。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5438 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 44ms · UTC 08:06 · PVG 16:06 · LAX 01:06 · JFK 04:06
    ♥ Do have faith in what you're doing.