Skip to main content

Command Palette

Search for a command to run...

golang写个job替换掉sidekiq与定时任务

Published
1 min read

简述

花了半天时间用golang写了一个job程序,想替换掉sidekiq。

因为这玩意实在太占内存了。

项目已开源在github:https://github.com/molisoft/rkejob

  • 可以替换掉sidekiq
  • 轻量级定时任务

实现目标

  • 不影响rails的应用,不需要做太多的修改就能替换掉sidekiq
  • 降低内存使用

实现思路

之前的sidekiq是给予redis的rpush命令来显示的先进先出的队列。

刚好golang有个库,完美兼容sidekiq的rpush实现。

所以拉过来,差不多可以直接用了。

之前的思路

rails -> redis <-> sidekiq

现在的思路

rails -> redis <-> rekjob -> rails

也就是任务最后都丢给了rails来跑了

优缺点

优点是不需要自己在golang上重写队列中的业务了。

缺点是任务直接丢给rails来跑的话,相当于把负载丢到了rails,所以如果没有时间较长的任务的话,丢给rails来运行也没问题。

如果是数量很大很多的,那还是用golang来重写任务队列业务吧。

其实

其实升级下服务器内存,也没多几个钱 ~ 关键是折腾~

1 views

More from this blog

会有越来的多的side projects出现

什么是side project 可以理解为工作之余开发的产品,通常是收费的服务,可作为工作之外额外收入的产品。 在目前经济下行、公司开源节流(裁员)、失业率上升的大环境下,每一个程序员都应该拥有自己的side projects来对冲未来的不可靠风险。 所以side project 不仅仅是多一种「被动收入」,他也是你未来的「筹码」——工作累了,不想干了、有小孩了、买房了、家人生病了等等这些事情发生的时候,你可以「任性」一下。 而不是一些不可靠的风险出现的时候,再来提高自己的「抗风险」能力。 上面...

Jul 28, 20231 min read61

Xbox Cloud Gaming 游戏加速尝试

Xbox Cloud Gaming 游戏加速 之前有个很老的xbox游戏机,因为性能有点差劲了,所以卖了。 偶尔还是想玩玩游戏,但是老婆不让给买xbox的物理机(怀恋单身),所以含泪玩xbox cloud gaming(以下简称 xcg),xpg会员游戏还是很丰富的。 于是买了uu加速器,坦白说uu加速器不算便宜的,但是xcg在晚上高峰期,一样卡得怀疑人生,那种被马赛克糊满脸的感受,上一次这种体验还是看小姐姐的电影。 其实用uu加速器玩是ok的,就是国内的网络情况大家都知道,dddd(懂得都懂)...

Sep 5, 20221 min read258

github codespaces 在ipad上的最佳浏览器

Github Codespaces github codespaces 是github在被微软收购后,提供的一款在线web IDE,基本与vscode一致,只是运行在浏览器上而已。 而且非常土豪的提供了4核8G内存,微软就是壕。 so,通过ipad来使用codespaces就是一件比较顺其自然的事。 可是其实也没那么简单。。 IPad使用codespaces的快捷键问题 其实最大的问题就是快捷键的问题,不管你是用saferi,还是chrome,他们提供的快捷键或多或少会与你的vscode的快捷键...

Oct 8, 20211 min read59

基于binlog检查数据错误

起因 某个表的 status 「莫名其妙」变成 0 了 其实可以判断出是 status 没有被赋值,通常是结构体的 status 默认是 0 才会被插入数据库。 于是问题看起来就很简单了:只要检查相关的更新操作中的 status 字段有没有被赋值即可。 但是 这个表是用户表。 因为历史原因,源码中的更新函数很多 调用更新函数的地方也很多 无法复现该问题,测试人员也不知道做了什么操作状态变成 0 的 所以同事关注这个问题挺久了,也没看到问题原因(当然我也没看到……) 但是恰好我在做导出 bin...

Aug 5, 20212 min read61
M

Moli'blog

64 posts

曾经的少年还在吗?