Работа с двумя отдельными экземплярами redis с sidekiq?

как carols10cents говорит, что это довольно просто, но, как я всегда хотел инкапсулировать возможность и иметь возможность повторно использовать его в других проектах, я обновил идею из блог из отеля Сегодня вечером. Это следующее решение улучшает отель Сегодня вечером, который не переживает Rails 4.1 & Spring preloader.

в настоящее время я делаю с добавлением следующих файлов в lib/remote_sidekiq/:

remote_sidekiq.rb

class RemoteSidekiq
  class_attribute :redis_pool
end

remote_sidekiq_worker.rb

require 'sidekiq'
require 'sidekiq/client'

module RemoteSidekiqWorker
  def client
    pool = RemoteSidekiq.redis_pool || Thread.current[:sidekiq_via_pool] || Sidekiq.redis_pool
    Sidekiq::Client.new(pool)
  end

  def push(worker_name, attrs = [], queue_name = "default")
    client.push('args' => attrs, 'class' => worker_name, 'queue' => queue_name)
  end
end

вам нужно создать инициализатор, который устанавливает redis_pool

config/инициализаторы / remote_sidekiq.rb

url = ENV.fetch("REDISCLOUD_URL")
namespace = 'primary'

redis = Redis::Namespace.new(namespace, redis: Redis.new(url: url))

RemoteSidekiq.redis_pool = ConnectionPool.new(size: ENV['MAX_THREADS'] || 6) { redis }

вы можете тогда просто include RemoteSidekiqWorker модуль, где вы хотите. Работа сделана!

**** ДЛЯ БОЛЕЕ БОЛЬШИХ СРЕД ****

добавление в RemoteWorker Модели добавляют дополнительные преимущества:

1. вы можете повторно использовать RemoteWorkers везде, включая систему, которая имеет доступ к целевым работникам sidekiq. Это прозрачно для вызывающего абонента. Для использования формы "RemoteWorkers" в целевой системе sidekiq просто не используйте инициализатор, поскольку по умолчанию используется локальный клиент Sidekiq.
2. использование RemoteWorkers гарантирует, что правильные аргументы всегда отправляются (код = документация)
3. масштабирование по создание более сложных архитектур Sidekiq прозрачно для абонента.

вот пример RemoteWorker

class RemoteTraceWorker
  include RemoteSidekiqWorker
  include ActiveModel::Model

  attr_accessor :message

  validates :message, presence: true

  def perform_async
    if valid?
      push(worker_name, worker_args)
    else
      raise ActiveModel::StrictValidationFailed, errors.full_messages
    end
  end

  private

  def worker_name
    :TraceWorker.to_s
  end

  def worker_args
    [message]
  end
end

я наткнулся на это и столкнулся с некоторыми проблемами, потому что я использую ActiveJob, что усложняет чтение сообщений из очереди.

основываясь на ответе АРО, вам все равно понадобится настройка redis_pool:

remote_sidekiq.rb

class RemoteSidekiq
  class_attribute :redis_pool
end

config/инициализаторы / remote_sidekiq.rb

url = ENV.fetch("REDISCLOUD_URL")
namespace = 'primary'

redis = Redis::Namespace.new(namespace, redis: Redis.new(url: url))

RemoteSidekiq.redis_pool = ConnectionPool.new(size: ENV['MAX_THREADS'] || 6) { redis }

теперь вместо рабочего мы создадим адаптер ActiveJob для очереди запрос:

lib/active_job/queue_adapters / remote_sidekiq_adapter.rb

require 'sidekiq'

module ActiveJob
  module QueueAdapters
    class RemoteSidekiqAdapter
      def enqueue(job)
        #Sidekiq::Client does not support symbols as keys
        job.provider_job_id = client.push \
          "class"   => ActiveJob::QueueAdapters::SidekiqAdapter::JobWrapper,
          "wrapped" => job.class.to_s,
          "queue"   => job.queue_name,
          "args"    => [ job.serialize ]
      end

      def enqueue_at(job, timestamp)
        job.provider_job_id = client.push \
          "class"   => ActiveJob::QueueAdapters::SidekiqAdapter::JobWrapper,
          "wrapped" => job.class.to_s,
          "queue"   => job.queue_name,
          "args"    => [ job.serialize ],
          "at"      => timestamp
      end

      def client
        @client ||= ::Sidekiq::Client.new(RemoteSidekiq.redis_pool)
      end
    end
  end
end

Я могу использовать адаптер для очереди событий сейчас:

require 'active_job/queue_adapters/remote_sidekiq_adapter'

class RemoteJob < ActiveJob::Base
  self.queue_adapter = :remote_sidekiq

  queue_as :default

  def perform(_event_name, _data)
    fail "
      This job should not run here; intended to hook into
      ActiveJob and run in another system
    "
  end
end

теперь я могу поставить задание в очередь с помощью обычного api ActiveJob. Независимо от того, приложение читает это из очереди, нужно будет иметь соответствующий RemoteJob для выполнения действий.