ActiveRecord:: ConnectionTimeoutError: не удалось получить подключение к базе данных в течение 5.000 секунд (ждал 5.000 секунд)

у меня есть приложение rails в производстве, которое я развернул некоторые изменения на днях. Внезапно теперь я получаю ошибку ActiveRecord::ConnectionTimeoutError: could not obtain a database connection within 5.000 seconds (waited 5.000 seconds) несколько раз в день и должны перезапустить puma, чтобы исправить эту проблему.

я полностью в тупике относительно того, что вызывает это. Я ничего не менял на своем сервере, и изменения, которые я сделал, были довольно простыми (добавьте в представление и добавьте в метод контроллера).

Я ничего не вижу в файлах журнала.

я использую rails 4.1.4 и ruby 2.0.0p481

есть идеи, почему мои связи заполняются? Мой пул соединений установлен в 10, и я использую конфигурацию Puma по умолчанию.

вот трассировка стека:

ActiveRecord::ConnectionTimeoutError (could not obtain a database connection within 5.000 seconds (waited 5.000 seconds)):
  activerecord (4.1.4) lib/active_record/connection_adapters/abstract/connection_pool.rb:190:in `block in wait_poll'
  activerecord (4.1.4) lib/active_record/connection_adapters/abstract/connection_pool.rb:181:in `loop'
  activerecord (4.1.4) lib/active_record/connection_adapters/abstract/connection_pool.rb:181:in `wait_poll'
  activerecord (4.1.4) lib/active_record/connection_adapters/abstract/connection_pool.rb:136:in `block in poll'
  /usr/local/rvm/rubies/ruby-2.0.0-p481/lib/ruby/2.0.0/monitor.rb:211:in `mon_synchronize'
  activerecord (4.1.4) lib/active_record/connection_adapters/abstract/connection_pool.rb:146:in `synchronize'
  activerecord (4.1.4) lib/active_record/connection_adapters/abstract/connection_pool.rb:134:in `poll'
  activerecord (4.1.4) lib/active_record/connection_adapters/abstract/connection_pool.rb:418:in `acquire_connection'
  activerecord (4.1.4) lib/active_record/connection_adapters/abstract/connection_pool.rb:351:in `block in checkout'
  /usr/local/rvm/rubies/ruby-2.0.0-p481/lib/ruby/2.0.0/monitor.rb:211:in `mon_synchronize'
  activerecord (4.1.4) lib/active_record/connection_adapters/abstract/connection_pool.rb:350:in `checkout'
  activerecord (4.1.4) lib/active_record/connection_adapters/abstract/connection_pool.rb:265:in `block in connection'
  /usr/local/rvm/rubies/ruby-2.0.0-p481/lib/ruby/2.0.0/monitor.rb:211:in `mon_synchronize'
  activerecord (4.1.4) lib/active_record/connection_adapters/abstract/connection_pool.rb:264:in `connection'
  activerecord (4.1.4) lib/active_record/connection_adapters/abstract/connection_pool.rb:541:in `retrieve_connection'
  activerecord (4.1.4) lib/active_record/connection_handling.rb:113:in `retrieve_connection'
  activerecord (4.1.4) lib/active_record/connection_handling.rb:87:in `connection'
  activerecord (4.1.4) lib/active_record/query_cache.rb:51:in `restore_query_cache_settings'
  activerecord (4.1.4) lib/active_record/query_cache.rb:43:in `rescue in call'
  activerecord (4.1.4) lib/active_record/query_cache.rb:32:in `call'
  activerecord (4.1.4) lib/active_record/connection_adapters/abstract/connection_pool.rb:621:in `call'
  actionpack (4.1.4) lib/action_dispatch/middleware/callbacks.rb:29:in `block in call'
  activesupport (4.1.4) lib/active_support/callbacks.rb:82:in `run_callbacks'
  actionpack (4.1.4) lib/action_dispatch/middleware/callbacks.rb:27:in `call'
  actionpack (4.1.4) lib/action_dispatch/middleware/remote_ip.rb:76:in `call'
  airbrake (4.1.0) lib/airbrake/rails/middleware.rb:13:in `call'
  actionpack (4.1.4) lib/action_dispatch/middleware/debug_exceptions.rb:17:in `call'
  actionpack (4.1.4) lib/action_dispatch/middleware/show_exceptions.rb:30:in `call'
  railties (4.1.4) lib/rails/rack/logger.rb:38:in `call_app'
  railties (4.1.4) lib/rails/rack/logger.rb:20:in `block in call'
  activesupport (4.1.4) lib/active_support/tagged_logging.rb:68:in `block in tagged'
  activesupport (4.1.4) lib/active_support/tagged_logging.rb:26:in `tagged'
  activesupport (4.1.4) lib/active_support/tagged_logging.rb:68:in `tagged'
  railties (4.1.4) lib/rails/rack/logger.rb:20:in `call'
  actionpack (4.1.4) lib/action_dispatch/middleware/request_id.rb:21:in `call'
  rack (1.5.2) lib/rack/methodoverride.rb:21:in `call'
  dragonfly (1.0.5) lib/dragonfly/cookie_monster.rb:9:in `call'
  rack (1.5.2) lib/rack/runtime.rb:17:in `call'
  activesupport (4.1.4) lib/active_support/cache/strategy/local_cache_middleware.rb:26:in `call'
  rack (1.5.2) lib/rack/sendfile.rb:112:in `call'
  airbrake (4.1.0) lib/airbrake/user_informer.rb:16:in `_call'
  airbrake (4.1.0) lib/airbrake/user_informer.rb:12:in `call'
  railties (4.1.4) lib/rails/engine.rb:514:in `call'
  railties (4.1.4) lib/rails/application.rb:144:in `call'
  railties (4.1.4) lib/rails/railtie.rb:194:in `public_send'
  railties (4.1.4) lib/rails/railtie.rb:194:in `method_missing'
  puma (2.9.0) lib/puma/configuration.rb:71:in `call'
  puma (2.9.0) lib/puma/server.rb:490:in `handle_request'
  puma (2.9.0) lib/puma/server.rb:361:in `process_client'
  puma (2.9.0) lib/puma/server.rb:254:in `block in run'
  puma (2.9.0) lib/puma/thread_pool.rb:92:in `call'
  puma (2.9.0) lib/puma/thread_pool.rb:92:in `block in spawn_thread'

инит Пума.D скрипт

#!/bin/sh
# Starts and stops puma
#


case "" in
        start)
                su myuser -c  "source /etc/profile && cd /var/www/myapp/current && rvm gemset use myapp && puma -d -e production -b unix:///var/www/myapp/myapp_app.sock -S /var/www/myapp/myapp_app.state"
        ;;

        stop)
                su myuser -c "source /etc/profile && cd /var/www/myapp/current &&  rvm gemset use myapp && RAILS_ENV=production bundle exec pumactl -S /var/www/myapp/myapp_app.state stop"
        ;;

        restart)
                 stop
                 start
        ;;

        *)
                echo "Usage:  {start|stop|restart}"
                exit 1
esac

редактировать

Я думаю, что я наконец сузил вопрос С тормоз камень и С помощью разработки способ current_user или user_signed_in? на application_controller.rb на before_action.

вот мой контроллер приложений:

class ApplicationController < ActionController::Base
  protect_from_forgery
  before_filter :authenticate_user!, :get_new_messages 

  # Gets the unread messages for the logged in user
  def get_new_messages
    @num_new_messages = 0 # Initially set to 0 so login page, etc works
    # If the user is signed in, fetch the new messages
    if user_signed_in? # I also tried !current_user.nil?
      @num_new_messages = Message.where(:created_for => current_user.id).where(:viewed => false).count
    end
  end

...
end

если я удалить if блок, у меня нет проблем. Поскольку я ввел этот код, в моем приложении, похоже, закончились соединения. Если я оставлю это if блок на месте и удалить airbrake gem, мое приложение, кажется, работает нормально только с 5 подключениями по умолчанию, установленными на моем пуле в my .

редактировать

я, наконец, выясните, что если я прокомментирую эту строку в моем config.exceptions_app = self.routes что я не получаю ошибку. Кажется, что пользовательские маршруты + devise в App controller before_action являются причиной. Я создал проблему и воспроизводимый проект на github.

https://github.com/plataformatec/devise/issues/3422 https://github.com/toymachiner62/devise-connection-failure/blob/master/config/environments/production.rb#L84

23
airbrake mysql nginx puma ruby-on-rails

3 ответов

У меня были те же проблемы, которые были вызваны слишком большим количеством открытых подключений к базе данных. Это может произойти, когда у вас есть запросы к базе данных вне контроллера (в модели, почтовом ящике, генераторе pdf, ...).

Я мог бы исправить это, обернув эти запросы в этот блок, который автоматически закрывает соединение.

ActiveRecord::Base.connection_pool.with_connection do
  # your code
end

поскольку Puma работает многопоточно, размер пула (как упоминал eabraham) также может быть ограничением. Попробуйте увеличить его (a маленький.)..

надеюсь, это поможет!

6

С помощью ребят из devise я думаю, что я, наконец, понял эту проблему. Казалось, что, используя пользовательские страницы ошибок с собственным контроллером, я не пропускал before_action get_new_messages. Поэтому очень простым решением было добавить:

skip_before_filter :get_new_messages

к моему пользовательскому контроллеру ошибок.

эта проблема подробно объясняет причину этого:https://github.com/plataformatec/devise/issues/3422

2

в конечном счете эта проблема все еще мучила меня в течение еще одного года или около того. Я, наконец, получил хорошее решение от работы с парнями puma.

обновите puma по крайней мере 2.15.x.

0