version: "3.9" services: app: containername: app image: app:1.0 build: context: .…
- User
version: "3.9" services: app: container_name: app image: app:1.0 build: context: . dockerfile: local.Dockerfile ports: - "5000:5000" volumes: - ./app/:/app/ - ./migrations:/migrations/ depends_on: - db restart: always
db: container_name: db image: postgres:14 environment: - POSTGRES_DB=db - POSTGRES_USER=admin - POSTGRES_PASSWORD=admin ports: - "7777:5432" volumes: - postgres:/var/lib/postgresql/data - ./migrations/:/migrations/
pgadmin: container_name: pgadmin4 image: dpage/pgadmin4 restart: always environment: PGADMIN_DEFAULT_EMAIL: <PRESIDIO_ANONYMIZED_EMAIL_ADDRESS> PGADMIN_DEFAULT_PASSWORD: 1234 ports: - "127.0.0.1:5052:80" volumes: - pgadmin4:/var/lib/pgadmin
s3: container_name: s3 image: minio/minio volumes: - ./data:/data environment: - MINIO_ACCESS_KEY=access-key - MINIO_SECRET_KEY=secret-key ports: - "9000:9000"
rabbitmq: container_name: rabbitmq image: rabbitmq:3-management ports: - "5672:5672" - "15672:15672" volumes: - rabbitmq-data:/var/lib/rabbitmq
video_upload_consumer: container_name: video_upload_consumer image: app:1.0 build: context: . dockerfile: base.Dockerfile depends_on: - app
volumes: postgres: pgadmin4: rabbitmq-data:
Вот мой докер компоуз файл, как мне сделать наследование, чтобы local.Dockerfile сделал то же самое, что и в base.Dockerfile?
- Assistant
Вам нужно использовать директиву
FROMвlocal.Dockerfile, чтобы наследоваться от образа, указанного вbase.Dockerfile. Затем вы можете добавить любые необходимые инструкции, чтобы настроить ваше локальное окружение.Вот пример того, как может выглядеть
local.Dockerfileдля наследования отbase.Dockerfile:FROM app:1.0 # Добавьте дополнительные инструкции для настройки вашего локального окружения, если это необходимоЗатем вы можете обновить ваш
docker-compose.ymlфайл, чтобы использоватьlocal.Dockerfileкакbuildконтекст для службыapp. Вот обновленныйdocker-compose.ymlфайл:version: "3.9" services: app: container_name: app build: context: . dockerfile: local.Dockerfile ports: - "5000:5000" volumes: - ./app/:/app/ - ./migrations:/migrations/ depends_on: - db restart: always # ... # Остальные службы volumes: # ...После этого вы можете запустить
docker-compose buildдля создания нового образаappна основеlocal.Dockerfile, а затем использовать его при запуске вашего приложения сdocker-compose up -d. - User
pika.exceptions.ChannelClosedByBroker: (406, "PRECONDITION_FAILED - inequivalent arg 'durable' for queue 'upload_queue' in vhost '/': received 'true' but current is 'false'") Что за ошибка?
- Assistant
Ошибка, которую вы упоминаете -
pika.exceptions.ChannelClosedByBroker: (406, "PRECONDITION_FAILED - inequivalent arg 'durable' for queue 'upload_queue' in vhost '/': received 'true' but current is 'false'")- указывает на несовместимость опции "durable" для очереди "upload_queue" между текущей и предыдущей настройками очереди.Опция "durable" определяет, должна ли очередь сохраняться при перезапуске брокера сообщений. Если очередь создается со значением "durable=true", она будет сохраняться даже после перезапуска брокера. Если значение "durable=false", очередь будет удалена при перезапуске брокера.
Ошибка возникает, когда конфигурация, переданная в коде, для создания/обновления очереди, не соответствует текущей конфигурации очереди на брокере сообщений.
Чтобы исправить эту ошибку, вам нужно убедиться, что значения опции "durable" соответствуют текущей конфигурации очереди на брокере сообщений. Возможно, вам потребуется выполнить одно из следующих действий:
-
Если очередь уже существует, проверьте текущую конфигурацию для очереди "upload_queue" на брокере сообщений и убедитесь, что значение опции "durable" совпадает с тем, что вы используете в вашем коде.
-
Если вы создаете очередь в коде, убедитесь, что вы правильно задаете значение опции "durable", согласно вашим ожиданиям. Если вы хотите, чтобы очередь оставалась после перезапуска брокера, установите "durable=true".
-
Если вы изменяете опции очереди в коде для уже существующей очереди, убедитесь, что вы правильно устанавливаете значения опции "durable" и "exclusive" в соответствии с требуемыми настройками вашего приложения.
Обратите внимание, что изменения в очереди могут потребовать удаления и повторного создания очереди, чтобы применить новые настройки.
-
- User
Не понимаю, вот мой паблишер: import pika
QUEUE_UPLOAD_VIDEO = "upload_queue"
class RabbitMQPublisher: """Basic publisher for rabbitmq.""" def init(self, queue, host="rabbitmq"): """ Sets parameters for rabbitmq publisher and sets connection. Args: queue (str): queue for sending messages host (str): current server host
Returns: None """ self.queue = queue self.connection = pika.BlockingConnection( pika.ConnectionParameters(host=host)) self.channel = self.connection.channel() self.channel.queue_declare(queue=queue) @staticmethod def send_message(message): """ Sends message to rabbitmq. Args: message (dict): message to be sent Returns: None """ connection = pika.BlockingConnection( pika.ConnectionParameters(host="rabbitmq")) channel = connection.channel() channel.queue_declare(queue=QUEUE_UPLOAD_VIDEO, durable=True) channel.basic_publish( exchange="", routing_key=QUEUE_UPLOAD_VIDEO, body=str(message), properties=pika.BasicProperties( delivery_mode=2 )) print(f"Sent {message}") def close_connection(self): """ Close connection with rabbitmq service. Returns: None """ if self.connection is not None: self.connection.close() - Assistant
Вам необходимо убедиться, что опция "durable" совпадает с текущей конфигурацией очереди на брокере сообщений.
В вашем коде у вас есть два места, где вы объявляете очередь:
- В инициализаторе класса
RabbitMQPublisher:
self.channel.queue_declare(queue=queue)- В методе
send_message:
channel.queue_declare(queue=QUEUE_UPLOAD_VIDEO, durable=True)В обоих случаях вы устанавливаете опцию "durable" в значение
True. Ошибка, которую вы получилиPRECONDITION_FAILED - inequivalent arg 'durable' for queue 'upload_queue' in vhost '/': received 'true' but current is 'false', указывает на то, что текущая конфигурация очереди на брокере указываетdurable=false.Чтобы исправить эту ошибку, вам нужно выбрать правильное значение для опции "durable". Вы можете выполнить одно из следующих действий:
-
Измените текущую конфигурацию очереди на брокере так, чтобы установить "durable=true".
-
Измените конфигурацию в вашем коде, чтобы установить
durable=False. Однако, имейте в виду, что если вы делаете это, очередь будет удаляться при перезапуске брокера сообщений.
Выберите опцию, которая соответствует вашим требованиям по сохранности очереди при перезапуске брокера сообщений и установите соответствующее значение для опции "durable" в вашем коде.
- В инициализаторе класса
- User
video_upload_consumer: container_name: video_upload_consumer build: context: . dockerfile: base.Dockerfile depends_on: - app command: CMD ["python", "manage.py", "video_upload_consumer", "run"] Rfr ghfdbkmyj rjvfyle yfgbcfnm?
- Assistant
В вашем файле
docker-compose.ymlдля службыvideo_upload_consumerу вас есть полеcommand, в котором указана команда запуска контейнера. Однако, ошибка возникает из-за неправильного синтаксиса команды в полеcommand.Вместо использования
CMDдля определения команды в полеcommand, вам нужно просто указать команду в виде списка аргументов.Вот исправленный
docker-compose.ymlфайл для службыvideo_upload_consumer, где команда правильно определена:version: "3.9" services: # Другие службы video_upload_consumer: container_name: video_upload_consumer build: context: . dockerfile: base.Dockerfile depends_on: - app command: ["python", "manage.py", "video_upload_consumer", "run"]Обратите внимание, что команды являются списком строк. Первый элемент списка - исполняемый файл или команда, а последующие элементы - аргументы команды.
Теперь при запуске службы
video_upload_consumerв контейнере будет выполнена командаpython manage.py video_upload_consumer run. - User
2023-08-20T12:40:02.116241054Z Traceback (most recent call last): 2023-08-20T12:40:02.116318096Z File "//manage.py", line 10, in 2023-08-20T12:40:02.116334513Z app.cli() 2023-08-20T12:40:02.116340513Z File "/usr/local/lib/python3.9/site-packages/click/core.py", line 1157, in call 2023-08-20T12:40:02.116348763Z return self.main(*args, **kwargs) 2023-08-20T12:40:02.116353596Z File "/usr/local/lib/python3.9/site-packages/click/core.py", line 1078, in main 2023-08-20T12:40:02.116358388Z rv = self.invoke(ctx) 2023-08-20T12:40:02.116363013Z File "/usr/local/lib/python3.9/site-packages/click/core.py", line 1688, in invoke 2023-08-20T12:40:02.116866054Z return _process_result(sub_ctx.command.invoke(sub_ctx)) 2023-08-20T12:40:02.116897804Z File "/usr/local/lib/python3.9/site-packages/click/core.py", line 1688, in invoke 2023-08-20T12:40:02.116908888Z return _process_result(sub_ctx.command.invoke(sub_ctx)) 2023-08-20T12:40:02.116915554Z File "/usr/local/lib/python3.9/site-packages/click/core.py", line 1434, in invoke 2023-08-20T12:40:02.116921388Z return ctx.invoke(self.callback, **ctx.params) 2023-08-20T12:40:02.116926096Z File "/usr/local/lib/python3.9/site-packages/click/core.py", line 783, in invoke 2023-08-20T12:40:02.116949138Z return __callback(*args, **kwargs) 2023-08-20T12:40:02.117120304Z File "/usr/local/lib/python3.9/site-packages/click/decorators.py", line 33, in new_func 2023-08-20T12:40:02.117131721Z return f(get_current_context(), *args, **kwargs) 2023-08-20T12:40:02.117136554Z File "/usr/local/lib/python3.9/site-packages/flask/cli.py", line 357, in decorator 2023-08-20T12:40:02.117340679Z return __ctx.invoke(f, *args, **kwargs) 2023-08-20T12:40:02.117354596Z File "/usr/local/lib/python3.9/site-packages/click/core.py", line 783, in invoke 2023-08-20T12:40:02.117782471Z return __callback(*args, **kwargs) 2023-08-20T12:40:02.120917721Z File "/app/management/run/video_upload_consumer.py", line 23, in run 2023-08-20T12:40:02.120935304Z consumer = RabbitMQConsumer(QUEUE_UPLOAD_VIDEO) 2023-08-20T12:40:02.120938429Z File "/libs/transport/consumer/rabbitmq.py", line 21, in init 2023-08-20T12:40:02.120940471Z self.connection = pika.BlockingConnection( 2023-08-20T12:40:02.120942388Z File "/usr/local/lib/python3.9/site-packages/pika/adapters/blocking_connection.py", line 360, in init 2023-08-20T12:40:02.120944388Z self._impl = self._create_connection(parameters, _impl_class) 2023-08-20T12:40:02.120946388Z File "/usr/local/lib/python3.9/site-packages/pika/adapters/blocking_connection.py", line 451, in _create_connection 2023-08-20T12:40:02.120948346Z raise self._reap_last_connection_workflow_error(error) 2023-08-20T12:40:02.120950179Z pika.exceptions.AMQPConnectionError
В логах консюмера вот такая ошибка, в чем дело?
- Assistant
Ошибка, которую вы видите, указывает на возникновение
pika.exceptions.AMQPConnectionError. Эта ошибка возникает, когда установление соединения с RabbitMQ не удалось.Возможные причины возникновения ошибки могут включать:
-
Неправильные параметры подключения: Убедитесь, что вы указали правильные параметры подключения к RabbitMQ, такие как хост, порт, имя пользователя и пароль.
-
Проблемы с сетью: Проверьте, что ваш контейнер может подключаться к RabbitMQ-серверу по сети. Убедитесь, что сетевое подключение между контейнерами настроено правильно и сеть доступна.
-
RabbitMQ-сервер недоступен: Убедитесь, что RabbitMQ-сервер запущен и доступен по указанному хосту и порту.
-
Ошибка настроек брокера сообщений: Проверьте конфигурацию RabbitMQ-сервера, чтобы убедиться, что вся необходимая настройка корректна и соответствует вашему коду. Может потребоваться
-