我正在尝试使用 Docker 将带有 Celery、Celery-beat、Redis、Postgresql、Nginx、Gunicorn 的 Django 部署到 Heroku

Question

我正在尝试将我的应用程序部署到 Heroku，我正在使用 amazon s3 bucket 进行静态处理，但静态图标未显示在网站上，我需要帮助设置一个 worker 来处理 celery 和 celery beat 以在 Heroku 上工作.

这是我的 Dockerfile：

# pull the official base image
FROM python:3.8.3-alpine as builder

# set work directory
WORKDIR /usr/src/app

# set environment variables
ENV PYTHONDONTWRITEBYTECODE 1
ENV PYTHONUNBUFFERED 1

# install psycopg2 dependencies
RUN apk update \
    && apk add postgresql-dev gcc python3-dev musl-dev
RUN apk add zlib libjpeg-turbo-dev libpng-dev \
    freetype-dev lcms2-dev libwebp-dev \
    harfbuzz-dev fribidi-dev tcl-dev tk-dev 
# lint
RUN pip install --upgrade pip
RUN pip install flake8
COPY . .

# install dependencies
COPY ./requirements.txt .
RUN pip wheel --no-cache-dir --no-deps --wheel-dir /usr/src/app/wheels -r requirements.txt

# pull official base image
FROM python:3.8.3-alpine

# create directory for the app user
RUN mkdir -p /home/app

# create the app user
RUN addgroup -S app && adduser -S app -G app

# create the appropriate directories
ENV HOME=/home/app
ENV APP_HOME=/home/app/web
RUN mkdir $APP_HOME
RUN mkdir $APP_HOME/static
RUN mkdir $APP_HOME/media
WORKDIR $APP_HOME


# install dependencies
RUN apk update && apk add libpq 
RUN apk add zlib libjpeg-turbo-dev libpng-dev \
    freetype-dev lcms2-dev libwebp-dev \
    harfbuzz-dev fribidi-dev tcl-dev tk-dev 
COPY --from=builder /usr/src/app/wheels /wheels
COPY --from=builder /usr/src/app/requirements.txt .
RUN pip install --no-cache /wheels/*

# copy entrypoint.sh
COPY ./entrypoint.sh $APP_HOME

# copy project
COPY . $APP_HOME

# chown all the files to the app user
RUN chown -R app:app $APP_HOME

# change to the app user
USER app

# run entrypoint.prod.sh
ENTRYPOINT ["/home/app/web/entrypoint.prod.sh"]

CMD gunicorn my_proj.wsgi:application --bind 0.0.0.0:$PORT ```

This is my docker-compose file 

```version: "3.8"

services:
    web:
        build: 
            context: .
            dockerfile : Dockerfile
        container_name: django
        command: gunicorn my_proj.wsgi:application --bind 0.0.0.0:8000
        volumes:
            - static_volume:/home/app/web/static
            - media_volume:/home/app/web/media
        expose:
            - 8000
        depends_on:
            - pgdb
            - redis
    celery-worker:
        build: .
        command: celery -A my_proj worker -l INFO
        volumes:
            - .:/usr/src/app
        environment:
            - DEBUG=1
            - DJANGO_ALLOWED_HOSTS=['localhost', '127.0.0.1', 'app_name.herokuapp.com']
            - CELERY_BROKER=redis://redis:6379/0
            - CELERY_BACKEND=redis://redis:6379/0
        depends_on:
            - web
            - redis
    celery-beat:
        build: .
        command: celery -A my_proj beat -l INFO --scheduler django_celery_beat.schedulers:DatabaseScheduler
        volumes:
            - .:/usr/src/app
        environment:
            - DEBUG=1
            - DJANGO_ALLOWED_HOSTS=['localhost', '127.0.0.1', 'app_name.herokuapp.com']
            - CELERY_BROKER=redis://redis:6379/0
            - CELERY_BACKEND=redis://redis:6379/0
        depends_on:
            - web
            - redis
            - celery-worker
    pgdb:
        image: postgres
        container_name: pgdb
        environment:
            - POSTGRES_DB=databasename
            - POSTGRES_USER=postgres
            - POSTGRES_PASSWORD=password
        volumes:
            - pgdata:/var/lib/postgresql/data/
    redis:
        image: "redis:alpine"
    nginx:
        build: ./nginx
        volumes:
            - static_volume:/home/app/web/static
            - media_volume:/home/app/web/media
        ports:
            - 1337:80
        depends_on:
            - web
volumes:
    pgdata:
    static_volume:
    media_volume: ```

以下是我在 Heroku 上部署的步骤

heroku container:login
docker build -t registry.heroku.com/app name/web .
docker push registry.heroku.com/app name/web
heroku container:release -a app name web

此外，我运行下面这个它正在启动，但我希望它能独立运行。

heroku run celery -A my_proj worker -l INFO -a <app name>
heroku run celery -A my_proj beat -l INFO --scheduler django_celery_beat.schedulers:DatabaseScheduler -a <app name>

问题：

我如何设置芹菜作为工人工作。
如何同时为 celery-beat 设置一个 worker

我需要帮助，在开发中，我通常使用 docker-compose up -d --build，并且所有图像都是一起构建和工作的。感觉只有Django容器刚刚好用，其他的都没有建好。

Answer 1

尝试在 AWS S3 存储桶中设置 CORS 权限以使字体正常工作。

[
 {
    "AllowedHeaders": [
        "Authorization"
    ],
    "AllowedMethods": [
        "GET",
        "PUT",
        "POST",
        "DELETE"
    ],
    "AllowedOrigins": [
        "*"
    ],
    "ExposeHeaders": [],
    "MaxAgeSeconds": 3000
 }
]

Answer 2

好吧，这就是我所做的对我有用的事情，所以对于任何像我这样的新开发人员来说都是在使用 Django 网络框架。

我在 Heroku 上部署应用程序时使用的最佳方法是使用 Heroku 构建清单。我在项目的根目录中创建了一个 heroku.yml 文件。 #This是创建web和worker的Build Manifest。

build:
  docker:
    web: Dockerfile
    worker: Dockerfile
run:
  web: gunicorn my_proj.wsgi:application --bind 0.0.0.0:$PORT
  worker: celery -A my_proj worker -l INFO --beat -l INFO --scheduler django_celery_beat.schedulers:DatabaseScheduler
release:
  image: web
  command:
    - python manage.py collectstatic --noinput

对于数据库，我使用了 Heroku Postgres 附加组件，对于 Redis 消息代理，我使用了 Heroku Redis。

我没有使用 Nginx 来提供静态文件，而是使用了 Whitenoise，它很容易设置，但是当你关闭调试时会出现讨厌的错误。这里有很多帮助可以帮助您解决这个问题。

最好在根目录和 settings.py 文件中创建一个 static 和 staticfiles 文件夹添加这些，对我有用

INSTALLED_APP = [
..., 
'whitenoise.runserver_nostatic',
#BEFORE THE 'django.contrib.staticfiles',
]
STATIC_URL = "/static/"
STATIC_ROOT = os.path.join(BASE_DIR, "staticfiles")
STATICFILES_STORAGE = "whitenoise.storage.CompressedManifestStaticFilesStorage"
STATICFILES_DIRS = [
    os.path.join(BASE_DIR, "static"),
]
WHITENOISE_MANIFEST_STRICT = False

这就是我学习和解决问题的方式。

任何更好的实现我总是开放学习。

我正在尝试使用 Docker 将带有 Celery、Celery-beat、Redis、Postgresql、Nginx、Gunicorn 的 Django 部署到 Heroku

I am trying to deploy Deploy a Django with Celery, Celery-beat, Redis, Postgresql, Nginx, Gunicorn with Docker to Heroku

django

heroku

celery

celerybeat

docker

以下是我在 Heroku 上部署的步骤