如何解决Django + Celery + Apache mod_wsgi + Postgres + RabbitMQ应用程序用于多个客户端
我有一个使用Celery,RabbitMQ和Apache mod_wsgi的Django应用程序。当前全部在一台服务器上。每个客户端都有自己的URL挂载,例如:
每个客户端都有自己的数据库和项目目录,其中Django设置带有local_setting.py。
我正在使用主管来为每个客户管理Celery Worker + Celery Beat。
随着我获得更多客户,因此维护变得更加耗时。
我已经开始使用Docker尝试简化部署,并可能跨多个主机进行扩展。
虽然设置Docker Compose可以为一个客户端运行一组服务非常容易,但我仍在尝试为多个客户端找出易于管理的最佳方法,例如快速设置安装在主URL下的新客户端。
我认为应该像现在一样共享Postgres数据库实例以容纳每个客户数据库。并拥有一个共享的NGIX实例来处理HTTP端。对于每个客户,请使用Kubernetes Pod:
- 独角兽来处理Django
- 芹菜节拍
- 芹菜工人
- 用于静态文件的轻量级HTTP服务器。
所以问题是,这是一个好方法还是有更好的方法来处理和处理此问题?
我还想知道是否应该遵循为每个客户构建映像的路线,因为这样可能更易于管理?
欢迎任何建议。
解决方法
有三种处理客户的方法:
- 隔离方法:单独的数据库。每个租户都有自己的数据库。
- 半隔离方法:共享数据库,独立模式。所有租户都有一个数据库,每个租户只有一个架构。
- 共享方式:共享数据库,共享架构。所有租户共享相同的数据库和架构。有一个主租户表,其中所有其他表都有指向的外键。
django-tenents软件包使用第二种方法,并具有客户端的子域,例如client1.example.com,client2.example.com等。
我在第3个中也使用了django-tenant,为我创建的每个模型添加了Company
模型外键。
添加Company
必须在每个模型中实现,并且如果您使用的是基于类的视图,则应使用中间件或mixins进行处理。
我的建议是为此保持一个代码库和一台服务器运行(或同一Django应用程序的多台服务器,而无需基于客户端进行任何自定义)。主要原因是维护更容易。您不想进行多次更改以向多个客户端提供功能。
由于您已经有Django应用程序,因此我认为最好利用该代码以最小的代码更改来适应上述方法。这意味着,您需要某种方式来处理连接到多个数据库的多个客户端。我建议使用中间件和database router。像这样:(基于此snippet的代码)。
subtitle3
然后将它们添加到import threading
request_cfg = threading.local()
class RouterMiddleware (object):
def process_view( self,request,view_func,args,kwargs ):
if 'client' in kwargs:
request_cfg.client = kwargs['client']
request.client = client
# Here,we are adding client info with request object.
# It will make the implementation bit easier because
# then you can access client information anywhere in the view/template.
def process_response( self,response ):
if hasattr( request_cfg,'client' ):
del request_cfg.client
return response
class DatabaseRouter (object):
def _default_db( self ):
from django.conf import settings
if hasattr( request_cfg,'client' ) and request_cfg.client in settings.DATABASES:
return request_cfg.client
else:
return None
def db_for_read( self,model,**hints ):
return self._default_db()
def db_for_write( self,**hints ):
return self._default_db()
:
settings.py
最后更新DATABASES = {
'default': {
'NAME': 'user','ENGINE': 'django.db.backends.postgresql','USER': 'postgres_user','PASSWORD': 's3krit'
},'client1': {
'NAME': 'client1','client2': {
'NAME': 'client2','USER': '_user','PASSWORD': 'priv4te'
}
}
DATABASE_ROUTERS = [
'path.to.DatabaseRouter',]
MIDDLEWARE = [
# middlewares
'path.to.RouterMiddleware'
]
:
urls.py
此方法的优势是,您无需为新客户端配置任何内容,只需要做的就是在设置中添加新数据库并按照{{ 3}}。无需配置反向代理服务器或其他任何东西。
现在,在处理芹菜任务时,您可以提供将用于运行查询的数据库(对documentation的引用)。这是一个示例:
urlpatterns = [
path('<str:client>/admin/',admin.site.urls),path('<str:client>/',include('client_app.urls')),# and so on
]
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。