devEops架构深度拆解Django REST FrameworkChannelsCelery协作之道【免费下载链接】DevOps:smiley:DevOps System - :heart:devEops:heart: - 开发自运维平台 - 运维体系解决方案适用于多个应用环境的资产组织以及运维脚本的适配运行。项目地址: https://gitcode.com/gh_mirrors/devops84/DevOpsdevEops开发自运维平台是一套以资产、应用信息为中心的运维体系解决方案它的后端整体架构基于 Django REST Framework、Channels 与 Celery 三驾马车协作驱动前者提供资产与权限的 REST API后两者分别承载 WebSocket 实时推送与异步/定时任务。本文从源码角度深度拆解 devEops 架构帮助新手与运维开发者快速理解这三者如何在一个 Django 项目中各司其职、无缝协作。devEops 是什么一站式开发自运维平台的三大技术支柱 devEops 致力于 IT 资源信息的整合与自动化运维对接 VMware、阿里云自动拉取资产入库基于 Ansible 定义元操作与任务通过 WebSocket 推送工单执行结果并以 Django 自带 auth 体系完成资产与权限的关联。整个后端项目由一个核心配置目录deveops/与 20 余个业务 Appapps/组成每个业务模块都遵循models → serializers → api → permission → tasks → urls的标准化结构。在 deveops/settings.py 的INSTALLED_APPS中rest_framework、rest_framework_jwt、channels、django_celery_beat被同时启用这正是三大组件协作的起点。devEops运维平台仪表盘界面 Django架构整体架构总览Django 2.0 如何撑起多应用运维体系 ️devEops 采用了典型的 Django App 拆分架构每个 App 对应一个运维领域例如业务 App职责核心文件manager资产/主机/应用组管理apps/manager/models.pyops元操作与任务定义apps/ops/api/meta.pywork工单系统apps/work/api/code.pyyodns域名管理与解析刷新apps/yodns/tasks.pyauthority用户、权限、密钥、跳板机apps/authority/api/user.pydashboard数据统计与图表apps/dashboard/api/dashboard.py所有入口统一汇总到 deveops/urls.py配置参数集中在 deveops/conf.py数据库、Redis、LDAP、VMware、阿里云 AccessKey 等均可一键填写。详细的模块使用说明可以查阅 docs/guide.md 与 docs/manager/host.md。Django REST Framework资产与权限 API 的构建之道 devEops 后端全面采用前后端分离DRF 是唯一的数据出口。在 deveops/settings.py 中REST_FRAMEWORK 配置了django_filters作为默认过滤后端并指定 JWT 作为全局认证方案——所有 API 默认通过rest_framework_jwt.authentication.JSONWebTokenAuthentication鉴权配合自定义的WebTokenAuthentication完成用户身份校验。以 apps/ops/api/mission.py 为例任务列表 API 使用generics.ListAPIViewPageNumberPagination分页并通过get_queryset按用户所属应用组过滤数据实现运维人员只能看到自己管理的应用组任务的权限隔离。每个 App 下还独立维护permission/目录如 apps/ops/permission/mission.py将权限校验颗粒化到每一次视图调用。devEops资产管理界面 REST API 主机列表关键设计API 操作全量留痕 ️devEops 在timelineApp 中通过装饰器decorator_api见 apps/timeline/decorator.py记录每一次重要 API 操作形成操作时间线方便审计与排障——这也是自运维平台可追溯的重要体现。ChannelsWebSocket 实时推送工单执行结果 ⚡自动化运维最核心的体验是任务执行过程实时可见devEops 用 Django Channels 实现了这一能力。在 deveops/routing.py 中使用ProtocolTypeRouter注册了 WebSocket 协议路由并叠加AuthMiddlewareStack做认证具体路由收敛在 apps/ops/urls/socket_urls.pypath(ansible/uuid:work/, consumers.MetaConsumer)而 apps/ops/consumers.py 中的MetaConsumer继承AsyncWebsocketConsumer其协作流程堪称经典建立连接时以工单 UUID 为组名执行group_add将该连接加入专属频道组立即调用ops_runner.delay(self.work)触发 Celery 异步任务Ansible 执行结果通过group_send广播回组内所有连接再由chat_message推送到浏览器。devEops工单执行WebSocket实时返回执行结果这套Channels 建组 Celery 分发的模型让多个运维人员可以同时订阅同一工单的实时输出无需轮询接口极大提升了运维操作的交互体验。Celery异步与定时任务的双重调度 devEops 中所有耗时操作都交给 Celery 处理。在 deveops/celery.py 中创建 Celery 实例并开启autodiscover_tasks()自动发现各 App 的tasks.py消息中间件broker配置在 deveops/celeryconfig.py指向 Redis并关闭 UTC、统一使用Asia/Shanghai时区。异步任务执行工单 ops_runnerops_runner是工单执行的核心异步任务负责从 CMDB 导出主机列表与参数注入 Ansible API 执行并把结果写入 Channel Layer 供 WebSocket 推送——这正是上文协作闭环的最后一环。定时任务资产同步与巡检自动化 devEops 大量使用periodic_task驱动自动化典型示例apps/manager/tasks.pyvmware2cmdb定时调用 VMware SDK 拉取虚拟机入库aliyun2cmdb定时同步阿里云 ECS 到 CMDBapps/yodns/tasks.pydns_flush定时用 dnspython 刷新域名的内外网解析记录apps/dashboard/tasks.py定时统计资产分布并生成每周静态报告。devEops域名管理界面 定时解析刷新所有定时任务的执行周期统一收敛在 deveops/crontab.py例如主机 SSH 健康检查每 10 分钟一次、磁盘巡检每 15 分钟一次、DNS 刷新每 20 分钟一次粒度精细、一目了然。三大组件如何协作完成一次自动化运维 结合源码一次典型的运维操作完整链路如下前端发起用户在工单系统创建并提交执行请求DRF 接收请求经 apps/work/api/ 的 REST API 鉴权、校验后入库WebSocket 建连浏览器连接ansible/uuid/MetaConsumer将连接加入工单频道组Celery 执行ops_runner.delay()异步执行 Ansible Playbook结果回流执行输出通过 Channel Layergroup_send广播chat_message实时推送到页面。devEops元操作与任务定义界面从资产录入Celery 定时同步到工单执行DRF 触发 Channels 推送 Celery 执行Django REST Framework、Channels、Celery 三者形成了一条完整、低耦合的自动化运维流水线。部署与配置要点 启动 devEops 只需三步在 deveops/conf.py 填好 MySQL、Redis、VMware、阿里云等连接信息执行python manage.py migrate建表随后分别启动 Django 服务、Celery Worker 与 Channel Layer 即可。开发环境可直接python manage.py runserver生产环境建议参考项目内的 uwsgi.ini 与 worker.sh 部署。整个项目基于 MIT 协议开源若想深入源码学习可克隆 https://gitcode.com/gh_mirrors/devops84/DevOps 后从deveops/settings.py开始阅读。总结 devEops 架构的巧妙之处在于让 Django REST Framework、Channels、Celery 各司其职又彼此咬合DRF 管数据与权限Channels 管实时通道Celery 管异步与定时。对于希望构建自有运维平台、或想学习 Django 生态三大组件协同开发的开发者而言这套架构都是极具参考价值的范本。【免费下载链接】DevOps:smiley:DevOps System - :heart:devEops:heart: - 开发自运维平台 - 运维体系解决方案适用于多个应用环境的资产组织以及运维脚本的适配运行。项目地址: https://gitcode.com/gh_mirrors/devops84/DevOps创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考