书闪笔记
书闪文章
IT
Python教程
Python任务队列 - 异步任务调度与管理
存储 - MinIO - 对象存储服务,文件任务处理支持
1
任务队列 - Celery - 分布式任务队列框架,支持异步任务处理
228人读过
2
任务队列 - RQ - 基于Redis的轻量级任务队列库
254人读过
3
任务队列 - Huey - 简单易用,支持多后端存储的任务队列
224人读过
4
任务队列 - Dramatiq - 高性能异步任务处理库,兼容Redis/RabbitMQ
288人读过
5
任务队列 - TaskTiger - 基于Redis的任务队列,支持定时任务
230人读过
6
调度器 - APScheduler - 轻量级定时任务调度库,支持多种触发器
242人读过
7
调度器 - schedule - 人性化API设计的时间任务调度工具
209人读过
8
调度器 - Prefect - 现代工作流调度框架,支持任务编排
232人读过
9
调度器 - Airflow - 复杂工作流调度平台,可视化任务依赖
252人读过
10
分布式 - Dask - 并行计算库,支持分布式任务调度
207人读过
11
分布式 - PySpark - Spark的Python接口,大数据任务调度
218人读过
12
分布式 - Dask-Distributed - Dask的分布式任务调度扩展
221人读过
13
分布式 - Pulsar - 事件驱动框架,支持分布式Actor模型
210人读过
14
消息队列 - RabbitMQ - AMQP协议消息中间件,支撑任务队列
206人读过
15
消息队列 - Kafka-Python - Apache Kafka的Python客户端库
168人读过
16
消息队列 - Redis - 内存数据库,常用作任务队列后端
227人读过
17
消息队列 - ZeroMQ - 高性能异步消息传输库
219人读过
18
云服务 - AWS Lambda - 无服务器计算服务,事件驱动任务
248人读过
19
云服务 - Google Cloud Tasks - 云端全托管任务队列服务
195人读过
20
云服务 - Azure Functions - 微软云无服务器任务处理平台
205人读过
21
监控 - Flower - Celery任务实时监控和管理Web界面
241人读过
22
监控 - Celery Monitor - 轻量级Celery任务监控工具
248人读过
23
监控 - Prometheus - 系统监控和任务指标采集框架
228人读过
24
监控 - Grafana - 可视化监控平台,支持任务数据展示
203人读过
25
测试 - pytest-celery - Celery任务的pytest插件及测试工具
181人读过
26
测试 - fakeredis - 模拟Redis服务,用于任务队列测试
216人读过
27
测试 - mocket - 模拟网络请求,测试异步任务依赖
192人读过
28
工作流 - Luigi - 批量任务依赖管理框架,支持管道
188人读过
29
工作流 - Apache Airflow - 编程式工作流编排与调度平台
179人读过
30
工作流 - Prefect - 新一代数据工作流编排引擎
228人读过
31
工作流 - Dagster - 数据应用开发框架,强调任务资产
231人读过
32
重试 - tenacity - 通用任务重试库,多种策略组合
238人读过
33
重试 - backoff - 函数装饰器实现任务指数退避重试
195人读过
34
重试 - retrying - 简单易用的任务重试装饰器库
218人读过
35
并发 - concurrent.futures - 线程/进程池实现并行任务执行
201人读过
36
并发 - gevent - 协程库,通过greenlet实现高并发
202人读过
37
并发 - eventlet - 网络库,协程支持高并发任务处理
213人读过
38
序列化 - pickle - Python对象序列化,用于任务参数传递
250人读过
39
序列化 - msgpack - 高效二进制序列化,加速任务通信
237人读过
40
序列化 - JSON - 通用数据格式,跨平台任务数据交换
248人读过
41
日志 - structlog - 结构化日志记录,辅助任务追踪
200人读过
42
日志 - loguru - 简化日志配置,增强任务调试体验
219人读过
43
依赖管理 - Poetry - 项目管理工具,控制任务环境依赖
210人读过
44
依赖管理 - Pipenv - 虚拟环境与依赖管理工具
266人读过
45
部署 - Docker - 容器化打包任务执行环境
236人读过
46
部署 - Kubernetes - 容器编排,分布式任务集群管理
252人读过
47
部署 - Supervisor - 进程监控工具,保障任务稳定运行
183人读过
48
自动化 - Invoke - 本地和远程任务自动化执行工具
248人读过
49
自动化 - Fabric - SSH任务自动化部署库
204人读过
50
调试 - pdb - Python调试器,任务断点排查
241人读过
51
调试 - ipdb - 增强交互式调试工具,支持异步任务
235人读过
52
网络 - Twisted - 事件驱动网络引擎,支持异步协议
241人读过
53
网络 - aioftp - 异步FTP客户端,文件传输任务支持
221人读过
54
存储 - MinIO - 对象存储服务,文件任务处理支持
224人读过
55
性能 - uvloop - 替代asyncio事件循环,提升异步性能
197人读过
56
性能 - Cython - 静态编译加速任务密集型代码
224人读过
57
模板 - Mako - 高性能模板库,任务文本快速生成
199人读过
58
安全 - cryptography - 加密任务数据传输与存储
212人读过
59
安全 - pyOpenSSL - SSL/TLS工具库,安全通信保障
235人读过
60
测试数据 - Faker - 生成仿真测试数据,用于任务模拟
229人读过
61
测试数据 - FactoryBoy - 创建测试模型实例,辅助任务
196人读过
62
错误追踪 - Sentry - 实时错误监控,捕捉任务异常
189人读过
63
错误追踪 - Rollbar - 云端错误跟踪服务,任务异常上报
189人读过
64
地理任务 - GeoDjango - 处理地理空间数据任务
226人读过
65
数学任务 - SciPy - 科学计算工具集,复杂任务处理
221人读过
66
数据管道 - Bonobo - 轻量级数据ETL任务处理库
193人读过
67
数据管道 - Mara - 数据集成管道框架,支持复杂流程
248人读过
68
图像处理 - Pillow - 图像操作库,批量图片处理任务
220人读过
69
图像处理 - OpenCV - 计算机视觉任务处理库
201人读过
70
音频处理 - pydub - 音频文件处理任务简化库
196人读过
71
视频处理 - moviepy - 视频剪辑自动化任务库
190人读过
72
爬虫 - Celery-Scrapy - 整合Celery的分布式爬虫方案
193人读过
73
浏览器自动化 - Playwright - 现代浏览器自动化任务工具
239人读过
74
邮件 - django-celery-email - 异步发送邮件的集成方案
201人读过
75
邮件 - aiosmtplib - 异步SMTP客户端,邮件任务处理
249人读过
76
缓存 - django-cacheops - Django ORM缓存,加速任务
224人读过
77
缓存 - aiocache - 异步缓存库,支持多种后端存储
203人读过
78
通知 - pushbullet.py - 推送通知服务,任务结果提醒
207人读过
79
通知 - slack-sdk - Slack消息集成,任务状态同步
164人读过
80
时间处理 - pendulum - 更易用的时间处理库,任务调度
245人读过
81
时间处理 - arrow - 日期时间库,简化任务时间操作
230人读过
82
CLI工具 - Click - 命令行工具开发,任务脚本构建
203人读过
83
CLI工具 - Typer - 基于类型提示的CLI任务库
245人读过
84
配置管理 - python-dotenv - 环境变量管理,任务配置分离
227人读过
85
配置管理 - Dynaconf - 多环境配置管理,任务灵活部署
209人读过
86
代码质量 - flake8 - 代码规范检查,保障任务代码质量
207人读过
87
代码质量 - Black - 自动化代码格式化,统一任务代码风格
231人读过
88
文档生成 - Sphinx - 项目文档生成,任务使用说明维护
196人读过
89
文档生成 - MkDocs - 静态站点生成,任务文档展示
201人读过
存储 - MinIO - 对象存储服务,文件任务处理支持
精彩教程
Flask - 扩展 - flask-redis - Redis
Vue.js教程
路由 - @app.route("/")
Flask - 扩展 - redis - 直接使用
pandas运算df.agg()聚合运算
配置 - setting.py
Flask - 扩展 - jinja2 - 模版处理信息 - {{}}
python - 介绍
扩展 - 定时任务 - 多种部署方式对比
pandas转换pd.melt()多列转多行
pandas运算df["A"].value_counts()按a列数量统计
HTML5教程
pandas导入数据pd.read_table(fname)读定分隔符文本
Docker教程
pandas运算 选择后.sum() 求和
Lua教程
Flask - 扩展 - SQLAlchemy - 查转换DataFrame
pandas DataFrame信息df.describe()描述
pandas选择数据df.nlargest()最大最小时间
pandas内容sort_value()排序
基础 - Pycharm 创建一个Django项目
python入门基础教程
pandas合并数据df1.append(df2) df2加到df1的尾
表模型 - django.db.models - 原生SQL
Flask - 用代码创建数据库
Flask - 扩展 - mysql
Flask - 内置 - session - 客户端缓存
pandas导入数据pd.read_sql(query, conobject)读sql
pandas重要概念inplace=True原df修改
pandas判断if df.empty:Data Frame 是否为空
粤ICP备19057273号-3