xuyue/OJ2 - OJ2 - Gitea: Git with a cup of tea

xuyue/OJ2

Fork 0

Commit Graph

Author	SHA1	Message	Date
yuetsh	ec1509c46d	perf(限流): 桶参数加 60 秒进程内缓存；Redis 连接补 error 监听 getBucketConfig 每次都查一次 `throttling` 配置项，而限流点在提交判题、AI 分析、流程图评分上（5 处调用）—— 判题高峰期等于每条提交多一趟数据库，只为读一个几乎从不变的值。上一代在 options/options.py 的 my_property 里也是带 TTL 缓存的，重写时漏掉了。缓存放进程内而不是 Redis：每站只有一个 api 进程服务读请求（oj-api 单容器、 Bun.serve 没有 reusePort、worker 只消费队列），进程内 Map 就等于全站缓存，放 Redis 只是多一趟网络加一次序列化。异常分支特意不写缓存 —— 数据库抖一下不该让接下来一整分钟全站都按默认参数限流。`throttling` 没有后台界面、只能直接改库，改完最多一分钟后生效。顺带给三条 Redis 连接都挂上 error 监听。ioredis 对没有监听者的 error 走 silentEmit：不崩进程，但把连接错误直接 console.error 到 stderr，绕开这里的日志，而且不说是哪条连接 —— 这个进程同时开着会话读写、两条队列、一条订阅，「哪条」正是要先知道的。 Co-Authored-By: Claude Opus 5 <noreply@anthropic.com> Claude-Session: https://claude.ai/code/session_01XvmqDsZNyUo9P3sFQtoWVB	2026-09-07 07:41:09 -06:00
yuetsh	2c4d56b29a	refactor(后端): 清掉 Django 遗留的死列与手工级联，角色字符串收成一份三条迁移，一次部署（0008/0009 含 DROP COLUMN，需要 OJ2_ALLOW_DESTRUCTIVE=1）： - 0008 删 IP 相关：比赛 IP 白名单（前端本来就没有输入框，detail.vue 无条件置空）、 submission.ip（前端从未显示过）、以及一次都没被调用过的 IP 限流桶。 judge_server.ip 是运维数据，保留。 - 0009 删九个只有 Django 时代写过、OJ2 一次都没读过的列：user 的 auth_token / open_api / open_api_appkey / session_keys，user_profile 的 blog / github / school / major / language。open_api 后台连开关都没有，那段「已经开着就不重置 appkey」的逻辑从上线起没进过 if。判据是「全仓零读取」而不是「看着没用」—— raw_password 同样刺眼却是在用的，别一起清掉。 - 0010 给 17 条外键补上删除动作，不再是 Django 留下的一律 NO ACTION。父行消失后必然无意义、且不构成学生留痕的走 CASCADE（中间表、题单/教程/成就的组成部分、 user_profile 与 user_stat）；需要人看见的继续拦着——submission.problem_id、以及 user 的绝大多数外键，删用户撞外键会被 handler 翻译成「请改为禁用账号」，这是有意的：全 CASCADE 会静默抹掉成就与进度，而 submission.user_id 压根没有外键，结果是一半删一半留。六处手工级联随之删掉。角色字符串收进 packages/contract/src/roles.ts：原先 ADMIN_ROLES / TEACHER_ROLES 在两个文件各抄一份、学生口径在四个文件各写一遍、前端 USER_TYPE 是第三份副本。 AuthUser.adminType 与 drizzle 的列都收窄成联合类型，二十多处 `=== "Super Admin"` 从此受编译器管着（$type 是纯 TS 层的，generate 确认不产生任何 SQL 变更）。顺带删掉 db/relations.ts —— drizzle-kit pull 的产物，全仓零引用。一处行为变化：后台用户列表传非法的 ?type= 回 400，不再静默返回空列表；界面上的下拉只有合法值，打不到这条。验证：tsc / vue-tsc / vite build / check:routes 全过；三条迁移在 dev 库执行，并逐条建 fixture 走 HTTP 接口验过删除连坐与拦截（题单五张子表连坐、user_badge 二级连坐、删有提交的题目仍 409、删有表情的用户仍 409）。 Co-Authored-By: Claude Opus 5 <noreply@anthropic.com> Claude-Session: https://claude.ai/code/session_01AeJoYc2t2d7cThVqMBYrBF	2026-09-02 22:57:45 -06:00
yuetsh	8237909d00	fix(阶段3): 提交可见性守卫补上匿名，详情脱敏，提交接口加限流 F3：`isRegularUser(user)` 对匿名用户（user 为 null）返回 false， `submission_list_show_all` 关闭时守卫整体短路 —— 匿名能看到全部提交，权限反而大于登录学生。实测开关关闭时匿名 total=23、登录学生 total=0。而关闭这个开关的典型场景正是考试。改为 `!isAdminRole(user)`（非管理员即受限），并删掉 isRegularUser（全仓只有这一处调用，留着就是下一个坑）。 F4：提交详情把 info（含每个测试点的 test_case 编号与 output_md5）与 ip 按「是不是自己的提交」下发。旧后端 submission/views/oj.py 把关的是角色： is_admin_role() 决定用 SubmissionModelSerializer 还是 SubmissionSafeModelSerializer(exclude=("info", "contest", "ip"))。改为仅管理员可见。 F6：旧后端 SubmissionAPI.throttling 的 TokenBucket 没搬过来。按旧参数重建（options/options.py:120 的 user 桶：capacity 20、fill_rate 0.03、 default_capacity 10，实际值仍以数据库 throttling 配置项为准），落在 redis 上并改用 Lua 脚本做成原子操作 —— 旧实现自己注明「不是线程安全的」，而限流要挡的正是并发突发。挂点位置与旧后端一致：比赛权限校验之后、取题目之前。 Co-Authored-By: Claude Opus 5 <noreply@anthropic.com>	2026-08-07 01:59:19 -06:00

Author

SHA1

Message

Date

yuetsh

ec1509c46d

perf(限流): 桶参数加 60 秒进程内缓存；Redis 连接补 error 监听

getBucketConfig 每次都查一次 `throttling` 配置项，而限流点在提交判题、AI 分析、
流程图评分上（5 处调用）—— 判题高峰期等于每条提交多一趟数据库，只为读一个几乎
从不变的值。上一代在 options/options.py 的 my_property 里也是带 TTL 缓存的，
重写时漏掉了。

缓存放进程内而不是 Redis：每站只有一个 api 进程服务读请求（oj-api 单容器、
Bun.serve 没有 reusePort、worker 只消费队列），进程内 Map 就等于全站缓存，
放 Redis 只是多一趟网络加一次序列化。异常分支特意不写缓存 —— 数据库抖一下不该
让接下来一整分钟全站都按默认参数限流。`throttling` 没有后台界面、只能直接改库，
改完最多一分钟后生效。

顺带给三条 Redis 连接都挂上 error 监听。ioredis 对没有监听者的 error 走
silentEmit：不崩进程，但把连接错误直接 console.error 到 stderr，绕开这里的日志，
而且不说是哪条连接 —— 这个进程同时开着会话读写、两条队列、一条订阅，「哪条」正是
要先知道的。

Co-Authored-By: Claude Opus 5 <noreply@anthropic.com>
Claude-Session: https://claude.ai/code/session_01XvmqDsZNyUo9P3sFQtoWVB

2026-09-07 07:41:09 -06:00

yuetsh

2c4d56b29a

refactor(后端): 清掉 Django 遗留的死列与手工级联，角色字符串收成一份

三条迁移，一次部署（0008/0009 含 DROP COLUMN，需要 OJ2_ALLOW_DESTRUCTIVE=1）：

- 0008 删 IP 相关：比赛 IP 白名单（前端本来就没有输入框，detail.vue 无条件置空）、
  submission.ip（前端从未显示过）、以及一次都没被调用过的 IP 限流桶。
  judge_server.ip 是运维数据，保留。
- 0009 删九个只有 Django 时代写过、OJ2 一次都没读过的列：user 的 auth_token /
  open_api / open_api_appkey / session_keys，user_profile 的 blog / github /
  school / major / language。open_api 后台连开关都没有，那段「已经开着就不重置
  appkey」的逻辑从上线起没进过 if。判据是「全仓零读取」而不是「看着没用」——
  raw_password 同样刺眼却是在用的，别一起清掉。
- 0010 给 17 条外键补上删除动作，不再是 Django 留下的一律 NO ACTION。父行消失后
  必然无意义、且不构成学生留痕的走 CASCADE（中间表、题单/教程/成就的组成部分、
  user_profile 与 user_stat）；需要人看见的继续拦着——submission.problem_id、
  以及 user 的绝大多数外键，删用户撞外键会被 handler 翻译成「请改为禁用账号」，
  这是有意的：全 CASCADE 会静默抹掉成就与进度，而 submission.user_id 压根没有
  外键，结果是一半删一半留。六处手工级联随之删掉。

角色字符串收进 packages/contract/src/roles.ts：原先 ADMIN_ROLES / TEACHER_ROLES
在两个文件各抄一份、学生口径在四个文件各写一遍、前端 USER_TYPE 是第三份副本。
AuthUser.adminType 与 drizzle 的列都收窄成联合类型，二十多处 `=== "Super Admin"`
从此受编译器管着（$type 是纯 TS 层的，generate 确认不产生任何 SQL 变更）。

顺带删掉 db/relations.ts —— drizzle-kit pull 的产物，全仓零引用。

一处行为变化：后台用户列表传非法的 ?type= 回 400，不再静默返回空列表；界面上的
下拉只有合法值，打不到这条。

验证：tsc / vue-tsc / vite build / check:routes 全过；三条迁移在 dev 库执行，
并逐条建 fixture 走 HTTP 接口验过删除连坐与拦截（题单五张子表连坐、user_badge
二级连坐、删有提交的题目仍 409、删有表情的用户仍 409）。

Co-Authored-By: Claude Opus 5 <noreply@anthropic.com>
Claude-Session: https://claude.ai/code/session_01AeJoYc2t2d7cThVqMBYrBF

2026-09-02 22:57:45 -06:00

yuetsh

8237909d00

fix(阶段3): 提交可见性守卫补上匿名，详情脱敏，提交接口加限流

F3：`isRegularUser(user)` 对匿名用户（user 为 null）返回 false，
`submission_list_show_all` 关闭时守卫整体短路 —— 匿名能看到全部提交，
权限反而大于登录学生。实测开关关闭时匿名 total=23、登录学生 total=0。
而关闭这个开关的典型场景正是考试。改为 `!isAdminRole(user)`（非管理员即受限），
并删掉 isRegularUser（全仓只有这一处调用，留着就是下一个坑）。

F4：提交详情把 info（含每个测试点的 test_case 编号与 output_md5）与 ip
按「是不是自己的提交」下发。旧后端 submission/views/oj.py 把关的是角色：
is_admin_role() 决定用 SubmissionModelSerializer 还是
SubmissionSafeModelSerializer(exclude=("info", "contest", "ip"))。改为仅管理员可见。

F6：旧后端 SubmissionAPI.throttling 的 TokenBucket 没搬过来。
按旧参数重建（options/options.py:120 的 user 桶：capacity 20、fill_rate 0.03、
default_capacity 10，实际值仍以数据库 throttling 配置项为准），
落在 redis 上并改用 Lua 脚本做成原子操作 —— 旧实现自己注明「不是线程安全的」，
而限流要挡的正是并发突发。挂点位置与旧后端一致：比赛权限校验之后、取题目之前。

Co-Authored-By: Claude Opus 5 <noreply@anthropic.com>

2026-08-07 01:59:19 -06:00

3 Commits