yixiong/tencent-im-util
3
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity
14 Commits 1 Branch 0 Tags
fdbb7724fa101018feb0d9aabe250b2ae577d191
Commit Graph
7 Commits
Author SHA1 Message Date
连龙刚andClaude fdbb7724fa feat(t17): 数据同步——只读拉取群组/群成员/群消息到本地表，按租户查看 
主体（T17 数据同步，/admin/sync 三个独立按钮）：
- 同步群组：get_appid_group_list 全量 Next 分页 + 逐群 get_group_info → group_mapping
- 同步群成员(→用户)：遍历该租户群取 MemberList → user_mapping（腾讯无全量用户API，靠群成员反推）
- 同步群消息：遍历该租户群 getGroupMsg + IsFinished 滚动全量 → im_message(source=SYNC)
- DB: group_mapping 加 name/owner_account/member_count/last_synced_at；user_mapping 加 nick/last_synced_at
  （init.sql 建表 + ADD COLUMN IF NOT EXISTS 老库升级补丁，幂等）
- TencentImClient: 新增 getAppidGroupList(limit,next[,sdkAppId,secretKey])
- 已知限制：C2C单聊无全量会话API；超大群成员需换 get_group_member_info 分页

附带收尾此前未提交的改动：
- 回调字段名修正(FromAccount→From_Account 等腾讯标准字段) + pickMsgRandom/Time/Type 兼容字段差异
- 租户识别重构：前缀经 TenantService.getByPrefixCode 反查 tenantId（主键雪花化与前缀解耦）
- FreeMarker java.time ?string 坑修复(usage/queue Controller 预格式化) + 消息记录"全部"状态修复
- 新增项目 CLAUDE.md + .claude/memory 基建(gitignore 含密钥记忆，不进 git)

Co-Authored-By: Claude <noreply@anthropic.com>
 2026-07-10 08:40:46 +08:00
yixiongandClaude f401e8d065 feat(t14-v1234): 消息迁移增强——C2C全量分页+群消息迁移+429限速重试+回溯天数可配 
V1: migrateMessages 7天窗滚动 + Complete分页拉全量历史
V2: migrateGroupMessages + getGroupMsgAs/importGroupMsg + /migrate/groupmsg
V3: importMsg/importGroupMsg 捕获429重试 + app.yml imutil.migrate(msgLookbackDays/importMaxRetry/importRetryMs)

Co-Authored-By: Claude <noreply@anthropic.com>
 2026-07-09 12:57:54 +08:00
yixiongandClaude 460a31b52f feat(t14-s345): 群迁移 + 消息迁移 + 关系链迁移 
T14 S3/S4/S5 阶段：
- S3 群迁移：getAppidGroups/getGroupInfo（老密钥拉）+ createGroup/addGroupMember（主密钥导入）+ migrateGroups
- S4 消息迁移：importMsg/importGroupMsg + migrateMessages（会话清单+断点续传，v1 最近7天/100条）
- S5 关系链：importFriend/friendGetList（sns 系列）+ migrateRoster
- 后台 /admin/migrate/{groups,messages,roster} 触发 + migrate.ftl 三表单

S1/S2 完整联调通过；S3/S4/S5 代码完成+通路验证（腾讯返业务响应），
核心导入待真实老应用（10003 群组/60008 消息/60002 关系链）。

Co-Authored-By: Claude <noreply@anthropic.com>
 2026-07-09 12:12:26 +08:00
yixiongandClaude 7b1385e160 feat(t14-s1s2): 数据迁移基础设施 + 用户迁移 
T14 数据迁移工具 S1/S2 阶段：

S1 基础设施：
- source_app/migrate_task 建表 + 实体 + Mapper
- TencentImClient 双密钥 callApiAs（老应用拉取，不走主应用限流，审计记 migrate）
- 后台「老应用配置」页（CRUD + 测试连通）

S2 用户迁移：
- batchImport（multiaccount_import，每批≤100）
- MigrateService.migrateUsers（前缀转换+导入+映射+校验，幂等）
- 后台「数据迁移」页（上传清单文件/粘贴列表 + 任务记录）

联调通过：3用户清单→加sa前缀→腾讯导入OK→user_mapping→校验3/3/3。

Co-Authored-By: Claude <noreply@anthropic.com>
 2026-07-09 11:12:25 +08:00
yixiongandClaude b4c6652f66 fix(review): 代码审查 6 项修复（M2/M3/m1/m2/m3/m5） 
集中修复 T8/T9/T11/T15 已实现代码的审查问题：
- M2 令牌桶 Lua 改用 Redis TIME（消除多节点时钟偏斜）
- M3 after 跨租户标记复查授权 + 无授权告警兜底
- m1 before 审计 MsgSeq/MsgRandom null 防御
- m2 HealthService 加 forceDown 开关，实测 DOWN 真返 503
- m3 countByStatus 排除 done（WHERE status IN (0,1,3)）
- m5 配额查询异常不缓存（下次重试）
- 附带 app.yml console charset GBK→UTF-8
M1 限流审计/事务收窄暂缓。

Co-Authored-By: Claude <noreply@anthropic.com>
 2026-07-09 09:52:13 +08:00
yixiongandClaude 43f7d30e46 feat(t9): 按租户令牌桶限流（出站腾讯API配额保护，对齐设计3.2） 
- RateLimiter(新): Redis+Lua 原子令牌桶，租户桶(quota_im_qps)+全局桶(globalImQps)，
  任一超限抛 BizException(429)；Redis 异常 fail-open 放行
- RedisService: +eval(Lua) 通用脚本执行（令牌桶复合操作需原子）
- TencentImClient.callApi: 开头 checkApiLimit，resolveTenantQps 查 quota_im_qps(Caffeine 60s)
- 联调：sa quota=2，8 并发→2 放行+6 限流，被拒不调腾讯（api_call_log 仅 2 条）

Co-Authored-By: Claude <noreply@anthropic.com>
 2026-07-09 08:39:43 +08:00
yixiongandClaude d22fdcfaad feat: 初始化腾讯IM分发工具骨架，含回调分发链路与历史消息补拉 
- 应用骨架: Solon + MyBatis-Plus + PostgreSQL + Redis + Sa-Token
- 核心链路: 回调网关 → 消息落库(幂等) → 分发队列(FOR UPDATE SKIP LOCKED) → worker消费/重试/死信
- 多租户隔离: 前缀法账号映射, 所有业务表带 tenant_id
- 管理后台: FreeMarker 渲染, 租户/授权/队列/用量管理页面
- 历史消息补拉: 水位线驱动, getRoamMsg/getGroupMsg 增量拉取, 兜底回调丢失
- msg_key 统一算法(回调/补拉共享, 跨路径去重)

Co-Authored-By: Claude <noreply@anthropic.com>
 2026-07-08 20:28:32 +08:00