[Feature]: 希望增加lobechat聊天记录导入功能

[xmengnet]

Affected area

Frontend / UI

Problem or use case

如题，希望增加lobechat聊天记录导入功能，lobechat 太臃肿了，DEEIX-AI 做替代品很好，就是现在导入只支持Open WebUI

Proposed behavior

增加导入 lobehub 的JSON数据功能，应该也好实现

Alternatives considered

No response

Compatibility, deployment, or migration impact

No response

Documentation or API contract impact

No response

Pre-submit checklist

• I searched existing issues and pull requests.
• This request is focused on one feature or improvement.
• I described user-facing, API, configuration, or deployment impact where relevant.

[AngleNaris]

我正好也和你一样。。 我直接让AI给我从数据库里迁移了一下

[xmengnet]

我正好也和你一样。。 我直接让AI给我从数据库里迁移了一下

@AngleNaris 是直接让ai写程序迁移还是怎么搞，有没有源码

[xmengnet]

让ai给我写了个，执行前建议让ai检查下：

lobechat_to_deeix_migrator.py

LobeChat → DEEIX-Chat 聊天记录迁移工具

一个通用、幂等、可配置的迁移脚本，把 LobeChat 的聊天记录迁移到 DEEIX-Chat。
所有连接串与凭据均通过环境变量传入，不写死在代码里，方便分享与复用。

数据映射

LobeChat	DEEIX-Chat
users	identity_users（按邮箱匹配目标用户）
sessions(助理)	chat_conversation_projects（项目）
topics(话题)	chat_conversations（会话）
messages(消息)	chat_messages（消息）
messages_files	chat_attachments + file_objects（可选，需 R2/S3）

迁移时会保留：时间戳、消息父子引用、assistant 推理内容、token 用量。
角色映射：user→user、assistant→assistant、tool→tool、task→system。

环境要求

• Python 3.8+
• psycopg2-binary
• boto3（仅迁移附件时需要）
• 两个 PostgreSQL 数据库均可访问（LobeChat 库、DEEIX-Chat 库）
• 若迁移附件：R2 / S3 兼容存储，且 LobeChat 与 DEEIX 共用同一存储桶（文件通过服务器端复制迁移）

安装依赖（建议虚拟环境）

python3 -m venv .venv
source .venv/bin/activate
pip install psycopg2-binary        # 必须
pip install boto3                  # 仅迁移附件时需要

配置环境变量

# 数据库连接串（必需）
export LOBECHAT_DB_DSN='postgresql://user:pass@host:5432/lobechat'
export DEEIX_DB_DSN='postgresql://deeix_chat:pass@host:5432/deeix_chat'

# 用户映射（必需）
export LOBE_USER_EMAIL='me@example.com'   # LobeChat 源用户邮箱
export DEEIX_USER_ID=1                    # DEEIX 目标用户 id
# 或只填 DEEIX_USER_EMAIL，让脚本按邮箱自动匹配目标用户：
# export DEEIX_USER_EMAIL='me@example.com'

# 附件用 R2/S3（仅 --with-attachments 时需要）
export S3_ENDPOINT='https://...r2.cloudflarestorage.com'
export S3_REGION=auto
export S3_BUCKET='lobechat'
export S3_ACCESS_KEY='...'
export S3_SECRET_KEY='...'
export S3_PREFIX='deeix'                  # DEEIX 在存储桶中的前缀

注意：DEEIX 目标用户若邮箱字段为空（如手动创建的用户），请务必用 DEEIX_USER_ID 显式指定。

使用

# 1) 安全预演（不写入任何数据）
python3 lobechat_to_deeix_migrator.py --dry-run

# 2) 正式迁移（会话 + 消息 + 助理→项目）
python3 lobechat_to_deeix_migrator.py

# 3) 连附件一起迁移（需配置 S3_*）
python3 lobechat_to_deeix_migrator.py --with-attachments

# 4) 跳过助理→项目分组
python3 lobechat_to_deeix_migrator.py --skip-projects

安全与幂等

• 幂等：脚本在 DEEIX 库创建 lobechat_migration 跟踪表记录已迁移的话题，重复运行会自动跳过；项目按「用户+名称」复用，不会重复创建；附件按消息去重。

• 可回滚：正式迁移前建议对 DEEIX 库做一次备份：

  pg_dump -U deeix_chat -d deeix_chat -Fc --exclude-schema=tiger --exclude-schema=tiger_data --exclude-schema=topology \
      -f deeix_before_migration.dump

• 先预演后落地：始终先跑 --dry-run 确认输出符合预期。

迁移后验证

-- 在 DEEIX 库执行，对比迁移前后数量
SELECT (SELECT count(*) FROM chat_conversations) AS conversations,
       (SELECT count(*) FROM chat_messages) AS messages,
       (SELECT count(*) FROM chat_conversation_projects) AS projects,
       (SELECT count(*) FROM chat_attachments) AS attachments;

常见问题

• 找不到源用户：确认 LOBE_USER_EMAIL 与 LobeChat users.email 完全一致（不区分大小写）。
• 解析不到目标用户：DEEIX 用户邮箱可能为空，请改用 DEEIX_USER_ID。
• 提示 S3 未配置：迁移附件需要在命令里加 --with-attachments 并配置全部 S3_* 环境变量。
• 附件文件较大：使用 S3 服务器端复制，不经过本地中转，速度快且不占本地磁盘。

许可证

MIT