Skip to content

Add ScaleDB view export task endpoint and configuration - #931

Open
SailingBoat762 wants to merge 1 commit into
masterfrom
feat/scaledb-export-view-to-excel
Open

SailingBoat762 wants to merge 1 commit into
masterfrom
feat/scaledb-export-view-to-excel

Conversation

@SailingBoat762

Copy link
Copy Markdown
Contributor

No description provided.

@seafile-dev seafile-dev left a comment

Copy link
Copy Markdown

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

结论:请求修改。

阻断问题:不同任务按相同用户/表/视图/文件名共用结果路径,后一次导出会覆盖前一次文件,导致旧 task ID 下载另一批数据,见行内评论。

警告:数字显式零位小数被误判为自动精度,普通数字、百分比、货币及 average rollup 均受影响,见行内评论。

设计依据:已读取任务中的《ScaleDB 视图导出 Excel 实现说明》及流程图,核对独立队列、只读查询、分批导出、原子状态、心跳、可重复下载及列类型格式;整体流程与配套 Web 接口一致,但结果文件未按任务隔离,列精度约束也未完全满足。

验证:真实 export_job 生成 XLSX,再经配套 Web 下载处理方法读取,已复现旧任务仍显示 1 行、下载文件却变成新任务 2 行;另有权限拒绝、心跳超时和列顺序控制。34 项分页/类型探针中 30 项通过、4 项失败均属零位精度同一根因;文本防公式、大整数文本保存、已覆盖日期/lookup/rollup 与截断边界控制通过。查询传输使用 loopback HTTP/SQLite,应用配置及 Web RPC/ORM/framework 边界隔离,不代表真实 SeaDB/部署验收。

当前 head 的 GitHub Actions build 成功(job 132356487853);该任务执行 SQL/webhook 测试,并未覆盖新增 ScaleDB 导出。建议把任务隔离、重试下载及数值格式回归加入实际 CI 入口。部署文档还应明确 Events 的 SEADB_SERVER_URL、导出行/单元格上限、共享目录及成功任务/文件保留策略。

result_key = sha256(result_identity.encode('utf-8')).hexdigest()
result_directory = directory.parent / 'results'
result_directory.mkdir(exist_ok=True, mode=0o750)
os.replace(temporary, result_directory / f'{result_key}.xlsx')

Copy link
Copy Markdown

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

[严重] 不同导出任务会覆盖同一结果文件

影响:同一用户重复导出同一表/视图且名称未变时,result_key 不包含 task ID,os.replace 会覆盖前一次导出的文件。已用真实 XLSX 和配套下载处理方法复现:任务 A 状态仍为成功且记录 1 行,任务 B 导出 2 行后,再通过 A 的 task ID 下载得到的却是 B 的 2 行内容,重复下载/并发导出可能静默拿错数据。

修复建议:结果路径绑定唯一 task ID,保持已成功任务的文件不可变;若需要缓存最新结果,单独维护索引,不能覆盖旧任务仍引用的文件。

return text_cell(sheet, value)
if not math.isfinite(value):
return text_cell(sheet, value)
number_format = parse_number_format(data, value, decimal_formatter=_format_decimal)

Copy link
Copy Markdown

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

[警告] 导出未遵循显式零位小数配置

影响:合法配置 enable_precision=true、precision=0 时,数值 1.25 的真实 XLSX 格式仍为 0.00,而不是 0;百分比、货币及继承格式的 average rollup 同样受影响。复用的 parse_number_format 用 not precision 将 0 当成未配置,虽然该判断原已存在,但新增 ScaleDB 导出因此不满足按列格式输出的设计,相同目标的 lookup 却正确输出整数文本。

修复建议:按 enable_precision 和 precision 是否缺失判断自动精度,保留 0 的语义并生成整数格式;同时补充普通数值、百分比、货币和 rollup 的零位精度测试。

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

2 participants