Skip to content

v0.5.0

Choose a tag to compare

@huangbogeng huangbogeng released this 15 Oct 11:17
5e51314

AsterStore v0.5.0

轻量数据集目录事务:行情与 factor 共用自然 Hive 路径,增量更新只处理本次变化的文件。

  • 支持批量新增、替换和删除,发布元数据与文件变更一起恢复。
  • 保留最近一次成功发布的撤销材料,支持一次回退与可重复故障恢复。
  • 清理只删除失效事务材料,不扫描或删除正式历史数据。
  • 移除全量 manifest、不可变对象、全局文件归属、可达性 GC 及旧 API。
  • 修复活动记录删除未同步时清理提前释放恢复材料,以及并发初始化覆盖登记信息的问题。

不兼容变更

磁盘协议为 format 4,不提供旧 API、旧协议兼容或自动迁移。部署需空目录初始化并重新生产数据。

安装、回退和恢复期间,调用方必须暂停该数据集读取并等待在途读取结束;不再提供并发发布时的不可变文件快照。

验证

42 项测试通过,覆盖发布、回退、故障注入、真实进程退出、清理及初始化竞态。Python 3.11/3.12、三组 Polars 版本、wheel/sdist 重建及隔离安装通过。100、1,000、10,000 个历史分区更新五天时,管理操作次数保持不变。