openEuler 23.03 RISC-V 测试报告交付物清单

编译器测试

• AnghaBench
• csmith
• dejagnu
• jotai
• yarpgen

功能测试

• mugen BaseOS

内核测试

• LTP
• trinity

性能测试

• fio
• libMicro
• lmbench
• netperf
• stream
• unixbench

长稳测试

• LTP Stress

QEMU 兼容性测试

• QEMU 8.0 +

文档测试

• 对文档准确性进行验证

包括在 CI 门禁中的测试

• 系统集成
• 软件包管理

已取消的测试

• 安全测试
  • oss-fuzz
  • CVE 漏洞扫描
  • 安全编译选项
  • 敏感信息扫描
  • 交付件病毒扫描
• 北向兼容性
• 南向兼容性
  • 硬件开发板

五轮测试策略

Round 1

• 功能测试
  • mugen BaseOS
  • LTP
  • 保证 BaseOS 合入的基础上提供新特性验证
• 编译器测试
  • AnghaBench
  • csmith
  • dejagnu
  • jotai
  • yarpgen
• 内核测试
  • trinity
• 性能测试
  • fio
  • libMicro
  • lmbench
  • netperf
  • stream
  • unixbench

Round 2

• 功能测试
  • mugen BaseOS
  • 保证 BaseOS 合入的基础上提供新特性验证
• 长稳测试
  • LTP Stress（7*24）

Round 3

• 功能测试
  • mugen BaseOS
  • 保证 BaseOS 合入的基础上提供新特性验证
• 性能测试
  • fio
  • libMicro
  • lmbench
  • netperf
  • stream
  • unixbench
• 长稳测试
  • LTP Stress
• 文档测试
  • 对已提供的安装文档和部分操作文档进行验证
• 问题单回归

Round 4

• 功能测试
  • mugen BaseOS
  • 保证 BaseOS 合入的基础上提供新特性验证
• 问题单回归
• 长稳测试
  • LTP Stress
• 性能测试
  • fio
  • libMicro
  • lmbench
  • netperf
  • stream
  • unixbench
• 文档测试
  • 对已提供的安装文档和部分操作文档进行验证

Round 5

• 功能测试
  • mugen BaseOS
  • 保证 BaseOS 合入的基础上提供新特性验证
• 问题单全量回归
• 文档测试
  • 对已提供的安装文档和部分操作文档进行验证

入口标准

• 上个阶段无阻塞问题遗留。
• 转测版本的冒烟无阻塞性问题。

出口标准

• 策略规划的测试活动涉及测试用例 100% 执行完毕。
• 发布特性/新需求/性能基线等满足版本规划目标。
• 版本无阻塞问题遗留，其它严重问题要有相应规避措施或说明。