为 Kuscia 增加集成测试：复杂任务场景

[Candicepan]

此 ISSUE 为 隐语开源共建计划（SecretFlow Open Source Contribution Plan，简称 SF OSCP）Phase 4 任务 ISSUE，欢迎社区开发者参与共建～

• 认领前，辛苦确认是否完成报名～
• 更多任务，可查看 「OSCP Phase4 Season of Dev」Project

This ISSUE is one of the tasks of the SecretFlow Open Source Contribution Plan (referred to as SF OSCP) Phase 4. Welcome to join us in building it together!

• Before claiming a task, please make sure you have signed up.
• For more tasks, you can check the "OSCP Phase4 Season of Dev" Project.

任务介绍

• 任务名称：为 Kuscia 增加集成测试：复杂任务场景
• 技术方向：Kuscia/集成测试
• 任务难度：进阶🌟🌟
• 任务期望完成时间：4周
• 任务 Reviewer：@YanZhuangz

详细要求

为了确保 Kuscia 的健壮性，我们需要尽可能集成测试各种复杂情况下的 Kuscia Job 都能表现出正确的行为。下面是已经想到的场景，你也可以增加更多的场景。

• 功能性：
  • 对于新创建的节点，KusciaJob 应该能够正确的和其进行交互并完成任务。
  • 删除并重新创建某个节点的 DomainRoute，KusciaJob应该能够正确的和其进行交互并完成任务。
  • 对于导致单方失败的 KusciaJob，应该正确的进入到 Failed 状态，并释放其持有的资源。导致单方失败的 KusciaJob 可以通过类似删除某方的数据文件等形式构造。
  • 增加覆盖 e2e 的场景，包含 Kuscia 支持的运行时 （RunK）。
  • 你可以添加你想到的其它场景。
  • 将该测试集集成到 Kuscia 集成测试脚本逻辑 。
• 正确性：基于最新的镜像，参考 Makefile 运行集成测试的所有测试集，无失败用例。
• 代码规范：https://github.com/uber-go/guide/blob/master/style.md
• 提交说明：
  • 关联该 ISSUE 并先准备详细的设计方案文档，请在 ISSUE 下评论提交方案，经过我们确认后进行开发。
  • 功能开发完成后，关联该 ISSUE 并提交代码至 https://github.com/secretflow/kuscia

能力要求

• 对 Kuscia 有一定的了解
• 对 Kuscia Job 流程有一定了解
• 对 Shell 脚本有一定了解
• 对 Kubernetes 有一定了解
• 熟悉 Kuscia 的集成部署，了解 Kuscia 的运行时

操作说明

• Kuscia 入门，快速开始：https://www.secretflow.org.cn/zh-CN/docs/kuscia/v0.14.0b0/getting_started/quickstart_cn
• 了解 Kuscia Job： https://www.secretflow.org.cn/zh-CN/docs/kuscia/v0.14.0b0/getting_started/run_secretflow_cn
• Kuscia Job：https://www.secretflow.org.cn/zh-CN/docs/kuscia/v0.14.0b0/reference/concepts/kusciajob_cn
• Kuscia Task：https://www.secretflow.org.cn/zh-CN/docs/kuscia/v0.14.0b0/reference/concepts/kusciatask_cn
• Agent：https://www.secretflow.org.cn/zh-CN/docs/kuscia/v0.14.0b0/reference/architecture_cn#agent
• K3s e2e：https://github.com/k3s-io/k3s/tree/master/tests/e2e

[github-actions]

Stale issue message. Please comment to remove stale tag. Otherwise this issue will be closed soon.