请阐述 Azkaban 中实现任务高可用调度的具体机制，并说明有哪些措施能有效防止任务在执行过程中丢失或遗漏？

回答思路

1. 【回答框架 1】高可用调度的核心是避免单点故障。Azkaban 的 Web Server 通过设置多个实例并依赖 MySQL 存储调度状态，配合 exec server 的分布式执行来实现。常见的部署模式包括双 Web Server 和多个 Executor，通过数据库锁或 ZooKeeper 协调来确保同一时刻只有一个调度器在运行，从而避免重复调度。
2. 【回答框架 2】任务不丢失的机制主要依赖持久化和状态管理。调度状态、执行日志和作业依赖均存储在 MySQL 中，Web Server 重启后可以从数据库恢复调度状态。对于正在运行的任务，Azkaban 通过 executor 的心跳机制与 web server 保持通信，若 executor 宕机，web server 会将其状态标记为失效并对任务进行重新调度。
3. 【回答框架 3】此外，Azkaban 提供了 execute-as-user 和 job 重试机制，在任务失败时可根据配置的重试次数进行自动重试，减少因临时故障导致的任务丢失。对于周期性调度，Azkaban 使用 Quartz 驱动，调度记录持久化在数据库中，从而保证在服务重启后不会丢失后续的调度计划。
4. 【关键点 1】Azkaban 通过 Web Server 与 Executor 分离，支持多实例部署，结合 MySQL 持久化实现高可用。
5. 【关键点 2】使用数据库记录调度状态，配合 ZooKeeper 或数据库锁避免脑裂，保证单调度器。
6. 【关键点 3】Executor 心跳机制和任务状态上报，使 Web Server 能感知故障并重新调度，防止任务丢失。
7. 【关键点 4】作业失败重试机制和 Quartz 持久化调度计划，进一步提升任务执行的可靠性。
8. 【关键点 5】任务执行日志和状态存储在 MySQL，支持故障恢复和审计。
9. 【易错点 1】仅依赖重试机制并不能绝对保证任务不丢失，仍需考虑幂等性设计。
10. 【易错点 2】数据库锁或 ZooKeeper 协调若配置不当，可能出现双调度或漏调度。
11. 【易错点 3】Executor 故障时的任务重新调度可能带来重复执行，需结合业务幂等。