首席 AWS 数据架构师

临时
伦敦
发布于3周前
可协商英镑/年

首席 AWS 数据架构师

我们的客户是一家全球领先的IT服务供应商，现招聘一名AWS首席数据架构师，工作地点 位于英国伦敦的客户办公室。

这是一个混合型职位——您可以在英国远程办公，每周到伦敦办公室工作两天。

这是一份为期6个月以上的临时合同，需尽快开始工作。

日费率：具有市场竞争力的费率

作为 AWS 数据实践架构师，您将通过将 ISO 20022 事件导入基于 AWS 的湖仓架构，负责设计、构建并持续优化我们的支付数据平台。您将确保一流的数据治理、可观测性和成本优化，同时全面负责客户体验（CX）、支付（Payments）和首席产品官（CPO）领域的数据产品全生命周期。这包括管理产品待办事项列表、服务水平协议（SLA）和数据合同，以及交付运维手册、定义服务水平目标（SLO），并编制季度成本与质量报告。

主要职责

数据产品（规划中）：渠道运营数据仓库（约30天的高性能层）和渠道分析数据湖（7年以上）。提供状态和报表API，并明确服务水平协议（SLA）。
平台架构：S3/Glue/Athena/Iceberg Lakehouse，Redshift 用于商业智能（BI）和运维（Ops）。QuickSight 用于产品所有者（PO）和运维仪表盘。Lambda/Step Functions 用于流处理编排。
流处理与数据摄取：Kafka（K4/K5/Confluent）和 AWS MSK/Kinesis；连接器/CDC 至数据仓库/数据湖。分区、数据保留、回放、幂等性。EventBridge 用于 AWS 原生事件路由。
事件契约：Avro/Protobuf、模式注册表、兼容性规则、版本策略。
现状 → 目标状态：库存 API/文件/SWIFT 数据源及存储（Aurora Postgres、Kafka）。定义迁移阶段，制定切换运行手册。
治理与质量：数据即产品的所有权、数据血统、访问控制、质量规则、保留期限。
可观测性与 FinOps：使用 Grafana/Prometheus/CloudWatch 监控 TPS、成功率、延迟以及每 100 万条事件的成本。运行手册 + 可操作的警报。
规模与弹性：每日数千万笔支付，多可用区/多区域架构，务实的RPO/RTO。
安全性：数据分类、KMS 加密、必要时的令牌化、最小权限 IAM、不可变审计。
实践开发：Python/Scala/SQL；Spark/Glue；Step Functions/Lambda；基础设施即代码（Terraform）；持续集成/持续交付（GitLab/Jenkins）；自动化测试。

关键要求

核心技能：

流处理与电子设计自动化（EDA）：Kafka（Confluent）和 AWS MSK/Kinesis；Kinesis Firehose；排序、重放、至少一次精确语义；EventBridge 用于事件路由和过滤。
模式管理：Avro/Protobuf + 模式注册表（兼容性、主题策略、演进）。
AWS 数据堆栈：S3/Glue/Athena、Redshift、Step Functions、Lambda；Kinesis 与 S3→Glue 流式处理管道；Glue Streaming；DLQ 模式。
支付与ISO 20022：PAIN/PACS/CAMT、生命周期建模、重建、SWIFT/文件通道知识。
治理：海量数据思维、所有权、质量服务水平协议（SLA）、访问权限、保留期限、数据血统。
可观测性与 FinOps：构建仪表盘、告警和成本关键绩效指标（KPI）；排查大规模环境中的低吞吐量问题。
交付：生产代码、性能分析、代码审查、自动化测试、安全设计。

数据架构基础（必修）：