国有金融科技公司
数据架构师
金融/银行/会计
计算机/互联网/通讯
上海
5-10年
本科
面议
职位描述
工作职责
1、负责研究行业先进的数据治理方案,并做研究分享,推进平台方案符合行业先进性要求。
2、独立负责数据平台整体架构设计和技术选型。
3、负责平台技术选型评估,研究和决策。
4、负责Flink任务的性能、参数调优,Flink框架的业务适配。
4、参与平台需求分析和技术方案设计,提出合理的技术实现建议,保障方案的可行性和高效性。
5、负责代码的优化和重构,提升数据平台的性能、稳定性和可维护性。
6、排查和解决系统运行过程中出现的技术问题,保障平台的正常稳定运行。
职位要求
任职资格
1、计算机、金融科技等相关专业本科及以上学历
2、具备Flink/Flink SQL 深度实战经验,独立主导过至少 1 个从 0 到 1 的 Flink 项目全流程建设,并成功实现生产环境稳定落地。
3、精通 Flink 核心原理(状态管理、Checkpoint、流批一体),具备 Flink 框架及 Flink SQL 底层源码修改能力,有核心模块(Checkpoint、StateBackend、SQL 解析优化器)定制化开发案例,能独立完成功能设计、开发与迭代上线。
4、精通 Flink 整体生态,熟练掌握 Flink 与 Kafka、Hadoop、HBase 等组件的深度集成方案,深入理解 Flink CDC、Flink Table Store 等生态工具的设计逻辑、实操技巧及性能优化要点。
5、具备实时数据链路全栈性能优化能力:能解决 Flink 写入数据库的 “高吞吐与低延迟平衡” 问题(如批次大小调优、背压处理),优化数据库查询性能(如索引设计、SQL 改写),保障 GB 级数据场景下的性能。
6、拥有Flink SQL 管理运行平台的完整设计与开发经验,熟悉平台核心模块(任务提交、调度编排、监控告警、权限管控、运维可视化)的实现逻辑。
7、具备多源异构数据 ETL 全流程开发经验,主导过复杂数据源(关系型数据库、NoSQL、消息队列、文件存储等)整合场景的联邦查询落地,有各类自定义连接器开发、优化案例。
8、了解数据编织、数据虚拟化架构理念,有 Denodo、Aloudata、Talend Data Fabric 等相关技术的实践或项目落地经验者优先。
9、有金融资管行业(银行、基金、券商等)相关经验优先。
分享