[蚂蚁金服]大数据平台研发工程师/技术专家[上海][杭州]

新开矿区，大数据技术宅赶紧看过来~~ 简历请投递 [email protected] ，部门 Lead 直接评估并面试~~

1. 工作地点：上海 / 杭州
2. 职位诱惑：千万级规模，工程师文化，数据驱动，AIOPS，蚂蚁的期权激励（还没上市喔）， !996
3. 编程语言：工程方向以 Java 为主
4. 招聘范围：社招（一年多经验高潜力的 P5、P6~P8 ）

我们的主要工作是负责蚂蚁全站系统的“高可用（从线程级到 IDC 级的故障自动定位和恢复决策）”和“资损防控（所有业务资金流的实时自动核对和止损）”这两大领域。在庞大的系统规模、频繁的变更频率、错综复杂的业务流程大背景下，可以预计这两项工作已经无法通过堆人的方式应对，即便是很有经验的专家。所以大方向是以数据驱动和智能化的思路来破局，一方面需要构建夯实的基础设施，支撑全站全量数据的高可靠近线传输、存储与计算。另一方面则需要结合场景去运用业界前沿的算法理论经验，实现问题域的智能分析，达到人工辅助甚至自动决策效果。当下整个体系还有很大的探索空间和试错机会，如果 1.你本善于工程，同时又期望探索 AI 的实际应用，2.你本善于算法，但苦于没有大规模的场景去施展，个人觉得都是蛮好的一个尝试方向。

职位描述：

1. 负责蚂蚁金服基础数据平台的建设，包括基础的运维数据，资金数据，系统变更数据等。
2. 对全链路数据质量负责，进行实时监控，分析，最终提供保障数据的质量，包括低延时，高可用等指标。
3. 参与建设数据平台建设，满足实时数据流的上各种复杂计算需求，包括图计算，多流合并，以及各种常见 transform 计算。
4. 对接数据平台上的各种业务方，满足不断发展的业务需求。
5. 对接各类数据源系统，包括蚂蚁平台内部的各种 queue，关系数据库，日志等系统。

职位要求：

1. 较好的抗压能力，有 ownership 意识，追求实现自我价值。
2. 有 ETL，ELK 类业务的实际项目经验，掌握实时计算技术体系包括数据采集、计算引擎 Storm/Spark/Flink，对实时计算所涉及的事务、容错、可靠性有深入理解。了解背后的实现原理，并能够调优。
3. 对 hadoop/yarn/hive 等大数据工具有深入使用经验，熟悉大数据存储系统 hbase/hdfs 等，了解起背后的实现原理，并能够调优。
4. 精通 Java，Scala，C/C++等其中一种，极佳的编程素养，有丰富的分布式开发经验。熟悉 Linux 系统，有一定的脚本开发能力。
5. 参与过超大规模数据项目，有百万级 TPS 数据处理经验者优先。

工作地点

• 上海，上海中心大厦
• 杭州，西湖区黄龙国际大厦