


资深数据工程师(风险)
日本,东京 / 全职:远程 / 大数据
岗位责任:
● 构建实时OLAP查询引擎解决方案,用于海量数据,协助在线实时指标的秒级输出,并构建适用于数亿规模的核心数据分析产品;
● 参与设计和开发超大规模离线数据计算、存储、查询和可视化解决方案;
● 负责验证和实施开源新技术,并推动大数据平台的技术演进。
任职要求:
● 6年以上开发大数据相关应用的经验;
● 精通Java / Scala / Python(至少了解其中两种语言的原理);
● 丰富的大数据管道开发经验,包括批处理和流处理;
● 熟悉Hadoop、Hive、Spark、Flink、HBase、Kafka、ZooKeeper、Airflow、ElasticSearch、Redis等大数据组件;
● 至少使用过Spring Boot、AWS Lambda + API Gateway等框架进行API开发的经验;
● 具有大数据产品开发经验,包括数据仓库、查询平台、流式处理、推荐、用户画像、风险管理等者优先考虑;
● 具有团队合作精神、快速学习能力、分析思维、乐观积极、愿意接受挑战、有责任心和责任感。
在Dtop 环球嘉年华工作
Dtop 环球嘉年华是一个商业场景生态平台,通过互联网技术提供各种类型的业务场景服务,如在线零售、商务旅行、本地生活等。Dtop环球嘉年华旨在创建一个便捷、稳定和可持续的业务场景生态系统。
● 与多样化、世界一流的人才共同工作,处于一个无限学习和成长机会的环境中;
● 处理快节奏、具有挑战性和独特的项目;
● 在一个真正全球化的组织中工作,与国际团队和扁平化的组织结构合作;
● 具有竞争力的薪资和福利待遇;
● 灵活的工作时间,远程优先,轻松的工作着装。
Dtop 环球嘉年华致力于成为一家平等机会雇主。我们相信拥有多样化的员工队伍是我们成功的基础。