岗位职责
1.负责数据存储与管理,熟练运用消息队列、文件存储、列式存储、MPP-DB以及数据湖等相关技术,根据业务场景选择合适的存储模式,确保数据的安全可靠供给;
2.负责离线大数据处理研发工作,了解实时数据应用程序开发;
3.负责使用调度工具,掌握ETL、Python、SQL等服务开发技能,能够构建可靠的加工链路作业,满足不同业务场景的数据供给需求;
4.负责完成数据研发与维护工作,支持实时和离线大数据处理与各类数据服务开发调优;
5.具备数据可视化能力,负责数据分析和BI报表相关技术,为业务提供数据支持和决策依据;
6.负责优化数据加工流程,提升数据处理效率,保障数据的及时性和可用性,解决数据加工过程中的技术问题;
7.完成领导交办的其他工作。