远程
全职
发布于 2024-12-22
大数据运维SRE工程师
4000-6000U/月
remote
LBank
DeFi · 500-1000 人
clickhouseflinkhbasehudi调度平台开发数据工程实时查询架构部署运维告警容器化等项目实战经验。
职位描述
岗位职责:
1、负责大数据底层存储组件的运维、部署、管理、扩容和优化等,保障服务的稳定性和可用性,发现并解决性能瓶颈等
2、支持各类业务对大数据组件的使用需求,并帮助业务方进行一些技术选型;
3、负责大数据平台运营运维工作,保障实时离线服务的稳定性和可用性,发现并解决性能瓶颈等
4、负责存储平台管控系统的设计及架构,持续优化整个产品线的稳定性,可用性和用户体验。
5、推进自动化运维平台的建设,提升运维工作效率
6、研究大数据技术发展动态,研究新型计算框架,并能够提出优化解决方案;
职位要求
职位要求:
1、8年以上互联网平台大规模的大数据运维经验,5年以上大数据平台架构/调优经验。
2、熟悉 Linux/Unix 系统、网络、硬件等相关知识,具有很强的 Troubleshooting 能力;
3、熟悉Hadoop数据生态,包括但不限于Hadoop、Hive、Spark、Hbase、Flink、Impala、Clickhouse、Hudi、Redis、Kafka、Elasticsearch等组件;
4、至少使用过一种自动化部署工具:Ansible、Saltstack、Chef、Puppet、Terraform 等;
5、精通Java语言开发,熟悉Python,Scala或者Go语言之一,熟练掌握Linux操作系统;
6、精通主流数据(如MySQL,PotgreSQL或GP其中一种),熟悉NoSQL和NewSQL数据库;
7、熟悉 Docker、K8S/Istio 等容器技术和工具者优先;
8、熟悉大数据,云计算,微服务等技术,有互联网运营平台架构设计或大数据公司同类平台或产品开发经验者优先;
9、逻辑分析能力,学习能力和创新能力强,工作态度好,具有团队合作精神;较强的文档撰写能力,良好的语言表达及沟通能力
福利待遇
另议