岗位职责:
1、参与智慧公安大数据应用系统技术方案设计、开发、维护和优化;
2、负责基于大数据的各种实时、离线数据存储和计算模块的设计开发及维护工作,参与大数据平台整体架构的规划和设计;
3、理解业务及产品需求,根据不同的业务场景灵活快速的实现技术开发,并有意识通过技术让数据产生更大的价值;
4、整理和沉淀技术文档。
任职要求:
1、计算机或相关专业本科及以上学历,2年以上相关工作经验;
2、精通Java/Scala/Python 其中一门编程语言,熟悉Linux/Unix开发环境;
3、熟悉Hadoop生态体系,包括HDFS、Hive、HBase、Spark、YARN和MapReduce等组件;
4、掌握实时数据分析或离线数据挖掘技术框架,如:Spark Streaming,Kafka,Spark SQL等,熟练掌握常见的SQL/NoSQL数据库原理、数据库设计;
5、具备良好的沟通协作能力和较强的分享精神。