高级
搜索
收藏
分享
微信扫一扫
举报

大数据工程师

岗位职责

岗位职责:1、负责配合产品定义行业元数据,能够根据客户、产品需求整理元数据文档;2、负责使用主流ETL工具(kettle、datax等)进行数据同步抽取,形成数据湖;3、负责基于元数据定义,完成主数据的清洗、治理、转换工作;4、负责对数据湖进行分层设计;5、负责根据客户需求,使用JAVA、Ptyhon、Scala等语言基于大数据平台进行数据建模,按需输出统计、分析结果;6、负责维护公司内部与目标客户的大数据平台及组件的运行;7、负责协助开发完成线上数据库性能调优;任职资格:1、计算机、通信、统计相关专业统招本科及以上学历,3年以上数据建模、数据仓库开发项目经验;2、熟练掌握Java、Python、Scala开发,熟练使用linux操作系统;3、熟练掌握SQL语法,熟悉MySQL、Oracle数据库操作;4、熟练掌握主流ETL工具,包括但不限于KETTLE、DataX等,有基于以上工具进行二次开发经历者优先;5、熟悉大数据存储、查询组件,如HDFS、HBase、Kafka、ES等,能够基于开源框架搭建Hadoop平台,并联调串通各个模块;6、熟悉常用批处理计算框架和实时计算框架,如MapReduce、Spark、Flink、Flume,能够使用上述框架自主建模。有超大数据量处理经验者优先(日增千万至上亿级);7、精通数据仓库和建模,具备数据分析能力,了解用户画像,能够独立的根据数据需求、接口集、指标集等进行维度建模。

工作地址

(重庆南岸区重庆云网科技股份有限公司3幢) 查看地图

云网科技科技

重庆云网科技股份有限公司

重庆云网科技股份有限公司成立于2009年,总部设在重庆,是享誉全国的集机动车检测设备生产、软件开发、系统集成为一体的行业应用解决方案提供商。满足客户在整站建设、检测线、检测设备&软件、监管软件等全方位需求,并致力于发展车联网服务。产品广泛应用于检测站和车管所,为全国上千万台机动车提供检测服务。云网科技已于2016年8月16日挂牌上市,成为机动车检测行业为数不多上市企业之一,更是机动车检测行业新三板***股(股票简称:云网科技,股票代码:838411)公司秉承“感恩、创新”的企业理念,以创新带动市场,以严谨的管理、精湛的技术、优质的产品推进公司持续稳定、健康发展。目前,公司已取得了国家颁发的软件著作权21项、软件产品登记证书1项、13个国家专利、制造计量器具许可证、国家ISO9001/14001/18001/20000/20007认证体系等相关证书、软件通过国家公安部交通安全产品质量监督检查中心认证,并且全部具有自主知识产权。云网科技与检测机构代表、行业专家、行业资深研发团队、高校学术研究团队联合成立了产品研发小组,对产品的研发和创新提供了强有力的支撑。公司机动车检测行业发展的过程中,积极参与社会公益活动,不断开拓进取,以其优秀的产品质量和完善的服务体系快速拓展市场,赢得了社会各界和客户的一致好评。2013年被评为重庆市质监局“用户满意”称号,2015年成为“中国汽车保修设备行业协会”会员单位,2016年成为“中国汽车维修行业协会”、“中国质量检验协会”、“中国汽车工业协议”会员单位,以及获得“全国汽保企业管理现代化创新成果”二等奖、高新技术企业等等。经营范围:提供机动车检测整站建设、机动车安检/综检/尾气检测/摩检线建设、机动车检测设备、机动车检测软件、机动车检测站管理软件、机动车检测线改造、培训推广等技术和服务。主要产品:1、检测站整站建设解决方案提供含站前规划、布局建议、设备销售、系统安装调试等一站式建站服务。2、检测线集成产品提供符合国家标准的检测线建设,主要有:机动车安全性能检测线;机动车综合(安全)性能检测线;机动车环尾气排放检测线;摩托车安全性能检测线。3、检测硬件设备提供符合国家标准且优质耐用的检测站设备。包括但不限于:车辆外廓尺寸自动检测仪、加载制动检测台、整备质量、侧滑检测台、汽车轮重仪、平板制动检测台、自由滚筒、环保底盘测功机、汽车转向系间隙检测仪……4、检测软件产品提供应用于检测站、车管所及车主的软件应用系统,包括检测控制软件、检测站管理软件、检测站监管软件、车检互联网应用平台。5、增值服务提供“资质咨询、培训、检测建站、技术维保、标定 、营销推广“6大增值服务,全方位解决用户需求 ...展开

给我留言

0 /200 发 送
热门职位
关注微信
推荐好工作
没发现满意工作? 1分钟留下信息 >> 免费将你推荐给优秀企业!
大数据工程师 ¥15~25K/月 投个简历