数据工程岗位职责
随着社会不断地进步,岗位职责起到的作用越来越大,制定岗位职责有助于提高内部竞争活力,提高工作效率。拟起岗位职责来就毫无头绪?下面是小编整理的数据工程岗位职责,欢迎大家借鉴与参考,希望对大家有所帮助。
工作职责:
1、运用数据挖掘和机器学习方法和技术,深入挖掘和分析海量商业数据
2、包括但不限于风控模型、用户画像、商家画像建模、文本分析和商业预测等
3、运用数据挖掘/统计学习的理论和方法,深入挖掘和分析用户行为,建设用户画像
4、从系统应用的角度,利用数据挖掘/统计学习的理论和方法解决实际问题
任职要求
—计算机、数学,统计学或人工智能等相关专业硕士以上学历,5—10年以上或相关工作经历
—精通1—2种编程语言(Python或Java),熟练掌握常用数据结构和算法,具备比较强的'实战开发能力,能带领团队共同进步。
—具有统计或数据挖掘背景,并对机器学习算法和理论有较深入的研究
—熟悉数据挖掘相关算法(决策树、SVM、聚类、逻辑回归、贝叶斯)
—具有良好的学习能力、时间和流程意识、沟通能力
—熟悉Spark或hadoop生态分布式计算框架
—优秀的沟通能力,有创新精神,乐于接受挑战,能承受工作压力
—有互联网,央企,政务,金融等领域大规模数据挖掘经验者优先
1、海量大数据分析、数据挖掘,负责分析和评估数据质量,提升数据治理的水平并指导数据采集
2、负责数据分析、加工、清理、预处理等数据质量分析工作
3、能够熟练使用Python编程,掌握numpy、pandas、matplotlib等常用分析工具包
4、能针对特定的业务场景,从数据中建模,解决问题
5、善于撰写文档,善于积累和输出者优先
职责:
1负责大数据平台、数据仓库多维模型设计
2负责大数据平台相关生产系统数据的抽取、清洗、转换等工作
3负责BI平台设计与报表开发工作
岗位要求:
1、精通数据仓库建模理论,有参与过2个以上的数据仓库建设经验;
2、精通ETL开发,熟悉数据的抽取、常用数据脚本编写、存储过程的`编写;
3、熟悉BI平台,有数据报表设计和开发经验;
4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一种主流关系数据库;
5、具备良好的团队协作精神,良好的沟通能力;
6、供应链、物流行业数据从业经历者优先。
职责:
1.依据应用系统需求创建数据库存储,完成数据库的.更新、数据迁移、数据整理
2.管理数据库用户,维护数据库安全。
3.确保数据库状态正常,处理日常事务性数据库操作,提供业务和决策支持;
任职要求:
1、熟悉DB2或Oracle数据库,具备DB2或Oracle开发经验并能使用开发工具
2、熟悉数据库备份恢复,数据迁移,数据库调优和pl/sql编写,
3、具备一定的优化SQL语句的能力;
4、会使用SQL语句进行基础增删改查操作。遇到问题能自行解决。有实际经验者优先。
职责:
1、负责对海量文本内容进行要素提取,精分类别、关联挖掘等技术的研发工作;
2、负责实现文本挖掘技术的产品化,并且结合招标领域开展应用与优化;
3、能指导较低职位的工程师完成工作;
4、能与高校科研机构进行协同创新。
任职资格:
1、模式识别/人工智能/计算机相关专业,本科或以上学历;3年以上工作经验;
2、正直、诚信、敬业、有激情、有良好团队交流能力;
3、精通Java、Python语言,熟悉linux基本开发环境;
4、精通NLP相关领域知识,拥有较为丰富的`文本处理经验:精准分词、实体抽取、属性抽取、关系抽取、分类聚类、主题挖掘、POI挖掘等;
5、具有NLP实战经验,参与过相关项目,有知识图谱/深度学习研发经验者优先;熟悉Hadoop、Spark、Storm等分布式处理框架者更佳;
6、熟悉Git,SVN等通用工具;
7、对自然语言处理、知识图谱构建、人工智能等具有浓厚的兴趣。
1、负责部分化验设备的周期内部比对,收集比对数据,数据有异常波动时及时采取措施予以解决一般性故障,并告知部门领导。
2、负责样品的收集管理登记和对外样品的递送、打包、邮寄。
3、负责出口COA的.制作和传递。
4、负责对本部门内检验岗位进行测试比对,统一并矫正各驻厂检验室检测标准;做好与上海AT化验数据的比对测试。
5、协助做好化验设备维修保养和定期周检工作,按要求维修保养、周检和送检。
6、每月汇总和打印成品、原材料分析月报,统计原材料得分表。
7、做好公司组织试验部分数据的输入与传递、。
职责:
1、负责建设数据仓库架构,包括元数据管理、ETL调度、数据集成、OLAP等子系统的设计和开发;
2、搭建和维护数据仓库表,解决业务人员在仓库系统流程、工具使用、数据处理等遇到的问题;
3、基于对数据的理解和业务需求,对数据进行整理、分析和挖掘。
任职资格:
1、做事耐心,有强烈的责任心;
2、计算机,数学,统计学相关专业本科及以上学历,
3、熟悉主流的'关系型数据库及MPP数据库,至少精通一门数据库,熟悉Gbase优先;
4、熟练使用SQL语言,具有2年及以上数据仓库、报表系统等ETL开发、维护经验;
5、熟悉Hadoop/Spark/Hive/Hbase等大数据技术者优先;
6、逻辑清晰、对数据敏感,良好的沟通能力和协作能力,敢于接受挑战,能够承受压力;
7、有公安相关业务经验者优先考虑。
职责:
1、根据应用场景,进行数据库设计和性能优化;
2、定位和排除数据库故障,及时解决数据库运维过程中各种问题;
3、数据库相关项目管理和实施;
4、学习和研究数据库相关新技术并应用到生产环境中;
任职资格:
1、全日制本科及以上学历,计算机相关专业毕业;
2、 3年及以上相关工作经验,有金融行业运维工作经验,有DB2、OCP或OCM证书者优先;
3、具有数据库管理或开发经验,以及大型数据库设计、维护经验;
4、精通DB2、Oracle原理、管理、调优,精通SQL和PL/SQL,熟练使用(mysql,redis)中1种或以上数据库相关软件及调优管理经验;
5、对高并发、复杂SQL以及数据库集群系统有深入理解,并具有丰富的管理和优化经验,具有很强的故障定位和问题解决能力;
6、具有良好的文档撰写、阅读、表达能力;有较强学习和研究能力,独立分析、解决问题的'能力,强烈的责任心与主动性,能自我驱动成长,能承担较大工作压力;有良好的组织沟通能力、执行力和团队合作精神;较好的职业素养,严谨、务实。
1、负责数据仓库(HADOOP)ETL工作以及数据运营;
2、负责数据产品的`业务需求梳理、数据开发以及维护;
3、负责数据仓库的维度建模以及设计相关的脚本调度;
4、负责维度模型的数据处理的脚本开发,程序开发以及接口对接。
职责:
1、负责海量科技数据(含文本数据)的挖掘工作;
2、负责科技数据挖掘算法模型的构建、应用、评测、报告;
3、主持或参与海量科技数据的入库工作,科技数据知识图谱的`构建;
4、负责或参与数据挖掘成果论文、专利、标准的撰写;
5、负责或参与制定数据加工清洗的方案,并形成操作手册;
6、为指定的课题提出解决方案,并主持或参与方案实施;
7、完成安排的各项工作,与其他部门合作。
岗位要求:
1、数学、统计、金融、科技管理、计算机等相关专业,博士学历优先;
2、具有2年及以上海量数据挖掘经验,有文本挖掘、非结构化文本处理经验者优先;
3、精通Matlab/Python/R/Scala之一,熟悉Java/C/C++等编程语言,熟练掌握Linux各项操作指令;
4、熟练掌握Hadoop/Spark/Storm/Kafka中的一项或几项,有MPI经验者尚佳;
5、掌握机器学习的基本算法框架,有自然语言处理和丰富的特征工程(特征选择/特征抽取)经验者优先;
6、掌握关系型数据库的基本操作,有图形数据库、其他非关系型数据库经验者尚佳;
7、在医疗信息化从事产品开发工作者优先,有顶会paper或人工智能领域国际比赛中获奖者优先;
8、有比较强的组织协调能力,可同时处理好多个任务,具备一定的管理能力;
9、性格开朗,具有团队精神;较强的沟通能力,能与相关业务和开发人员讨论并快速理解需求。
1、负责构建体系框架,公开数据等进行分析,挖掘特征;
2、负责大数据产品的规划,需求分析和产品设计和定义;
3、基于现有真实用户行为数据,能够从数据中发现能源的需求和业务场景;
4、参与业务部门临时数据分析需求的'调研、分析及实现;
5、监测分析产品运营状况,持续优化产品功能改造和业务拓展方向,提出和落实产品优化改造方案。
6、撰写专题大数据分析报告。
1、负责大数据平台搭建及数据仓库建模;
2、负责数据库管理及数据优化;
3、利用大数据相关技术实现对数据的分析、挖掘、处理、及数据可视化等相关工作;
4、维护大数据平台并能解决相关问题,保障平台正常运行;
5、学习和研究新技术以满足系统需求。
1.高质量地完成集团内外各类数据生产集成、数据分析应用建设工作,涉及投研、市场、ERP、全球金融资讯等四个业务领域方向;
2.需求及源系统数据分析,完成数据仓库/EDM等系统数据模型及应用模型设计、数据Mapping规则文档撰写、开发、自测及上线部署;
3.数据质量稽核、问题分析及处理,优化数据处理程序;
4.洞察数据、满足业务场景需求。
职责:
1)配合业务伙伴推动思迈特数据挖掘产品的销售,负责售前阶段的客户需求调研、需求分析,完成项目售前方>案的制作、招投标支持以及产品演示;
2)理解客户具体业务需求,利用思迈特数据挖掘软件,提供明确的大数据分析应用解决方案;
3)负责具体数据挖掘需求的落地实施工作,进行项目现场业务技术支持、与客户进行技术沟通;
4)整理行业案例,深入研究分析市场需求趋势、行业知识及发展方向,并进行行业案例与解决方案的`包装和推广;
5)具有良好的沟通表达能力,抗压能力强,责任心强,接受短期出差;
岗位要求:
1)本科以上学历,计算机、软件、数学、统计相关专业毕业,数学功底扎实及研究生学历者优先考虑,2年以上数据挖掘相关工作经验;;
2)具备大量数据挖掘经验,具备项目建模经验,有自然语言处理、文本分析经验尤佳;
3)能快速理解客户需求、解决方案编制、模型开发;
4)至少熟练一门数据挖掘工具,如Python,R等,同时具有Java开发能力优先;
5)精通数据挖掘和机器学习算法,对深度学些有一定的了解以及应用;
6)熟悉Linux开发环境,良好的系统编程、数据结构、算法基础、系统设计能力;
职责
1、负责公司数据库产品的架构设计与优化;
2、负责生产数据库(MySQL/Redis/MongoDB等)的日常运维、稳定性保障、性能优化;
3、负责数据库运维标准化,规范化、产品化和智能化;
4、负责数据中心的`设计与搭建,以及后续的升级与扩容;
5、配合公司产品和项目需求改进数据库架构,对数据库设计进行评审;
6、负责数据库日常维护、可用性监控、优化备份、容量规划、数据迁移等;
7、及时定位和排除数据库故障,并对数据库进行持续性能优化。
任职要求:
1、本科及以上学历,计算机、软件等相关专业;
2、3-5年数据库相关研发运维经验;
3、精通C/C++、Linux环境编程、TCP/IP协议栈;
4、对MySQL数据库从SQL解析、优化、执行到存储引擎的整体架构有丰富的理论知识和工程实践经验;
5、对数据库的高可用架构有丰富的工程实践经验,有大规模分布式存储系统的设计经验者优先;
6、熟练掌握NoSQL技术(如Redis、MongoDB等),具有集群架构搭建、性能优化和监控等生产运维经验;
7、在分布式数据库、NoSQL、数据仓库中一个或多个领域有丰富经验者优先;
8、有MySQL高负载高并发系统的运维经验;
9、具有良好的学习能力、沟通能力、团队合作意识,强烈的责任心与主动性。
版权声明:此文自动收集于网络,若有来源错误或者侵犯您的合法权益,您可通过邮箱与我们取得联系,我们将及时进行处理。
本文地址:https://www.gunzhua.com/jiuye/renliziyuan/528197.html