数据开发工程师专题汇总
数据开发工程师专题汇总
工作职责：
1、分析风机核心部件的设计、制造、运行数据，分析其失效规律；
2、分析风机现场运维数据，基于海量数据，创新开发各种算法，编写相应的报告，为降低项目成本提供科学依据；
3、构建全面的、准确的、能反映服务业务线特征的整体数据指标体系, 并基于业务监控指标体系，及时发现与定位业务问题；
2. 对业务问题进行深入分析，为公司运营决策、产品方向、销售策略提供数据支持；
3. 沉淀分析思路与框架， 提炼数据产品需求，与相关团队（如技术开发团队） 协作并推动数据产品的落地；
4. 与相关团队协作进行数据建模工作，推动业务部门的数据化运营；
5. 与相关团队协作（如数据运营团队）组织数据技术与产品相关的理念、技能、工具的培训。
任职资格：
1、计算机（机器学习、人工智能等方向）、数学、统计或相关专业本科及相关专业硕士及以上学历；
2、数学基础扎实，掌握数据统计分析、建模、算法等基础知识，概率统计学、可靠性工程相关专业优先；
3、能够熟练使用excel、spss、matlab、sas等软件，具有一定的R统计软件编程能力者优先；
4、数字敏感度高，具备较强的分析总结能力，具备良好的数据呈现能力，包括PPT展示和讲解能力，擅长与商业伙伴的交流沟通，具有优秀的报告讲解能力及沟通能力；
5、通过对数据的敏锐洞察，深入挖掘产品潜在价值和需求，进而提供更有价值的服务；
6、良好的数据敏感度,能从海量数据提炼核心结果，有丰富的数据分析、挖掘、清洗和建模的经验优秀的，对解决具有挑战性问题充满激情。
岗位职责：
后台数据加工、标签体系需求整理、设计开发、测试工作
任职要求：
1.计算机.软件工程等相关专业；
2.精通各种数据库，如Mysql、Oracle、Hadoop、HBase、MongoDB等 ，至少熟悉一门编程语言；
3. 2年以上数据分析、数据挖掘方面的工作经验，有税务数据仓库项目经验优先；
4、熟悉数据仓库理论和实施方法，能进行数据仓库数据模型的设计，能编写相关设计文档；
5.工作认真负责，有较强的学习钻研和分析解决实际问题的能力；具备良好的沟通能力和团队合作精神。
此数据摘自相关公司实际发布的招聘要求
岗位职责：
1、参与超大规模数据快速查询系统的架构设计和开发；
2、规模数据挖掘和机器学习算法的实现和维护；
3、参与过在线和离线海量数据分析平台的开发；
4、研究大数据前沿技术，提升系统的运维效率；
5、实现大数据基础架构平台（Hadoop/Spark/MPP DB）的自动部署和维护；
任职要求：
1、具有1年以上大数据开发经验，至少熟悉一种编程语言（Python/Java/Scala）；
2、熟悉Hadoop等分布式系统开发，数据仓库技术；
3、熟悉HDFS/HBase/Hive/MapReduce，掌握Mapreduce程序开发；
4、熟悉分布式系统概念、架构，有大规模分布式系统设计、实现、部署等经验；
5、有较强的书面与口头沟通表达能力，独立分析、解决问题的能力。
职位要求
1、统计学、应用数学、计算机等相关专业，本科及以上学历；
2、熟练掌握多种统计和挖掘方法，熟练使用SPSS、SAS等相关数据分析软件；
3、较强的数据敏感度，逻辑分析能力和文档写作能力；
4、有责任心，良好的沟通能力和组织管理能力以及心理承受能力，勇于接受挑战；
5、有农产品流通数据分析经验优先。
数据分析师 • 工作内容
1、通过数据分析支持产品改进及新模式的探索；
2、构建用户行为建模，支持个性化项目；
3、构建数据评估体系；
4、构建业务数据分析体系，帮助确定各项业务数据指标；
5、负责用户行为数据分析，通过监控及分析，推动产品改进，运营调整；
6、负责构建用户数据模型，挖掘用户属性及用户喜好等需求，为个性化产品推荐提供支持；
7、负责构建数据产品、运营及活动用户行为评估体系，通过数据分析对产品、运营、市场提出建议并推动实施；
8、负责用户行为调研，通过海量数据的挖掘和分析，形成报告，汇报给决策层，支持战略规划
职位描述：
1、负责大规模数据的清洗、特征提取、分析和挖掘工作；
2、负责整体数据系统的设计和开发；
3、负责数据相关接口的开发。
职位需求：
1、计算机相关专业本科及以上学历
2、2年以上编程经验，熟练掌握java，scala中至少一种语言；
3、熟悉Hadoop生态，熟悉HDFS/HBase/Hive/Storm，熟练掌握MapReduce程序开发；
4、有过Flume/Kafka/Storm的使用经验；
5、熟悉Spark, 并有实际使用经验者优先；
6、对数据建模、存取、处理、可视化等相关技术有很强的学习热情。
7、有较好的沟通交流能力和逻辑思维能力
岗位职责：
1、根据项目需求，进行数据分析及数据库框架设计；
2、负责数据库开发与设计方案编制工作；
3、负责数据库结构配置、优化与调整；
4、负责制定数据库备份还原计划。
任职要求：
1. 本科以上学历，至少有3年以上工作经验或2年以上数据库相关工作经验。
2. 有SQLServer/Oracle 数据库管理和开发工作经验（设计、优化、维护数据库，编写存储过程、触发器等）。
3. 熟悉power center的使用和开发。
4. 有志于从事数据库管理和开发者优先。
5. 有证券（或相关）行业从业经验优先。
6. 熟悉主流ETL工具中的一种或几种，熟悉Informatica优先
7. 具有良好的团队合作意识并能承担一定的工作压力。
岗位职责：
1.参与移动互联网系统的需求、分析、设计、编程、测试、文档等工作；
2.根据系统需求，进行数据库存储过程等脚本开发；
3.负责系统功能模块数据库端的代码编写，代码维护工作；
任职要求：
1.有电信、金融等信息系统分析、开发、测试工作经验；
2.3年及以上数据库开发经验，对大型数据库系统架构具有良好的认识
3.熟悉SQL和PL/SQL，能编写日常维护需要的脚本；
4.熟悉Oracle、MYSQL关系型数据库、SQL、存储过程、触发器等；
5.工作认真、负责，有良好的团队合作精神，良好的分析能力与沟通技巧。
岗位职责：
1.基于大数据平台完成各类统计和开发任务。
2.完成日常数据分析查询需求
3.数据仓库的设计，开发，维护
任职要求：
1.两年以上的BI相关项目经验,、熟悉数据仓库基本原理。
2.熟练掌握java，具有hadoop或者spark的开发经验。
3.熟悉Linux系统，能在Linux系统环境下完成开发
4.强烈的责任意识，有进取心，有较强的学习能力，理解能力，沟通能力，表达能力。
5.有金融及相关行业从业经验者优先
岗位职责：
1、基于Hadoop/Hive/Pig/Storm/Spark的大数据应用的开发；
2、实现大数据分析计算需求，熟练使用Sql/Hql，支持海量数据挖掘；
3、独立完成小型项目的详细设计和编码的任务，确保项目的进度和质量。
任职要求：
1、本科以上学历，统计学、数学、计算机等相关专业，2年以上数据分析相关工作；
2、熟悉HDFS/HBase/Hive/MapReduce/Pig/Mahout/Impala/Flume/Storm/YARN原理等相关技术；
3、有大数据项目开发经验，开发过storm,mapreduce等程序优先；
4、有大数据处理经验；熟练使用各种数据库者优先；有大流量网站后台管理系统开发经验优先；
5、对数据敏感、对新技术敏感，具有良好的系统分析、架构设计能力。
岗位职责：
1. 负责基于Spark机器学习, ETL, Map Reduce开发实现工作；
2. 实现部门需求, 能够独立工作并和外部门进行协作
岗位要求：
1. 三年以上工作经验
2. 熟练 Java, Scala, 追求代码质量和程序效率, 熟悉设计模式.
3. 熟悉 Spark SQL, Spark Streaming, Map Reduce等, 对Spark体系结构, 运行机制和源码有深入研究
4. 熟悉 ZooKeeper Kafka Redis, AWS DynamoDB, AWS Redshift, AWS Kinesis 中任意两个
5. 熟练使用Linux系统,熟悉Shell脚本语言
6. 熟悉Spark MLlib 优先
岗位职责：
1.大规模分布式数据仓库搭建
2.海量日志和业务数据的采集和分析
3.实时可视化统计平台的数据开发
【岗位要求】
1.本科及以上学历，有1年以上大数据相关开发或运维经验
2.要求有良好的沟通和理解能力，善于学习，熟悉电商业务优先
3.熟悉hadoop/hive/hbase等开源工具的使用和原理，有实际生产环境的优化或搭建经验优先
4.有linux系统java/shell/python等语言的开发经验，有框架或架构开发经验优先
5.理解数据仓库ETL，有高可靠性系统构建经验优先
6.有solr/flume/kafka/storm实时计算经验优先
岗位职责：
1. 热爱本职工作，具有高度的责任心和忘我的工作精神，爱岗敬业，工作认真细致，能认真完成公司交给的各项工作任务。
2. 要求掌握较深的业务知识和计算机应用知识，能用行业各种应用软件进行各种数据分析和综合数据处理，加工成有用的信息提供领导进行决策；能配合系统管理员进行计算机网络维护及管理。
3. 负责本公司计算机信息网络数据的收集、传递（主要是上报）和管理工作，对各网点上报的数据和本机房传递的信息数据，要做好详细的“数据传递纪录”，对未按时间要求漏报和数据有误的网点要及时督促，每月将各经营站、点数据上报情况通报一次；负责各类数据的整理、汇总和分析处理工作，及时向本公司领导及有关部门上报信息数据，做好相关纪录；负责本公司网络信息数据的安全管理，及时做好各类数据及报表的备份工作，做好归档、保管工作，做好信息数据的保密工作，严禁向未授权单位、部门及个人提供各类信息数据；负责机房文件收发、归档和保管工作。
4. 遵守特定的工作时间：必须等各网点数据传输完毕核对无误后才能下班。
任职要求：
此数据摘自相关公司实际发布的招聘要求1、熟悉C/C++及汇编语言的编程和控制软件的策划；
2、扎实的模拟电路, 数字电路和电力电子数字控制基础；
3、熟悉软件流程管理和版本控制, 有良好的软件开发习惯, 能够撰写相关的技术文档；
4、熟悉上位机控制技术；
5、有实际发现问题、解决问题的能力。
1.海量数据分析 /查询、分布式存储、并行计算等应用层核心代码实现
2.对分布式集群及数据的日常运维，根据不同的计算场景对集群进行优化
3.数据仓库的设计，开发，维护
基本要求：
1. 大学本科及以上学历，具有扎实的数学、统计学或计算机相关知识
2.熟悉 Linux 开发环境，熟悉 git
3.具备良好的逻辑分析抽象能力和系统性思维能力，良好的跨团队沟通能力
技术要求：
1.熟悉 Hadoop/Spark 等分布式系统开发，数据仓库技术
2.熟悉 HDFS/HBase/Hive/MapReduce ，掌握 MapReduce 程序开发
3.熟悉 MySQL ，熟悉 Shell,Python 等至少一种常用脚本语言
加分项：
1.有 github/stackoverflow 或类似技术社区帐号
2.给行业内开源项目提过 pr
3.使用 PR + CI + CR 开发模式具有海量数据挖掘、分析相关项目实施经验者
4.有任何数据分析 /可视化相关业余项目
工作职责：
1. 负责或参与数据仓库、数据集市或打数据平台开发与实施，确保该类项目按时、高质量交付；
2. 负责或参与对于数据仓库、数据集市或大数据平台类项目的乙方团队管理；
3. 掌握数据仓库、大数据平台关键技术和关键应用；
4. 辅导初级数据开发类人员。
任职资格：
1. 具有计算机、信息管理及相关专业大学本科及以上学历；
2. 具有3年以上IT项目相关经验；
3. 具有1年以上数据仓库，数据集市或大数据平台的项目经验；
4. 具有项目管理经验者优先；
5. 具有较好的沟通技能，良好的团队合作精神。
岗位职责：
1. 负责项目中数据处理工作(数据采集、清洗、汇总、集成等),保证数据的准确性和稳定性；
2. 负责协助完成应用系统中数据上下层衔接处理工作；
3. 对用户数据进行分析和挖掘，提供决策支持；
4. 大数据数据产品策划，对数据库信息的深度挖掘，充分体现数据的商业价值职位要求；
任职要求：
1. 精通java或php至少一门编程语言，两种都熟悉优先；
2. 精通shell脚本编程，至少熟悉Python或perl等一门语言;
3. 熟悉HTTP协议;
4. 熟悉Hadoop/Hive/Hbase/Spark/Storm等分布式计算环境进行海量数据分析与计算经验者优先;
5. 做过数据仓库,对数据治理、数据标准及元数据有很好理念及实施经验的优先;
6. 良好的沟通能力和团队精神,具备创新意识；
7. 以结果为导向,具有强烈的责任心、钻研精神和良好的团队沟通能力
岗位职责:
1. 基于MB业务本质理解，参与设计并实现数据仓库；
2. 参与ETL过程设计、开发和优化工作，解决数据质量相关的技术问题；
3. 负责数据模型设计和优化工作；
4. 满足业务方的数据需求，提供面向业务的OLAP、报表、数据提取等数据服务；
5. 参与数据产品的设计。
岗位要求：
1. 精通海量数据仓库的系统设计和开发，精通数据建模、ETL过程与开发、元数据管理 等数据仓库主要环节；
2. 精通SQL,PL/SQL，精通Mysql数据库；
3. 熟悉Hadoop或其他分布式数据开发技术，熟练掌握数据库技术；
4. 海量数据仓库架构经验，如ETL技术、OLAP、分布式数据库 、可视化技术优先；
5. 从事过数据安全、数据质量管理工作者优先；
6. 在移动互联网或在线教育数据仓库经验者优先；
7. 有较好的沟通交流能力,善于主动思考和行动,乐于解决具有挑战性的问题；
8. 有较好的逻辑思维能力，较强的抽象、概括、总结能力。