数据研发工程师专题汇总
数据研发工程师专题汇总
岗位职责：
岗位职责:
- 负责业务所覆盖到的网页、站点、媒体资源等数据分析和特征建模工 作;
- 网页资源的解析提取,不同维度不同粒度的数据整合等;
- 结构化信息提取、数据清洗工作,并能工具化。
任职要求：
- 优秀的分析问题和解决问题的能力,对数据具备一定敏感性,对解决 具有挑战性问题充满激情;
- 精通python语言编程,熟悉linux平台、shell编程,熟悉scrape等开源抓取工具优先;
- 页面解析/信息挖掘/统计分析工作经验、多语言研发经验优先;- 有数据挖掘和平台服务化背景的优先;
- 做事严谨、认真、踏实,有强烈的责任感和进取心;
- 突出的学习能力和逻辑思维能力;
- 优秀的团队合作能力和沟通能力。
岗位职责：
1.千亿级金融数据服务系统的研发和维护
2.互联网金融数据抓取、整理和存储
3.提升数据的多样性;保证数据的准确性;
任职要求：
1.本科以上学历，熟练掌握计算机相关技能
2.熟悉PHP、Python、C\C++等一门或多门语言
3.熟悉MySql、NoSql等数据库，熟悉HTTP协议
4.学习能力强，乐于钻研，较强的抗压能力
5.熟悉金融知识者优先
工作职责:
1. 负责封面新闻分析体系建设，建设数据指标体系，规范数据指标口径
2. 负责封面新闻业务分析平台建设，建设数据开放集市，统一数据接入和输出
3. 负责封面新闻数据建模，基础数据架构，保障数据质量和稳定。
职责要求:
1. 普通高校全日制大学本科及以上学历，35周岁以下；
2. 熟悉Java、Hadoop、Hive，能够使用Python者优先；
3. 对数据结构和算法设计有较为深刻的理解；
4. 熟悉数据库、数据仓库，有海量数据处理经验，熟练使用mysql和hive；
5. 对多维分析、数据建模有深刻的理解；
6. 良好的逻辑思维能力，能够从海量数据中发现有价值的规律，对数据敏感，能够发现关键数据、发现关键问题；
7. 强烈的上进心和求知欲，较强的学习能力和沟通能力，具备良好的团队合作精神具有以下条件者优先；
8. 熟悉分布式计算或高性能并行计算原理，并有相关项目经验。
9、热爱互联网，对大数据处理和数据分析挖掘有浓厚的兴趣。
职位描述：
1. 理解业务，建设数据仓库，包括底层数据仓库、数据集市以及业务数据模型持续优化。
2. 负责业务数据开发、表设计和架构，现有业务数据（Hadoop、SQL SERVER、MY SQL )优化和维护。
3. 负责数据的收集，清洗，分析，挖掘等产品方案设计和实现，设计报表并完成报表开发。
4. 协助业务开展实施深层次、多结构的业务数据贯穿数据，为业务发展和算法优化提供指导意见。
任职资格：
1. 有丰富的ETL数据处理相关工作经验，2年以上优先考虑。
2. 熟悉Hadoop、HIVE、SQL、数据仓库。
3. 有互联网电商行业数据开发经验者优先。
优先考虑： 熟悉hadoop,hive,pig,hbase,storm,spark等分布式数据仓库的一种。
此数据摘自相关公司实际发布的招聘要求
岗位要求：
1、测绘、GIS等方面的专业知识优先；
2、熟悉ArcGis、Mapinfo、AutoCAD等软件，了解其他地图数字化工具；
3、熟悉VB，有SuperMap、CAD、Mapinfo等二次开发经验者优先；
4、了解GIS常见文件格式者优先；
5、熟悉常见空间数据库产品和空间数据库建库流程者优先。
工作概述：
1、独立进行GIS数据建库和数据处理方案的设计和实现；
2、协助技术经理进行数据技术方案的规划设计；
3、负责数据分析、辅助程序开发。
工作职责：
1、负责公司相关数据的统计分析；
2、负责公司用户数据建模及行为分析。
任职要求：
1、熟练使用hadoop/hive/hbase/spark/kafka/storm 等大数据相关开源工具中至少2种，并有一定任务优化经验；
2、掌握JAVA编程语言，至少熟悉php, python, shell等一种脚本语言；
3、有数据仓库开发经验，熟悉数据仓库基础理论；
4、优秀的分析问题和解决问题的能力；
5、较强的沟通能力和逻辑表达能力，具备良好的团队合作精神和主动沟通意识；
6、具有以下条件者优先： 熟悉OLAP、数据挖掘、推荐系统者优先；
7、至少两年以上工作经验；
8、本科以上学历。
岗位职责：
1、负责画像系统建设和优化
2、负责基于hadoop集群，spark集群编写分布式算法实现
3、负责新词发现，关键词选取，文本分类，主题模型，矩阵分解等文本挖掘和机器学习算法
4、负责对结构化和非结构化数据中建立基于标签描述和层次兴趣体系的用户画像模型
5、负责对结构化和非结构化数据中挖掘用户的学历，职业，年龄，性别，地域等基础属性
6、负责用户兴趣在推荐系统上的应用分析及优化
任职要求：
1、本科及以上学历；
2、 2年以上相关工作经验；
3、 熟练掌握C/C++,JAVA,Python,shell中的一种或多种语言；
4、 深入理解常见机器学习或数据挖掘类的算法原理，熟悉常见的统计原理及方法；
5、有大数据分析工具相关的使用经验，比如Hadoop生态中的Map-Reduce，hivesql，pig等；
6、 良好的数据意识，能结合产品通过数据分析发现有价值信息；
岗位职责：
1、参与公司大数据系统平台与应用的设计、开发、维护；
2、针对具体的业务问题的研发、维护及优化，满足业务数据需求；
3、参与构建日志收集、数据仓库、ETL、调度系统、分析系统等环节。
任职要求：
1、计算机、数学、统计专业，1 年及以上 Hadoop 工作经验；
2、熟练使用 Mac/Linux 操作系统，以及常用的 Shell 命令和工具；
3、熟练使用 Java/Scala 中的一种开发语言；
4、熟悉常用的数据指标、数据分析工具和平台（Hadoop、Hive、Spark、Kafka 等），了解数据分析的基本方法和常见问题；
5、工作认真负责，有较强的钻研学习能力和分析解决实际问题的能力。
6、具有数据分析和数据挖掘方面的项目经验者优先；
7、具有互联网用户行为分析经验者优先。
此数据摘自相关公司实际发布的招聘要求1两年以上的BI相关项目经验,、熟悉数据仓库基本原理。
2熟练掌握java，具有hadoop或者spark的开发经验。
3熟悉Linux系统，能在Linux系统环境下完成开发
4强烈的责任意识，有进取心，有较强的学习能力，理解能力，沟通能力，表达能力。
5有金融及相关行业从业经验者优先
岗位职责
1基于大数据平台完成各类统计和开发任务。
2完成日常数据分析查询需求
3数据仓库的设计，开发，维护