2023大数据展厅工作实用

20_大数据展厅工作实用一

1、负责公司大数据平台的整体架构设计，包含数据收集、数据存储、数据挖掘、数据输出;

2、负责规划从数据源到数据应用的整体流程，并参与用户产品和数据产品的决策;

3、负责海量数据分析、用户行为分析，构建用户数据模型;

4、负责解决核心技术问题，对技术方案进行决策;

5、技术团队管理。

6、熟悉手机ios、安卓系统app开发

任职资格

1、计算机相关专业毕业，本科以上学历;

2、5年以上相关工作经验，具备软件产品架构设计经验，熟练掌握高性能、高扩展性架构设计方法;

3、熟练掌握java或c++任意一门语言、熟悉linux操作系统;

4、熟悉hadoop/mr/hbase/mahout/spark等大数据技术，并能够基于上述项目开发大数据相关应用;

5、熟悉基本数据挖掘方法和技术;

6、强烈的敬业精神，良好的沟通与协调能力，能有效组织协调团队完成各类开发工作;

7、热爱技术，相信数据的价值，对大数据有深刻的理解。

20_大数据展厅工作实用二

大数据时代下的财务管理

acca(特许公认会计师公会)与ima(美国管理会计师协会)近日联合发布的一份新报告指出，“大数据将如何(而不是在何种程度上)影响商业世界?”是会计师和财会专业人士最应该问自己的一个问题。

这篇名为《大数据：机遇和风险》(big data: its power and perils)的报告阐述了各种规模的企业、政府以及监管机构利用这种非结构化信息财富的可能性，但也指出了大数据所带来的法律和道德上的潜在风险。

大数据的优势

在acca和ima最近开展的一次调查中，有76%的亚太地区受访者和62%的全球范围内受访者认为大数据对企业未来极其重要，具备赋予有远见卓识的企业超越竞争对手优势的潜能。企业和政府可以收集到的数据量和数据种类正在快速增长，提供了一个潜在的信息宝库。组织、理解和分析大数据的能力成为企业进行重大投资的核心任务。

acca中国事务总监梁淑屏表示：“问题不在于大数据的重要性何时凸显，事实上其重要性已经不容忽视。能够分析和应用这类信息，才是潜力之所在。大数据是财会行业近几年面临的最大机遇。财务部门运用其分析技能，能够为高级管理层提供更多变量的实时动态，这将使他们跃居企业战略核心位置。”

“财务职能部门不应该仅限于提供年终报告，这个问题我们已经讨论了多年，而大数据让我们的想法变为现实。此外，财务职能部门的道德管理工作也会变得至关重要。结合其分析技能和职业道德，财务职能部门最终将成为企业战略和成功的基石。”

大数据不仅在私营部门显示出不可估量的价值，它还能使审计人员和监管机构更容易发现大规模的欺诈情况。监管部门已经开始在其调查中使用大数据了。

大数据的危险

“大数据为企业带来巨大机遇，但我们必须记住，政府和个人需要高度重视隐私问题。”ima负责研究部门的副总裁raef lawson博士(美国注册管理会计师，美国注册会计师)指出，“我们已经注意到有这样的高调抗议活动，反对组织持有数据，甚至某些时候出售数据。对于财会专业人士来说，引导他们的企业小心避开道德和法律的雷区至关重要。”

20_大数据展厅工作实用三

职责：

1、负责公司大数据产品的架构设计，包含数据收集、数据存储、数据应用，并完成相关架构设计文档的撰写;

2、参与规划从数据源到数据应用的整体流程，并参与相关产品的决策;

3、负责解决核心技术问题，对技术方案进行决策;

4、负责大数据研发团队建设、人才梯队培养和技术团队管理;

5、积极了解业界发展，研究与跟踪大数据新技术发展方向。

任职要求：

1、精通goldengate for bigdata相关理论，具备大型数据利用的生产实战经验;

2、精通数据驱动的理论，设计并生产上线相关数据驱动的产品;

3、精通常用消息中间件的使用，例如kafka/rocketmq/apache pulsar，有解读相关源码者优先;

4、掌握hadoop、spark生态体系相关产品的使用，掌握mapreduce编程或spark编程;

5、了解传统数据仓库理论及相关etl工具，例如kettle/datastage;

6、熟悉oracle、mongodb、mysql数据库的使用;

7、扎实的java语言基础，熟悉java开发工具和调试工具的使用;

8、良好的团队协作精神，有能力对团队在软件设计、实现和测试方面进行指导;

9、良好的逻辑分析能力和沟通能力，执行力强、对待工作认真严谨、责任心强、具备出色的学习能力和团队合作精神，有一定的推动能力;

10、计算机科学、信息技术或相关领域本科以上学历，具有5年以上数据平台项目开发经验，3年以上的架构设计经验，具有大数据平台应用大型项目架构设计经验优先;

20_大数据展厅工作实用四

职责：

1、负责规划科技大数据平台及科技数据入库自动化的方案设计;

2、负责大数据平台的开发和维护，以及对外服务接口的开发;

3、负责大数据平台的优化和改进工作。

任职要求

1、计算机相关专业本科及以上学历，5年以上开发经验，其中3年以上为互联网、大数据相关的开发经验;

2、熟知hadoop生态圈体系，精通hadoop/spark/storm/kafka中的一项或几项，深刻理解mapreduce的运行原理和机制，有mpi经验者尚佳;

3、熟悉elasticsearch、redis、hbased等相关数据库的构建和操作，尤其是数据库集群的构建和操作，熟悉neo4j者尚佳;

4、具有机器学习相关项目经验者优先。

20_大数据展厅工作实用五

职责：

i、负责hadoop集群的安装部署、维护及调优:

2、负责spark的安装邮署、维护及调优:

3、负责基于大数据平台开发的应用系统的部署、日常维护、调优和问题处理

4、负责elk 平台的部署及维护。

技能要求：

1 、2年以上大数据运维工仵经验;

2、熟悉hadoop生态圈技术栈及各个组件原理:

⒊、熟练掌握hdfs、hive、hbase、sρark、sqooρ 等组件，具备部署、维护、调优的能力:

4、热悉kylin技术原理,有一定的维护经验优先:

5、掌掇elk的日常维护技能·有一定的维护.经验优先:

6、有一定的hql/sql 性能调优经验;

7、具备基本的 java、python等语言开发能力优先:

8、有较强的沟通、团队协作及学习能力。

20_大数据展厅工作实用六

职责：

1.负责大数据管理平台产品的运维支撑工作，包括项目实施(安装、调优、培训)、项目联调以及其他日常维护等;

2.负责大数据管理平台产品的自动化运维相关脚本的开发、维护等;

3.参与大数据管理平台其他相关工作;

4.领导交付的其他事宜任职要求

任职要求：

1.熟悉linux(redhat/centos)软硬件环境、系统管理和优化，熟练部署、优化各种常用服务，熟练使用linux 命令;

2.具备一定的故障排查能力，能够独立排查及解决操作系统层的各类问题，有良好的技术敏感度和风险识别能力，熟悉一门以上脚本语言(shell/python等);

3.熟悉hadoop大数据生态圈，包括但不限于zookeeper、hdfs、yarn、hive、hbase、spark、kafka、flume、es、mysql等;

4.熟悉hadoop各组件的原理和实现，有实际部署维护、管理( 包括元数据管理)及优化经验，并拥有持续调优能力，运维管理过大规模数据平台经验者优先考虑;

5.熟悉掌握常用的安全协议和组件服务，对hadoop各组件的权限、安全、kerberos进行配置管理。熟悉ssl、acl、kerberos等在大数据环境场景的使用;

6.大型节假日需低频次维护各项目，可以调休;

7.具备良好的服务意识，善于主动思考，自我驱动力强。有良好的沟通、协调能力，富有团队精神，有较强的文档编写能力;

8.本科或硕士毕业于211、985等国内知名高校者优先(注意，仅是加分项，不是必须);

9.有实际工作经验者优先;

20_大数据展厅工作实用七

职责

1、负责企业级大数据平台、数据云服务的设计与开发;

2、基于大数据生态圈，支持智慧交通等大数据场景应用实现;

3、负责公司大数据产品的设计、封装与落地;

4、负责学习大数据相关算法研究、实现与应用

任职要求

1、统招本科及以上学历;2年以上智慧城市建设或交通行业信息化相关工作经验，3年以上大数据架构设计、开发经验;

2、精通大数据生态圈的技术，包括但不限于mapreduce、spark、hadoop、kafka、mongodb、redis、flume、storm、hbase、hive，具备源码级问题解决和集群优化改造能力;

3、熟悉常用编程语言，包括java、python、scala等;

4、具有很强的技术研发和创新能力，能有效把握技术发展方向，有较强的执行能力、学习能力、沟通能力、适应能力，责任心强;

20_大数据展厅工作实用八

职责：

1、负责公司大数据/hadoop/hive/hbase/flink等离线实时数据平台运维保障;

2、负责内部大数据自动化运维以及数据化运营平台开发工作;

3、负责hadoop/hbase等系统的业务监控、持续交付、应急响应、容量规划等;

4、深入理解数据平台架构，发现并解决故障及性能瓶颈，打造一流的数据平台;

5、持续的创新和优化能力，提升产品整体质量，改善用户体验，控制系统成本。

6、善于表达、理解客户数据服务需求，具备数据需求转化落地能力。

任职要求：

1、大学本科及以上学历，计算机或者相关专业;

2、深入理解linux系统，运维体系结构，精于容量规划、性能优化;

3、具备一定的开发能力，精通一门以上脚本语言;(shell/perl/python等)，熟悉java等开发语言一种及以上优先;

4、具备很强的故障排查能力，有很好的技术敏感度和风险识别能力;

5、能够承受较大的工作压力，以结果和行动为准则，努力追求成功;

6、熟悉hadoop、hbase、hive、spark、tez等原理并具备管理，配置，运维经验;

7、熟悉分布式系统设计范型，有大规模系统设计和工程实现的了解者优先。

8、具有运营商流量数据加工处理经验者优先。

20_大数据展厅工作实用九

职责：

1、负责hadoop、hbase、hive、spark等大数据平台 规划、部署、监控、系统优化等，确保高可用;

2、负责公司大数据平台的运维管理工作，集群容量规划、扩容及性能优化;

3、处理公司大数据平台各类异常和故障，确保系统平台的稳定运行;

4、设计实现大规模分布式集群的运维、监控和管理平台;

5、深入研究大数据业务相关运维技术，持续优化集群服务架构，探索新的大数据运维技及发展方向。

任职要求：

1、熟悉hadoop/hbase/hive/spark/kafka/zookeeper等开源项目的安装与调试,升级扩容;

2、熟悉hadoop大数据生态圈，包括但不限于hdfs、yarn、hive、hbase、spark、kafka、flume等;

3、精通一门以上脚本语言(shell/perl/python等),熟练掌握linux系统及常规命令与工具，熟练的shell脚本编写能力。

推荐阅读：

　　主题专业技术不足改进措施及感悟(十二篇)

　　推荐幼儿园收费自查报告范文汇总(六篇)

　　2023义务教育英语新课标解读心得体会报告(九篇)

　　2023年医学遗传心得体会总结 医学心得体会(汇总10篇)

　　2023年伤残复议申请书 伤残鉴定申请书(精选8篇)

　　关于公安局队伍教育整顿工作谈心谈话提纲汇总(4篇)