亚博88下载
亚博88app
新闻中心
亚博安全吗
党群工作
人力资源
网站地图

大数据技巧与使用根底教学概要

  人力资源管理内涵

  本资源只供给3页预览,全面文档请下载后查看!热爱就下载吧,查找行使更简单

  《大数据身手与操纵根柢教学纲目》由会员分享,可正在线阅读,更多闭联《大数据身手与操纵根柢教学纲目(4页收藏版)》请正在人人文库网上搜求。

  1、大数据身手与操纵根柢教学纲目学时:60代 码:合用专业:造 定:审 核:批 准:一、课程的位置、性子和职责人数据身手的起色,已被列为国度宏大起色政策。而正在过去的几年里,无论是聚焦犬数据起色的 鼓励大数据起色活跃提纲,如故“十三五”筹办中都深切显示了当局对人数据财富和操纵 起色的注意。目前国内人数据起色还处于加快期、转型期,数据与古板财富的调和还处于起步阶 段,各行业对人数据剖判和发掘的操纵还不睬念。但跟着墟市竞赛的加剧,各行业对人数据身手 钻研的热忱越来越高,正在改日几年,各范围的数据剖判都将大范围操纵。本课程正在器重犬数据期间操纵情况前捉下,商讨人数据管理剖判需求多样繁杂的基础景况,从初 学者角

  2、度动身,以轻量级表面、丰饶的实例比较性地先容人数据常用计划形式的各类编造和匸具。 商讨到今朝犬数据起色处于起步并逐渐赶超先辈的阶段,其操纵范围丰饶渊博,正在教学流程中应 器重操作人数据剖判的推行操作。本课程通过丰饶粗略易上手的实例,让学生不妨确凿体验和拿 握各品种型东西的特色和操纵。二、课程教学基础央求1. 相识人数据的起色和基础槪念,理会并操作人数据的特性及苛重身手层面。2. 操作Scrapy情况的搭筑,相识搜集爬虫获取数据的流程,熟识爬虫项方针创筑。3. 深切相识hadoop的根柢表面,理会并操作Hadoop单机及集群情况的布置手段。4. 操作HDFS的基础槪念和HDFS正在hadoop中的作

  3、用,理会并识记HDFS的行使,相识HDFS的 JAVA API接口及数据流道理;让学生理解Map流程与Reduce流程这两个独立局部各自的道理 及协作途径,了然怎么独立编写餍足我方需求的MapReduce步调。5. 理会HBase中涉及的基础观点,操作HBase的粗略操纵:让学生相识数据栈房的根柢观点, 熟识Hive与HDFS、MapReduce直接的闭切。6. 熟识Spark和RDD的基础观点,熟识spark接口的行使,办理实战时的方法及思绪。7. 理解Hadoop和Storm之间的区别,操作对Storm的行使。理会Apex的丄作流程并能粗略应 用。8. (解Druid的基础观点、操纵场景以

  4、及集群架构,操作批量数据加载、流数据加载的操作。 相识Flink的紧张槪念和基础架构,操作Flink粗略的行使实例。9. 理会Elasticsearch的基础架构,操作Elasticsearch的-些初学操作。相识并基础操作怎 样使用所学的东西对对象实例举办数据剖判。三、课程的实质1. 大数据概述解犬数据的发作和起色,识记人数据的特性、数据类型和编造,人数据的计划形式和身手层面 间的联系。2. 数据获取爬虫杀青,相识搜聚对象数据项界说,体认并操作爬虫运转和Scrapy识记基础观点,识记各功 能应奈何用.数据存储身手。3. Hadoop 根柢体认 Hadoop 的苛重特色,识记 Hadoop H

  5、DFS、Hadoop MapReduce、Hadoop YARN 的道理,f 解其 生态编造中紧张构成的道理,熟识Hadoop的装备。基础操纵.HDFS4熟识HDFS所需的API接口,相识数据流的做事流程,能粗略操作HDFS的 接口。5. MapReduce操纵开垦相识所需的开垦情况eclipse,体认Map流程与Reduce流程的做事道理,相识行使mapreduce 办理现实题目时的方法和思绪,识记MapReduce代码的分歧性能。6. 漫衍式数据库HBase识记HBase的基础槪念,熟识安置HBase集群的方法,相识HBaseAPI的基础方法。7. 数据栈房主西Hive体认Hive的影响,

  6、操作Hive接口的行使,会使用Hive办理实战题目。8. 开源集群计划情况Spark相识Spark的展本思念,熟识Spark所需的情况及API等,熟识Spark实战的完善匚作流程,领 会其所需的代码。9. 流及时管理编造Storm识记Storm闭联槪念,操作Storm情况的安置置置,相识Storm的基础行使10. 企业级、大数据流管理Apex识记Apex的基础观点,操作Apex的情况装备流程,理会常见组件的道理和特色,会粗略的操纵 Apex办理题目。11. 事故流OLAP之Druid相识Druid的槪念及其操纵位置,操作Druid单机情况的安置手段和步。