Spark大數(shù)據(jù)分析實訓(xùn)教程

發(fā)布者：    布時間：2020-09-10 16:41:34    點擊量：

Spark Streming醫(yī)療實時審核系統(tǒng)開發(fā)

• 項目1 大數(shù)據(jù)概述
• 任務(wù) 1.1 認(rèn)識大數(shù)據(jù)
• 任務(wù) 1.2 認(rèn)識hadoop
• 項目2 開發(fā)技術(shù)概述
• 任務(wù) 2.1 認(rèn)識PyMysql庫
• 任務(wù) 2.2 認(rèn)識Json庫
• 任務(wù) 2.3 認(rèn)識Flask框架
• 任務(wù) 2.4 認(rèn)識ECharts圖表插件
• 項目3 開發(fā)環(huán)境與工具介紹
• 任務(wù) 3.1 認(rèn)識python與JDK
• 任務(wù) 3.2 認(rèn)識PyCharm集成開發(fā)環(huán)境
• 任務(wù) 3.3 認(rèn)識MySql數(shù)據(jù)庫
• 任務(wù) 3.4 認(rèn)識hadoop
• 任務(wù) 3.5 認(rèn)識zookeeper
• 任務(wù) 3.6 認(rèn)識kafka
• 任務(wù) 3.7 認(rèn)識spark streming
• 項目4 系統(tǒng)概要設(shè)計
• 任務(wù) 4.1 系統(tǒng)需求分析和功能設(shè)計
• 任務(wù) 4.2 系統(tǒng)詳細(xì)設(shè)計
• 任務(wù) 4.3 數(shù)據(jù)庫設(shè)計
• 項目5 構(gòu)建開發(fā)機開發(fā)環(huán)境
• 任務(wù) 5.1 安裝與配置JDK
• 任務(wù) 5.2 安裝與配置Tomcat
• 任務(wù) 5.3 Python Web項目的創(chuàng)建
• 任務(wù) 5.4 安裝MySql數(shù)據(jù)庫
• 項目6 構(gòu)建Spark平臺環(huán)境
• 任務(wù) 6.1 安裝與配置JDK
• 任務(wù) 6.2 安裝Mysql數(shù)據(jù)庫
• 任務(wù) 6.3 安裝Hadoop集群
• 任務(wù) 6.4 安裝與配置kafka
• 任務(wù) 6.5 安裝與配置scala
• 任務(wù) 6.6 按裝與配置spark
• 項目6 數(shù)據(jù)封裝發(fā)送模塊
• 任務(wù) 6.1  Json數(shù)據(jù)封裝
• 任務(wù) 7.3  數(shù)據(jù)發(fā)送到kafka
• 任務(wù)7 數(shù)據(jù)審核模塊
• 任務(wù) 7.2 spark streming數(shù)據(jù)審核
• 任務(wù) 7.3 審核數(shù)據(jù)持久化
• 任務(wù) 7.4 hdfs數(shù)據(jù)備份
• 任務(wù) 7.5 監(jiān)控spark streming與kafka
• 任務(wù)8 可視化模塊
• 任務(wù) 8.1 構(gòu)建flask框架下的項目
• 任務(wù) 8.2 使用web前端技術(shù)實現(xiàn)可視化頁面
• 任務(wù) 8.2 采用pymysql連接數(shù)據(jù)庫
• 任務(wù) 8.3 審核通過人數(shù)
• 任務(wù) 8.4 審核不通過人數(shù)
• 任務(wù) 8.5 審核不通過原因與數(shù)量
• 任務(wù)9 系統(tǒng)部署發(fā)布
• 任務(wù) 9.1 安裝部署nginx
• 任務(wù) 9.2 安裝Python3.6
• 任務(wù) 9 .3安裝setuptools
• 任務(wù) 9.4 安裝pip
• 任務(wù) 9.5 安裝flask
• 任務(wù) 9.6 安裝uwsgi
• 任務(wù) 9.7 linux中的項目部署

• 項目1 Spark用戶人群畫像系統(tǒng)概述      
• 任務(wù) 1.1 認(rèn)識大數(shù)據(jù)
• 任務(wù) 1.2 認(rèn)識hadoop生態(tài)    
• 任務(wù) 1.3 認(rèn)識大數(shù)據(jù)實訓(xùn)平臺
• 項目2 開發(fā)技術(shù)概述
• 任務(wù) 2.1 認(rèn)識linux常用命令
• 任務(wù) 2.2 認(rèn)識Hive數(shù)據(jù)倉庫
• 任務(wù) 2.3認(rèn)識zookeeper
• 任務(wù) 2.5 認(rèn)識phoenix
• 任務(wù) 2.6 認(rèn)識spring框架
• 任務(wù) 2.7 認(rèn)識springMVC框架
• 任務(wù) 2.8 認(rèn)識scala
• 任務(wù) 2.9 認(rèn)識SparkSQL
• 任務(wù) 2.10 認(rèn)識echarts圖表插件
• 項目3 開發(fā)環(huán)境與工具介紹
• 任務(wù) 3.1 認(rèn)識Java與JDK
• 任務(wù) 3.2 認(rèn)識tomcat服務(wù)器
• 任務(wù)3.3 認(rèn)識maven項目管理工具
• 任務(wù) 3.4 認(rèn)識IntelliJ IDEA集成開發(fā)環(huán)境
• 任務(wù) 3.5 認(rèn)識MySql數(shù)據(jù)庫
• 項目4 系統(tǒng)概要設(shè)計
• 任務(wù) 4.1 系統(tǒng)需求分析和功能設(shè)計
• 任務(wù) 4.2 系統(tǒng)詳細(xì)設(shè)計
• 任務(wù) 4.3 數(shù)據(jù)庫設(shè)計
• 項目5 構(gòu)建開發(fā)機開發(fā)環(huán)境
• 任務(wù) 5.1 安裝與配置JDK
• 任務(wù) 5.2 安裝與配置tomcat
• 任務(wù) 5.3 安裝與配置Intellij IDEA
• 任務(wù) 5.4 Maven Web項目的創(chuàng)建
• 項目6 構(gòu)建hadoop平臺環(huán)境
• 任務(wù) 6.1 安裝與配置JDK
• 任務(wù) 6.1 安裝mysql數(shù)據(jù)庫
• 任務(wù) 6.2 安裝hadoop集群
• 任務(wù) 6.3 安裝與配置hive
• 任務(wù) 6.5 安裝與配置zookeeper
• 任務(wù) 6.6安裝與配置 hbase
• 任務(wù) 6.7 安裝與配置 scala
• 任務(wù) 6.8 安裝與配置Spark
• 任務(wù) 6.9 安裝與配置Phoenix
• 任務(wù) 6.10 環(huán)境整合
• 項目7 數(shù)據(jù)清洗模塊
• 任務(wù) 7.1 使用MapReduce進(jìn)行用戶信息清洗
• 任務(wù) 7.2 使用MapReduce進(jìn)行訂單信息清洗
• 任務(wù) 7.3 使用MapReduce進(jìn)行訂單商品信息清洗
• 任務(wù) 7.4 使用MapReduce進(jìn)行用戶上網(wǎng)軌跡信息pc端清洗
• 任務(wù) 7.5 使用MapReduce進(jìn)行用戶上網(wǎng)軌跡信息app端清洗
• 項目8 數(shù)據(jù)倉庫構(gòu)建模塊
• 任務(wù) 8.1 本項目數(shù)據(jù)倉庫設(shè)計
• 任務(wù) 8.2 數(shù)據(jù)倉庫bdm層
• 任務(wù) 8.3 數(shù)據(jù)倉庫fdm層
• 任務(wù) 8.4 數(shù)據(jù)倉庫gdm層
• 任務(wù) 8.5 數(shù)據(jù)倉庫adm層
• 任務(wù) 8.6 構(gòu)建hbase映射表
• 任務(wù) 8.7 構(gòu)建phoenix映射表
• 項目9 可視化模塊
• 任務(wù) 9.1 使用web前端技術(shù)實現(xiàn)可視化頁面
• 任務(wù) 9.2 使用JdbcTemplate查詢phoenix
• 任務(wù) 9.3 使用echarts實現(xiàn)數(shù)據(jù)可視化
• 項目12 系統(tǒng)部署發(fā)布
• 任務(wù)12.1 安裝部署Tomcat服務(wù)器

上一篇：Hadoop大數(shù)據(jù)應(yīng)用實訓(xùn)教程

下一篇：綜合布線實訓(xùn)||實訓(xùn)1 參觀考察智能建筑