規模式思考：介紹 Hadoop和大型數據

你知道你的數據很大 - 你發現了Hadoop。與大型數據打交道的時候，你該有什么考量？本次講座將涉及與數據一同成長所面臨的普遍挑戰和解決方案。

MapReduce和HDFS

這些工具的核心功能使你可以儲存、處理和分析大型數據。本次講座將揭開其技術原理的面紗。您將了解到它們是如何組合相互匹配，來提供了可擴展的強大的系統。

開始使用Hadoop

如果你想要更多實踐操作經驗，這是下載我們虛擬機的好時機。過程中，根據提供的指示，你會得到運用這些工具的初步感受并運行一些示例。

Hadoop生態系統

介紹Hadoop周邊的的其他項目，它們完善了現有的大型數據處理工具的生態系統。

The Hadoop MapReduce API

學習如何開始編寫針對Hadoop's API的程序

MapReduce的算法導論

MapReduce的程序編寫要求以一種新方法分析問題。本次講座將展示一些常用功能如何被表示為MapReduce管道的一部分。

MapReduce程序編寫

現在你已熟悉一些工具並初步了解如何編寫 MapReduce程序，這項工作將挑戰您執行一項處理大型數據時的常見任務 - 建立倒序索引。更重要的是，教你掌握編寫更有趣的數據處理任務所需的基本技能。

Hadoop部署

一旦你了解Hadoop的基礎使用和MapReduce應用程序的編寫，你就須知道如何為你自己的處理工作啟動并運行Hadoop（或至少，求助于你的操作小組）。一天培訓結束前，我們會確保你了解如何在你自己的數據中心服務器上或Amazon's EC2上部署Hadoop。

利用Hadoop擴充現有系統

開始中級課程之前，我們先以普遍的眼光看看數據系統。Hadoop很少取代現有的基礎設施，而是通過提供一個可擴展的批處理系統讓您能更有效處理數據。本次講座幫助你了解這一切如何組合在一起。

數據處理管道最佳方案

為Hadoop能緊縮大容量數據，首先你需要將這數據導入Hadoop。本講座將幫助您了解如何從各種渠道把不同類型數據導入Hadoop以便作進一步分析。

利用Sqoop導入現有數據庫 

Sqoop是Cloudera開發的一個命令行工具。Sqoop促進了Hadoop項目，提供了一種簡易的方法將數據從RDBMS中導入Hadoop，以便直接使用MapReduce的，Hive或Pig處理數據。 

Pig導論

Pig是一種編寫大規模的數據分析程序的高級語言。Pig用簡化的處理語言揭示了MapReduce的普遍構造。

使用Pig

通過練習，我們將重新審視一些常見任務，看看如何使用Pig來完成。

Introduction to Hive - A Data Warehouse for Hadoop

Hive導論 - Hadoop的數據倉庫

Hive是構建在Hadoop上的的強大的數據倉庫應用程序，讓你使用SQL來訪問數據。本講li

Working with Hive

使用Hive

將演示究竟如何使用Hive，涉及數據導入、表格創建及作出查詢。

調試MapReduce程序 

在分佈式環境下調試是有挑戰性的。本講座將揭示程序設計的最佳方案以減輕調試難度，及規模調試的本地測試工具和技術。 

高級Hadoop API 

在基礎培訓課程中，學習了如何啟動和運行在Java中Hadoop MapReduce程序編寫。本講座更深入到API，包括自定義數據類型和文件格式，HDFS的直接訪問，中間數據劃分，以及其他工具，如DistributedCache。 

高級算法 

本講座將介紹一些可以適應你需求的圖算法，以及如PageRank一樣更複雜的例子。我們還將研究有效執行聯接的策略，並比較適於不同數據模型的不同技術。 

MapReduce程序優化 

我們將使用Cloudera培訓虛擬機來完成一道例題，你要寫出MapReduce程序並運用之前學過的技術提高其性能。 

Cloudera Certified Hadoop Developer Exam

Cloudera Hadoop開發者認證考試 

這一天將在CCHD考試后結束，CCHD為希望獲得Hadoop專業知識認可的人員提供書面證明。考試將評估對三天培訓中涉及到的所有領域知識的掌握程度。