computers, each of which may be prone to failures. Apache Hadoop 網站自我介紹 6 / 74 對購物網站來說，就是知道使用 者的： 動線 看過的頁面 回應過的留言 ... 再來一下交叉比對： 基本資料 歷史購物記錄 ... Hadoop 是 Big Data 的好朋友 7 / 74 Hadoop + Big Data 的預測 去年就已經把 Hadoop 2.x 部署在 35,000+ Node 跑了六 個月以上 ... 21 / 74 1. Submit Job 2. 建構特定 AM 3. 向 RM 註冊 AM 4. 送 Request 給 RM 5. 配置啟動 Container 6. AM/Container 溝通 7. Client/AM 溝通 8. 回收 AM Hadoop 2.x 架構 - MapReduce Service： Microsoft Azure HDInsight Service Amazon Elastic MapReduce(EMR) Platform 67 / 74 1 分鐘在線上直接玩 Hadoop 68 / 74 5 分鐘在本機建置一個 Hadoop VM 69 / 74 10 分鐘在雲端建置一個 Hadoop Cluster 70 / 74 總結 71 /

解更多信息，文中对该主题进行了详细讨论：http://bit. ly/1v2UXAT 4 大数据集成与 Hadoop 源数据 转换 净化 丰富 EDW 连续 单处理器 SMP系统 MPP群集系统或GRID 4 路并行 64 路并行 CPU CPU CPU CPU CPU 内存 共享内存 磁盘 磁盘 关键成功因素：大数据集成平台必须支持全部三个维度的可 扩展性 • 线性数据可扩展性：硬件和软件系统通过线性增加硬件 大数据集成解决方案必须灵活支持上述各种场景。根据 IBM 与大数据客户的合作经验，InfoSphere Information Server是目前支持全部上述场景（包括向MapReduce推 送数据集成逻辑）的唯一商业数据集成软件平台。 业界流传着很多有关在Hadoop中为大数据集成运行ETL 工具的神话。流行的说法似乎是，组合使用任意不可扩展的 ETL 工具与Hadoop均可提供全部所需的海量可扩展数据 工具与Hadoop均可提供全部所需的海量可扩展数据 集成处理。事实上，MapReduce在处理大规模数据集成工 作负载方面有着很多限制： • 并 非 所 有 数 据 集 成 逻 辑 均 可 使 用 E T L 工 具 推 送 到 MapReduce。根据与广大客户的合作经验，IBM估计 约有半数的数据集成逻辑无法推送到MapReduce。 • 用户不得不通过繁复的手动编码在Hadoop中运行较为 复杂的数据集成逻辑，或者限制流程在MapReduce中

传真：(86.10) 8278-7373 上海分公司 地址：上海市黄浦区天津路155号名人商业大厦12层 邮编：200021 电话：(86.21) 2302-3000 传真：(86.21) 6340-6055 广州分公司 地址：广州市天河区珠江新城华夏路8号合景国际金融广场18楼 邮编：510623 电话：(86.20) 8513-2000 &D座 邮编：610016 电话：(86.28) 8619-7200 传真：(86.28) 8619-9573 成都分公司（高新国际广场办公室） 地址：成都市高新区天韵路150号高新国际广场D座四楼18-19，22-25单元 邮编：610041 电话：(86.28) 8530-8600 传真：(86.28) 8530-8699 大连分公司 传真：(86.571) 8717-5299 西安分公司 地址：西安市高新区科技二路72号，零壹广场主楼1401室 邮编：710075 电话：(86.29) 8833-9800 传真：(86.29) 8833-9829 福州分公司 地址：福州市五四路158号，环球广场1601室 邮编：350003 电话：(86.591) 8801-0338

Hadoop研发团队 • 行业应用 英特尔®中国云计算创新中心 数据中心: • 11 个机柜，其中网络机柜1个，服务 器机柜10个 • 电气容量：6 kW/机柜 • 配电：一路220V AC 市电 + 一路 240V DC 直流 • 况源采用况冶水系统，末端采用行间 送风 • 封闭热走廊 Intel Hadoop研发团队 推劢产业应用 交通指挥的挑战