Recently in HBase Category

Hadoop in Taiwan 2012 講者投稿現況

|
目前講者投稿情形,共計四個開發者議程,三個應用案例,兩個管理者講題。

PS. 比較有趣的是今年大家都用英文命名,真是國際化呀!!

Developer / 開發者
楊詠成(Gibson Yang) / 台灣雅虎 Yahoo! oozie introductionoozie introduction & experience sharing
Chia-Hung LinBulk Synchronous ParallelHadoop MapReduce[1]. is a popular open source framework inspired by functional programming 's map and reduce functions, saving developers lots of works by covering many underlying complicated tasks. However, not all tasks fit into MapReduce's scenario, graph related computation task (e.g. social network analysis) is one such example. Google therefore developed their in-house product, Pregel[2], based on Bulk Synchronous Parallel[3] - a bridge model suitable for performing iterative algorithms, performing large scale graph processing.

Outline:
1. What is Bulk Synchronous Parallel?
2. Apache Hama
3. Comparison between Hadoop MapReduce and Apache Hama

[1]. http://hadoop.apache.org/mapreduce/ [2]. http://dl.acm.org/citation.cfm?id=1582723 [3]. http://dl.acm.org/citation.cfm?id=79173.79181
Laurence Liew / Revolution Analytics, Asia Pacific. General Manager Big Data Analytics - Trends and Best Practises Using case studies from consumer behavior analytics to text mining and sentiment analysis, this session introduces big data analytics & the field of Data Science. An overview of data science and the data scientist toolkit will be presented. A discussion on use of R and Hadoop will also be presented.
Application / 應用案例
講者 / 單位名稱演講主題演講摘要
辜文元 / 逢甲大學GIS中心Hadoop於地理資訊系統之應用案例分享近年來由於遙測技術之快速發展,單幅影像解析度大幅提高使得檔案需要更大的儲存空間,此外動態攝影在環境觀測與記錄使用上也愈來愈廣泛,資料動輒以GB或TB為單位成長,使得遙測資料儲存管理的需求性日益增加。面對如此巨量的資料量往往導致傳統伺服器頻繁的出現儲存空間不足的狀況,雖然傳統伺服器可以增加硬碟來增加儲存空間,但垂直的空間擴展有一定的限制,如何因應日益增加的影像儲存需求,將會是一個很重要的課題。

本研究提出以Hadoop來解決巨量遙測影像儲存問題,利用其內建的HDFS分散式檔案系統之分散儲存特性,將影像檔案分散儲存到不同的雲端節點上,當客戶端數量或客戶端存取量增加時,由於檔案分散儲存,大幅提昇客戶端存取的效率。
Chun-Han Chen / OgilvyOne Mohohan: An on-line video transcoding service via HadoopA famous cloud computing file system and developing framework named Hadoop is mainly designed for massive textual data management, such as counting, sorting, indexing, pattern finding, and so on. However, it is merely to seek a multimedia-oriented service via Hadoop. Mohohan is an on-line multimedia transcoding system for video resources, which implemented with Amazon Web Service (AWS) EC2, AWS S3, AWS EMR, Hadoop, and ffmpeg. Its goal is reducing the overall execution time by parallel transcoding via the Hadoop cluster. The concept of Mohohan is simple: 1) to divide the video into several chunk of frames, 2) to transcode the chunks in parallel with multiple nodes (i.e., task tracker) of Hadoop cluster, and 3) to merge the transcoded results into the output. On the homogeneous SaaS comparison, a test report from an impartial third party organization named CloudHarmony has been chosen. Finally, the experiment result shows that Mohohan performs quite better than other on-line video transcoding services mentioned in the test report, such as Encoding, Zencoder, Sorenson, and Panda.
Vincent Chen / TCloud / Business Development Director 精準行銷上的應用- Hadoop in 移動裝置上網行為分析精準行銷上的應用- Hadoop in 移動裝置上網行為分析:
此應用在於Hadoop平台上,利用MapReduce等相關技術,整合各種移動裝置用戶資料,利用語意分析、資料探勘等分詞、分類技術,定義出完整用戶profile,除了將分析結果轉化成行銷能力,並最終實現人與內容、人與商品、人與人的智能配對。
Administrator / 維運者
Jason Shih / Etu, SYSTEX Corp.Hadoop Security Overview - From Security Infrastructure Deployment to High-Level Services The increasing trend of adoption Hadoop open-source framework for speedy data processing and analytics capabilities for organizations to manage huge data volume have brought attention to enterprise wide security concern aiming for fine grain control of sensitive information and isolation from different level/group of access on sharing storage or computing facilities. Prior to Hadoop 0.20, Unix-like file permission were introduced, providing also cluster-wide simple authentication mechanism but lack of access control per job queue, submission and other operations. With Hadoop's new security feature and it's integration with Kerberos, it's now possible to bring strong authentication and authorization to ensure rigorous access control to data, resources and also isolation between running tasks. In this presentation, we will cover the deployment details of Hadoop security on cluster environment and implementation on high-level services base on kerberized security infrastructure. We introduce also the Etu Appliance providing fast-deployment, system-automation and built-in feature of cross-realm trust mechanism which fulfill the interoperation between existing Active Domain or external LDAP realm and help reducing both integration and operation-wide overhead from administrators.
Kenneth Ho Hadoop hardware and network best practices.



20032004年,Google將分散式檔案系統、高度平行運算軟體編程平台等秘訣公諸於世
2006
年,Doug Cutting 將上述秘訣寫成開源系統 Hadoop 專案
2008
年,Yahoo 宣佈建立了全球最大的商業營運 Hadoop 叢集
2009
年,台灣Hadoop使用者社群會議首度開辦
2011
年,阿帕契基金會正式釋出 Hadoop 1.0 版本,象徵 Hadoop 已經穩定到足以承載企業
     營運的需求

國網中心和趨勢科技共同主辦的「Hadoop in Taiwan 2012」,是Hadoop在台灣首次的大型會議,精心規劃的議程內容涵蓋前瞻技術和實作應用,從個人到企業、從資深人士到新進者,各種角色的技術專才都能從中學習並吸收新知,進而加速Hadoop在台灣的發展進程。

Hadoop in Taiwan 2012」的特色包括:

  • 國際級大師齊聚一堂,傾囊相授
    Hadoop 架構師暨 HBase 主要貢獻者 Andrew Purtell LucidWorks 首席科學家 Grant Ingersoll以及趨勢科技雲端解決方案總負責人陳永強博士,都將親臨現場,分享最新技術進展與前瞻思維。
  • 議題規劃涵蓋開發、維運與應用需求
    深入探討Hadoop子系統與相關專案技術,包括MahoutHBase、海量資料查詢、Name Node設計、在私有雲佈建及維運Hadoop以及如何滿足關鍵的可用性、效能優化及最佳化設計等需求,台灣在Hadoop的先進應用實例也將同時登場。
  • 前所未有的人才平台,推升台灣在新世代技術平台的全球競爭力
    愈來愈多企業投入Hadoop應用實作,人力供給趕不上需求成長,且台灣的技術能力仍與國外有所落差。透過這場台灣首見的Hadoop技術盛會,已投身其中的專業人才可更精進實力,有心加入的新進者也能通過這條捷徑邁入Hadoop大門。

雲端運算已是耳熟能詳的課題,但透過 IaaSPaaSSaaS 等各種形式共用資源,獲得更佳的成本效益,只是雲端首部曲。接下來,如何善用雲端持續創造及累積的海量資料,淬煉出更多的獨特智慧及優質效能,就有賴於Hadoop的推廣及普及,這場剛開跑的全新技術競賽,更是可能讓台灣能與世界並駕其驅的新出路。

台灣首見的Hadoop盛會即將登場,名額有限,請立刻報名!


 


hadoop.tw.2012.jpg

首先,感謝 2011 年 12 月各位 Hadoop 使用者的熱情參與,也感謝中華電信訓練所的場地支援,讓第三屆台灣 Hadoop 使用者社群會議能圓滿落幕。上個月拿到錄影檔案,後續會再另文公佈相關錄影連結。有鑑於 2012 年上半年海量資料(Big Data)相關議題持續發燒,今年度感謝趨勢科技(Trend Micro)的邀約,擬將「第四屆台灣 Hadoop 使用者會議」擴大舉辦為「Hadoop in Taiwan 2012」。在此特別感謝中研院自由軟體鑄造場協助申請場地並贊助部份費用。活動目前初步規劃如下:


議程規劃


時間國際會議聽第一會議室第二會議室
09:00~09:10Opening / 開幕式
主辦單位
09:10~09:30Special Guest / 特別來賓
趨勢科技董事長 Steve Chang (待邀請)
09:30~10:10Keynote:
Cutting Edge Hadoop Technology and the Trend
Andrew Purtell (Hadoop 架構師,HBase 主要貢獻者)
10:10~10:20Break / 中場休息
10:20~11:00Keynote:
Machine Learning in Cloud Era
Grant Ingersoll (Apache Mahout 機器學習專案創始人)
11:00~11:40Keynote:
趨勢科技的雲端發現之旅
- 以 Hadoop 建構企業核心競爭力的歷程分享
陳永強 (趨勢科技雲端解決方案總負責人)
11:40~12:00Talk with Expert / 與專家有約
Grant Ingersoll, Andrew Purtell, 陳永強
12:00~13:00Lunch / 午餐

Developer / 開發者Administrator / 維運者Application / 應用案例
13:00~13:40實用的海量資料查詢 HIVE & PIGHadoop 在多租戶環境 (Multi-tenancy) 的安全性確保Hadoop/HBase 於地理資訊系統之應用案例分享
13:40~14:20Mahout in Practice
- 整合海量資料處理與機器學習
Name Node 的高使用性設計 - 以 Facebook 的 Avatar Node 為例Ad hoc Query - 輕輕鬆鬆查詢海量資料
14:20~14:30Break / 中場休息
14:30~15:10設計高效能 HBase Schema
-從了解HBase運作方式與資料特徵
Hadoop 維運經驗分享
-規劃 Hadoop營運該注意的事項
Hadoop 影音轉檔平台
Hadoop process video format transfer
15:10~15:50運用 Graph Database 對複雜的圖形關係的搜索Hadoop 網路設計、效能優化與監控Hadoop在精準行銷上的應用
15:50~16:00Break / 中場休息
16:00~16:40 TBD TBD TBD
16:40~16:50Closing / 閉幕式
主辦單位

目前除了上午時段的 Keynote 講者很榮幸可以邀請到兩位國外講者以外,也感謝趨勢科技不吝與各界分享他們運用 Hadoop 的相關經驗。下午時段將分為「開發者」、「營運者」與「應用案例」三個平行議程,目前已先由主辦單位草擬幾個題目,但仍在積極徵求講者。因此在此想詢問社群對於不同的議題提出建議,也歡迎有興趣分享相關經驗的熱血社群朋友,來信 jazz-mail.png 或填寫 Google Docs 徵求講題的表格,供後續議程安排。

重要日期

  1. 公開徵求講者:2012/08/24(五) 16:00 截止
  2. 公告候選議程:2012/08/27(一) 16:00 公佈
  3. 社群議程票選:2012/08/31(五) 16:00 截止
  4. 公告議程初版:2012/09/07(五) 16:00 公佈

重要連結

  1. 講者投稿表格

<< 第二屆台灣 Hadoop 使用者社群會議     |   >>


 

第三屆台灣 Hadoop 使用者社群會議 
Hadoop Taiwan User Group Meeting 2011


按這裡填寫報名資訊


   2010 年被譽為台灣雲端元年,2011 年我們看到雲端風潮開始在台灣各行各業持續發酵,其中大量資料分析技術(Big Data)更被 Gartner 視為 2012 關鍵 IT 策略技術之一。Hadoop 在大量資料分析技術中媒體曝光率最高的雲端技術,Hadoop 生態系專案經過六年的醞釀,近期 Hadoop 相關的新創公司如雨後春筍般快速冒出,相信對於已經在使用 Hadoop 的開發者們無疑是劑強心針。2010 年感謝國內 Hadoop 使用者社群的踴躍支持,克服交通不便的障礙,熱情地參與第二屆台灣 Hadoop 使用者社群會議,讓我們倍感榮幸。今年感謝有工研院服務業科技應用中心產業經濟與趨勢研究中心委託我們進行 Hadoop 與雲端運算相關專案。秉持取之於自由軟體,用之於自由軟體的精神,我們今年依慣例將委託金額部份挪出來辦此次活動,希望可以藉此次活動能讓各位聽到更多台灣本土 Hadoop 新奇應用、讓大家了解最近有哪些新的 Hadoop 技術或服務可以使用。

   由於資料庫應用在傳統資訊系統扮演非常重要的角色,加上 Hadoop MapReduce 已整合進微軟的 SQL Server ,連 Oracle 都有類似的整合計畫。因此今年無獨有偶,多數講者都在談論資料庫系統與 Hadoop 的整合。今年的講者群陣容相當堅強,分佈於產、學、研各界,包括:EMC Greenplum中華電信研究所東海大學高效能計算實驗室逢甲大學地理資訊系統研究中心國網中心雲端運算研究小組。希望透過此次會議,讓更多有興趣瞭解 Hadoop 的夥伴相互交流,進行凝聚出台灣區的 Hadoop 社群。

    本會議不收取任何報名費用,歡迎各界踴躍參加。礙於此次會議場地座位有限,請速上網報名(http://registrano.com/events/hadoop-tw-2011),額滿為止。

    本次會議感謝中華電信、EMC Greenplum、CIO IT 經理人雜誌、iThome 電腦報週刊贊助展示攤位與週刊雜誌,主辦單位國網中心方面亦提供 14 本「Hadoop 技術手冊, 2/e」繁體中文版給每場講者贈送問問題的聽眾。歡迎大家踴躍報名~


議程


09:00 ~ 09:20 報  到 (Registration)
09:20 ~ 09:30 大會開場致詞
09:30 ~ 10:10 講 題:Hadoop大資料處理解決方案 - 資料處理流程應用服務
講 者:洪子翔,中華電信研究所 經營策略研究室 助理研究員
10:20 ~ 11:00 講 題:Riak applied: case studies on distributed computing
講 者:Fyodor Yarochkin,台灣大學/阿碼科技(Armorize)
11:10 ~ 11:50 講 題:Greenplum 整合分析平台 - 以 Recruit Japan 經驗為例
Greenplum Unified Analytical Platform - Recruit Japan Case Study

講 者:Jimmy Chiu 邱垂吉,EMC Greenplum 技術顧問
12:00 ~ 13:00 午  餐 (Lunch) / 大會供應餐盒
13:00 ~ 13:40 講 題:HBASE 於海量級資料之應用 - 以 SELENE 之多光譜感測器為例
講 者:辜文元,逢甲大學地理資訊系統研究中心
13:50 ~ 14:30 講 題:大資料寫入 HBase 案例探討 ─ 以警政監控案與轉動台灣案為例
講 者:黃至德,中華電信研究所寬頻網路技術研究室
14:40 ~ 15:20 講 題:雲端計算平台上醫療影像檔案存取系統
講 者:楊朝棟,東海大學資訊工程學系
15:30 ~ 16:10 講 題:運用抓抓龍(Crawlzilla)製作個人化書籤搜尋引擎
講 者:王耀聰,國家高速網路與計算中心 副研究員
16:20 ~ 16:40 EMC Greenplum 實作展示

交通資訊


  • 開車路線(到達目的地後請跟警衛換證)  
  1. 華江大橋文化路一段左轉漢生東路左轉區運路左轉民族路電信訓練所   
  2. 華翠大橋、萬板大橋縣民大道二段左轉漢生東路左轉區運路左轉民族路電信訓練所  
  3. 光復大橋板橋中山路一段左轉漢生東路左轉區運路左轉民族路電信訓練所  
  4. 中永和可經華中橋、中正橋中和中山路一段三段板橋民族路區運路口迴轉電信訓練所  
  5. 北二高北上請於土城交流道 接台65號快速道路往板橋縣民大道右轉民權路左轉民族路電信訓練所
  6. 北二高南下請於中和交流道下閘道左轉中和中山路二段中和中山路三段板橋民族路區運路迴轉電信訓練所
  • 搭捷運火車、高鐵(三鐵共構)後轉搭公車至訓練所

       捷運板南線於板橋站下車,搭火車、高鐵於板橋站下車步行至捷運二號出口出站,於公車轉運站乘坐307台北方向(下一站即是電信訓練所站,到電信訓練所站下車步行至民族路168號到訓練所大門(約70公尺)

  • 搭捷運火車、高鐵(三鐵共構)後步行至訓練所

 搭捷運板南線於板橋站下車,搭火車、高鐵於板橋站下車步行往新北市府地下通道搭手扶梯上平面道路(5分鍾)過馬路到對面遠百後往新北市消防局方向走路過天皇精緻料理沿華南銀行花旗銀行騎樓直走到民族路.過馬路到中華電信板橋營運處 (民族路166) 步行至民族路168號到訓練所大門(約70公尺)


 

第三屆台灣 Hadoop 使用者社群會議 
Hadoop Taiwan User Group Meeting 2011


按這裡填寫報名資訊



   2010 年被譽為台灣雲端元年,2011 年我們看到雲端風潮開始在台灣各行各業持續發酵,其中大量資料分析技術(Big Data)更被 Gartner 視為 2012 關鍵 IT 策略技術之一。Hadoop 在大量資料分析技術中媒體曝光率最高的雲端技術,Hadoop 生態系專案經過四年的醞釀,近期 Hadoop 相關的新創公司如雨後春筍般快速冒出,相信對於已經在使用 Hadoop 的開發者們無疑是劑強心針。2010 年感謝國內 Hadoop 使用者社群的踴躍支持,克服交通不便的障礙,熱情地參與第二屆台灣 Hadoop 使用者社群會議,讓我們倍感榮幸。今年感謝有工研院服務業科技應用中心產業經濟與趨勢研究中心委託我們進行 Hadoop 與雲端運算相關專案。秉持取之於自由軟體,用之於自由軟體的精神,我們今年依慣例將委託金額部份挪出來辦此次活動,希望可以藉此次活動能讓各位聽到更多台灣本土 Hadoop 新奇應用、讓大家了解最近有哪些新的 Hadoop 技術或服務可以使用。

   由於資料庫應用在傳統資訊系統扮演非常重要的角色,加上 Hadoop MapReduce 已整合進微軟的 SQL Server ,連 Oracle 都有類似的整合計畫。因此今年無獨有偶,多數講者都在談論資料庫系統與 Hadoop 的整合。今年的講者群陣容相當堅強,分佈於產、學、研各界,包括:EMC Greenplum中華電信研究所東海大學高效能計算實驗室逢甲大學地理資訊系統研究中心國網中心雲端運算研究小組。希望透過此次會議,讓更多有興趣瞭解 Hadoop 的夥伴相互交流,進行凝聚出台灣區的 Hadoop 社群。

    本會議不收取任何報名費用,歡迎各界踴躍參加。礙於此次會議場地座位有限,請速上網報名(http://registrano.com/events/hadoop-tw-2011),額滿為止。



議程


09:00 ~ 09:30 報  到 (Registration)
09:30 ~ 10:10 講 題:Hadoop大資料處理解決方案 - 資料處理流程應用服務
講 者:洪子翔,中華電信研究所 經營策略研究室 助理研究員
10:20 ~ 11:00

講 題:運用抓抓龍(Crawlzilla)製作個人化書籤搜尋引擎
講 者:王耀聰,國家高速網路與計算中心 副研究員

11:10 ~ 11:50 講 題:Greenplum 整合分析平台 - 以 Recruit Japan 經驗為例
Greenplum Unified Analytical Platform - Recruit Japan Case Study

講 者:Jimmy Chiu 邱垂吉,EMC Greenplum 技術顧問
12:00 ~ 13:00 午  餐 (Lunch) / 大會供應餐盒
13:00 ~ 13:40 講 題:HBASE 於海量級資料之應用 - 以 SELENE 之多光譜感測器為例
講 者:辜文元,逢甲大學地理資訊系統研究中心
13:50 ~ 14:30 講 題:大資料寫入 HBase 案例探討 ─ 以警政監控案與轉動台灣案為例
講 者:黃至德,中華電信研究所寬頻網路技術研究室
14:40 ~ 15:20 講 題:雲端計算平台上醫療影像檔案存取系統
講 者:楊朝棟,東海大學資訊工程學系
15:30 ~ 16:10

講 題:Riak applied: case studies on distributed computing
講 者:Fyodor Yarochkin,台灣大學/阿碼科技(Armorize)

16:20 ~ 16:40 EMC Greenplum 實作展示(暫定)

hadoop-tw.jpg


第三屆台灣 Hadoop 使用者社群會議

Hadoop Taiwan User Group Meeting 2011

首先,感謝 2010 年各位 Hadoop 使用者的熱情參與,不辭辛勞前往交通不甚便利的台中會場,讓第二屆台灣 Hadoop 使用者社群會議圓滿落幕。時序即將進入十一月,也該開始籌備第三屆台灣 Hadoop 使用者社群會議的議程。今年由於邀請國外講者並不順利,前後分別邀請了 KarmaSphereSnapLogic 還有 HortonWorks,都沒能邀請成功。因此,今年想來嘗試新的模式,讓社群會議的議程整個交給社群來決定。倘若您有興趣分享您使用 HadoopPigHiveHBaseCassandraThriftNutchCascadingOozieHadoop4WinCrawlzilla 等專案的經驗或心得,歡迎於 2011 年 11 月 6 日前來信 jazz-mail.png,告知您希望分享的主題、講者姓名與單位名稱、希望排定的時間,或直接請至 Google Docs提交演講提案,謝謝!以下是目前的會議時間規劃、地點與議程時段規劃!目前地點暫定於新竹,倘若有社群夥伴願意贊助在台北的會議場地,亦請與我聯繫(以往通常都會有 120~150 人,若辦在台北,很可能會更多,原則上經費我向來估在 180 人)

09:00 ~ 09:30 報  到 (Registration)
09:30 ~ 10:10 講 題:
講 者:
10:20 ~ 11:00 講 題:
講 者:
11:10 ~ 11:50 講 題:
講 者:
11:50 ~ 13:00 午  餐 (Lunch)
13:00 ~ 13:40 講 題:
講 者:
13:50 ~ 14:30 講 題:
講 者:
14:40 ~ 15:20 講 題:
講 者:
15:30 ~ 16:10 講 題:
講 者:
16:20 ~ 16:40 講 題:
講 者:
由於先前的版本(0.1.1 ~ 0.1.4)沒有寫反安裝程式,因此這一版使用 NSIS 來撰寫視窗安裝版。
想嘗鮮的可以下載以下任一版本:(若需要 PROXY 設定者,建議使用完整版,以免下載檔案被擋)

目前在 Windows XP 上測試無誤,但 Windows 7 因為舊版 cygwin 安裝檔有 ntdll.dll 的相容性問題,所以暫時無法支援(縱使使用 cmd.exe 執行,仍舊會遇到一些執行問題)。

更多說明請參閱 Hadoop4Win 說明文件

 

第二屆台灣 Hadoop 使用者社群會議 
Hadoop Taiwan User Group Meeting 2010


按這裡填寫報名資訊


   繼格網運算之後,雲端運算被視為下一代資訊架構的主流。雲端運算平台 Hadoop 及雲端資料庫平台 HBase 與 Hive 均是目前諸多雲端運算服務的基礎架構。感謝去年國內 Hadoop 使用者社群的踴躍支持,第一屆台灣 Hadoop 使用者社群會議可以募集到如此多參與者,讓我們感到十分意外。今年感謝有業界朋友邀請我們針對 Hadoop 與 HBase 進行教育訓練課程。秉持取之於自由軟體,用之於自由軟體的精神,將委託金額部份挪出來辦此次活動,希望可以藉此次活動聽到更多台灣 Hadoop 使用者的新奇應用。目前已邀請了國內推動 Hadoop 教學、軟體開發、社群建立的幾位同好來進行知識分享,包括舊班底:台灣雅虎台灣大學通訊與多媒體實驗室國網中心雲端運算研究小組,亦邀請到來自成功大學 PhiCloud逢甲大學地理資訊系統研究中心東海大學高效能計算實驗室高雄應用科技大學雲端技術與神經行銷學實驗室的中南部夥伴,還有趨勢科技的業界專家來跟大家分享 Hadoop 與 HBase 方面的研究成果。希望透過此次會議,讓更多有興趣瞭解 Hadoop 的夥伴相互交流,進行凝聚出台灣區的 Hadoop 社群。
    本會議不收取任何報名費用,歡迎各界踴躍參加。礙於此次會議場地座位有限,請速上網報名(http://registrano.com/events/hadoop-tw-2010),額滿為止。



議程


08:30 ~ 09:10 報  到 (Registration)
09:10 ~ 09:50 講 題:抓抓龍:輕鬆打造個人化搜尋引擎
Crawlzilla : Build Search Engine by Yourself Easily

講 者:陳威宇,國網中心軟體技術組
09:50 ~ 10:30

講 題:Hadoop 於 GIS 上之應
Developing GIS Applications using Hadoop
講 者:辜文元,逢甲地理資訊中心

10:30 ~ 10:40 中場休息 (Break)/ 大會供應茶點
10:40 ~ 11:20 講 題:結合雲端分散儲存與 Nutch 搜尋引擎之影音網站
Building Youtube-like portal based on Nutch and Distributed Storage
講 者:東海大學高效能計算實驗室
11:20 ~ 12:00 講 題:Large-scale multimedia data processing on Hadoop
講 者:吳冠龍、謝良奇,台灣大學通訊與多媒體實驗室
12:00 ~ 13:00 午  餐 (Lunch) / 大會供應餐盒
13:00 ~ 13:40 講 題:Toward to next-generation database/datastore
講 者:蘇晏良,成功大學 PhiCloud
13:40 ~ 14:20 講 題:HBase Security and coprocessors
講 者:Gary Helmling / Andrew Purtell, HBase Contributor / Trend Micro USA
14:20 ~ 14:30 中場休息 (Break)/ 大會供應茶點
14:30 ~ 15:10 講 題:Oozie: Server-based Workflow Engine
講 者:陳奕瑋,台灣雅虎
15:10 ~ 15:50 講 題:Processing World Wide Domain Information
講 者:Ray Liao and Jerry J Wu, Trend Micro, Taiwan
15:50 ~ 16:30

講 題:跨雲端平台的虛擬資料層架構設計與實例
A Cloud-independent Architecture and Implementation of Virtual Data Layer

講 者:趙國仁、葉蕙菱,高雄應用科技大學 雲端技術與神經行銷學實驗室

 


交通資訊


台灣高鐵:搭乘高鐵至高鐵台中站

  • 接駁一:在高鐵台中站六號出口搭乘高鐵快捷公車(高鐵台中站-東海大學-中科管理局 )至中科管理局站下車,再搭乘中科巡迴巴士(綠線/西屯線)至格網中心站(東大路科園路口)下車,步行五分鐘即可到達。
  • 接駁二: 在高鐵台中站六號出口搭乘中科巡迴巴士(橘線/高鐵線) 直達中科管理局站,再搭乘中科巡迴巴士(綠線/西屯線)至格網中心站(東大路科園路口)下車,步行五分鐘即可到達。
  • PS. Jazz 分享小撇步:若當天到東海大學站以後,車上有多位要到會場的夥伴,可以凹司機在科園路與東大路的交叉路口讓各位下車,直接步行往科園路,可以節省多轉一次的困擾。
10-12-01_高鐵建議車次.png

自行開車:

北上方向
路線一 [國道一號] 下中港交流道(往沙鹿方向)→銜接至中港路(車行約十分鐘)→右轉東大路(車行約五分鐘)→進入中科。
路線二 [國道三號] 下龍井交流道(往台中方向) →銜接至中棲路(車行約五分鐘)→左轉東大路(車行約五分鐘)→進入中科。
南下方向
路線一 [國道一號] 下大雅交流道(往大雅方向)→銜接至中清路(車行約十分鐘)→左轉科雅路(車行約二分鐘)→進入中科。
路線二 [國道三號] 下沙鹿交流道(往台中大雅方向)→銜接至中清路(車行約十分鐘)→右轉科雅路(車行約二分鐘)→進入中科。
  • PS. Jazz 小撇步:自行開車前往者,可於科園路迴轉,停於中興大學育成中心側邊的免費停車場。

科園路與東大路口.png

東大路與科園路交叉路口街景

格網中心公車站牌.png

東大路格網中心公車站牌街景


hadoop-tw.jpg


第二屆台灣 Hadoop 使用者社群會議
Hadoop Taiwan User Group Meeting 2010


  感謝去年國內 Hadoop 使用者社群的踴躍支持,第一屆台灣 Hadoop 使用者社群會議可以募集到如此多參與者,讓我們感到十分意外。今年感謝有業界朋友邀請我們針對 Hadoop 與 HBase 進行教育訓練課程。秉持取之於自由軟體,用之於自由軟體的精神,將委託金額部份挪出來辦此次活動,希望可以藉此次活動聽到更多台灣 Hadoop 使用者的新奇應用。目前已邀請了國內推動 Hadoop 教學、軟體開發、社群建立的幾位同好來進行知識分享,包括舊班底:台灣雅虎台灣大學通訊與多媒體實驗室國網中心雲端運算研究小組,亦邀請到來自成功大學 PhiCloud逢甲大學地理資訊系統研究中心東海大學高效能計算實驗室的中南部夥伴來跟大家分享 Hadoop 方面的研究成果。希望透過此次會議,讓更多有興趣瞭解 Hadoop 的夥伴相互交流,進行凝聚出台灣區的 Hadoop 社群。

   本會議不收取任何報名費用,歡迎各界踴躍參加。礙於此次會議場地座位有限,請速上網報名(http://registrano.com/events/hadoop-tw-2010),額滿為止。

  目前暫訂議程如下,若有興趣分享您使用 Hadoop, HBase, Cassandra, Thrift 等專案的經驗,歡迎來信jazz-mail.png,告知您希望分享的主題、講者姓名與單位名稱、希望排定的時間,謝謝!

09:00 ~ 09:30 報  到 (Registration)
09:30 ~ 10:10 講 題:Build Search Engine by Yourself Easily
講 者:陳威宇,國網中心
10:20 ~ 11:00 講 題:Hadoop 於 GIS 上之應用
講 者:辜文元,逢甲地理資訊中心
11:10 ~ 11:50 講 題:結合雲端分散儲存與 Nutch 搜尋引擎之影音網站
講 者:東海大學楊朝棟教授團隊成員
11:50 ~ 13:00 午  餐 (Lunch)
13:00 ~ 13:40 講 題:Toward to next-generation database/datastore
講 者:蘇晏良,成功大學 PhiCloud
13:50 ~ 14:30 講 題:Oozie: Server-based Workflow Engine
講 者:陳奕瑋,台灣雅虎
14:40 ~ 15:20 講 題:Large-scale multimedia data processing on Hadoop
講 者:吳冠龍、謝良奇,台灣大學通訊與多媒體實驗室
15:30 ~ 16:10 講 題:Processing World Wide Domain Information
講 者:Ray Liao and Jerry J Wu, Trend Micro, Taiwan
16:20 ~ 16:40 講 題:跨雲端平台的虛擬資料層架構設計與實例
講 者:葉蕙菱,高雄應用科技大學 雲端技術與神經行銷學實驗室

工商服務一下,代某知名半導體廠貼一下職缺。

Job description:

  • Study and implement cloud computing technologies and provide proposal for critical system availability improvement for high volume data processing improvement.
  • Collaborate with project teams to pilot and promote cloud computing technologies.
Job requirement:

  • MS degree or above in computer science or related disciplines.
  • At lease 2-year experience in the Hadoop/map reduce, virtualization, grid computing or cloud computing.
  • Ability to learn and apply new technologies quickly.
  • Self motivated, good teamwork and problem solving skill.
  • Experienced in data center management  related fields is a plus.
  • Fluent English communication skill is a plus (oral and written).
工作地點:新竹

履歷資料或相關職缺問題請寄至 yytai AT tsmc DOT com