datasci.co Data Science Program 讓公共服務變聰明的 《資料科學計畫》 2014.07.19 Etu 負責人 & DSP 執委 蔣居裕 (Fred Chiang) @fredchiang / [email protected]
May 08, 2015
datasci.co Data Science Program
讓公共服務變聰明的 《資料科學計畫》�
2014.07.19
Etu 負責人 & DSP 執委 蔣居裕 (Fred Chiang) @fredchiang / [email protected]�
datasci.co Data Science Program
故事的開始�
2
datasci.co Data Science Program
伯朗沒了,雲端未成,資料科學先行�
3
datasci.co Data Science Program
http://www.etusolution.com/training
Etu Training – 針對 Hadoop Big Data
L1-B 全員的 Big Data 第一天 L1-R 行銷者的精準推薦第一天� L1-A 技術人員的 Etu Appliance 第一天� L1-D 軟體開發者的 Hadoop 第一天� L1-H 軟體開發者的 NoSQL-HBase 第一天� L1-M 軟體開發者的 MapReduce 第一天� L1-V 資料分析者的 Visualization 第一天� L1-L 資料分析者的 RHadoop 第一天
L2-P 軟體開發者前進 Pig L2-I 軟體開發者前進 Hive L2-H 軟體開發者前進 NoSQL-HBase L2-V 資料分析者前進 Visualization L2-L 資料分析者前進 RHadoop
4
Small Data 就不需要資料科學嗎?
datasci.co Data Science Program
處理者�
分析者�
Source: Next-Gen Data Scientist, Dr. Rachel Schutt
70%~85% 的工作時間�
資料科學 End-to-End 流程�
5
策略者�
策略者�
datasci.co Data Science Program
DSP 緣起華山 – 2013.5.16 精誠在「科技釀造,寫意人生」
活動中提出「生活數據創新平台」�
6
datasci.co Data Science Program
Data Weekend #5 – 2013.8.17
http://www.slideshare.net/fchiangtw/data-weekend-5
7
datasci.co Data Science Program
Data Weekend #6 – 2013.9.28
8
datasci.co Data Science Program
《資料科學團隊養成計畫》 Data Science Program (DSP)
人才為本
應用為價值�
在3年內,為台灣培養300位
資料科學團隊成員�
9
CSR
Open Development
datasci.co Data Science Program
最後籌備期:2013.09.29 ~ 2013.12.13
執行委員會�
執行長 (CEO) / 執行秘書�
行政部�
營運長 (COO)�
教學部�
課程長 (CCO)�
行銷部�
行銷長 (CMO)�
顧問團�
顧問長�
10
datasci.co Data Science Program
codefortomorrow.org
11
datasci.co Data Science Program
DSP 已開課程 (持續開發中)�
1. Team Training:《團訓班》
2. Data ETL and Analysis with Python:《資料爬理析 Python 實戰班》;兩天上手政府資料分析
3. Finding Stories with Data Analysis:《看資料找故事工作坊》; 以政府採購標案為例 (Aug2-3)
12
datasci.co Data Science Program
資料科學 (Data Science) 的要素
分工� 團隊�
人� 知識�
技能�
工具�
資料�
Domain
Pain Point
Value Up
心法�
13
datasci.co Data Science Program
http://www.etusolution.com/DSP/edm_dsp2.html
14
datasci.co Data Science Program
專業分工組隊� • Campaigner • Analyst • Hygienist • Designer
15
datasci.co Data Science Program
datasci.co Data Science Program
Dataset 1:內政部不動產實價登錄資料�
• 民國 101.08 ~ 102.09 • 全台灣 • 租賃、買賣、預售 • 約 47 萬筆資料
17
datasci.co Data Science Program
Dataset 2:PIXNET Hackathon 開放資料�
1. 熱門照片的相關資料 (metadata)� 2. 相片的 EXIF 資料� 3. 人氣部落格的詮釋資料 (metadata)� 4. 人氣部落格的訪客記錄 (visitor logs)�
* 部落格與相片的內容資料,可以透過 PIXNET API 取得。�
18
datasci.co Data Science Program
Data Fiesta:DSP 結訓成果交流�
19
datasci.co Data Science Program
Team Project 團訓班第 1 期 團訓班第 2 期
#1 我要成為天聾人股份有限公司 《Bargaining Power》
無殼蝸牛聯盟 《房價正義》
#2 遊戲茄子 《驚爆房地產》
航海王 《部落客銀行》
#3 逆轉人生全球顧問股份有限公司 《小資男女翻身計畫》
愛。住易 《找尋銀髮幸福宅》
#4 光點選址服務 《小火鍋創業選址模型》
小資“救世“組 《千金買房‧萬金買鄰》
#5 財團法人避稅剋星 《土地買賣稅費異常資料查詢平台》
Captain 《Hot Zone》
20
datasci.co Data Science Program
愛。住易 -《找尋銀髮幸福宅》 Infographic download: http://goo.gl/fKdXXi
21
datasci.co Data Science Program
我從 DSP 團訓班學到的事�
1. 人才不缺;缺的是組織力� 2. 教育不缺;缺的是跨學科 End-to-End 串連� 3. 資料不缺;缺的是直接有力的開放策略�
4. 洞見不缺;缺的是行動�
22
datasci.co Data Science Program
多或少�
1 多一點生活,少一點憤義� 2 多一點策略,少一點包裝� 3 多一點資料,少一點想像�
4 多一點關聯,少一點加總�
23
datasci.co Data Science Program
資料與價值�
個人資料 Quantified-self Data
企業資料 Corporate
Data
NGO 資料 NGO Data
政府資料 Government
Data
個人價值� 商業價值� 社會價值�
國家戰略價值�
24
datasci.co Data Science Program
No Data, No Science Please be Smart, Government
we need the real (open) data for
many things good
25
datasci.co Data Science Program
DSP 的近期未來發展�
1 開發更多新課程,挖掘更多新講師� 2 發展企業與學校夥伴關係� 3 朝向社會企業法人化�
4 發展社群與志工�
26
datasci.co Data Science Program
thank you
27