之前在課堂上進行說明時,是用下面的圖表進行說明
在一般的工作場合中,資料源來基本上幾乎是已經資料庫為主
差別可能在A公司用得是Oracle
B公司用得是DB2
但是有沒有可能會有需要從網頁上直接捉資料的場合呢?
也許有的人會說 Excel 也有提供一個功能叫從網頁匯入
但是基本上這種的只能匯入某些類型的網頁資料
現在網站的資料呈現方式已經完全比照單機了
就像大家在不同的地方、不同的電腦登入Facebook時
可能早就忘了自己在上網
而以為自己是在玩一套社交遊戲(Facebook的本質好像也是交友遊戲 ^ ^)
舉例來說
像是研究相機的人
可能都會知道這個網站 http://www.dxomark.com/index.php/Cameras/Camera-Sensor-Ratings
這網站提供了相機最重要的感光元件的各項資料數據與比較
網站的介面已經相當完備
但總是有可能會發生
我想要呈現的資料表達方式,該網站沒有提供
在前幾年,吳老師曾經利用這個網站提供的資訊編制了很豐富的Google文件(試算表)
然後那是用手工的方式
有沒有更快更便捷的方式
可以直接將網站上的資料存在一般關聯式資料庫中所要求的資料表型式呢?
有的,Google提供一種有趣的工具
https://developers.google.com/appengine/docs/python/urlfetch/overview
只要利用Google 提供的完整API
你甚至可以將每台相機的感光元件的資料直接存在 Google 文件上
一來可以保證每次都有最新的資料來源
二來也可以共享給其他人
這類的應用雖然不屬於 Excel
但也是在資料分析的範圍中
目前我還在研究這類的議題
等之後時間比較多一點,再來進行一些簡單的示例
