[R]用R轉換資料結構-將矩陣型資料轉為一般資料格式

        之前抓了氣溫資料，但是因為解釋力不強，所以又開始到處找變數，這次看上的是雨量資料。這次雨量資料本國氣象局的網站就有提供了!
(中央氣象局  http://www.cwb.gov.tw/V7/climate/dailyPrecipitation/dP.htm)。
   
        這次的雨量資料非常詳細，不但有年份，月份，還有每日的資料，相當符合需求。但是天下沒有白吃的午餐，雨量資料的格式是沒有辦法直接與之前的資料結合並且進行分析的。雨量資料是採用類似九九乘法表、矩陣資料的形式，月份和日期各站一邊，兩者的交叉點就是當天的雨量資料。但是一般要進行統計分析，需要的資料格式是CASE和欄位。

[職涯] 如何進入市場調查/行銷研究業!搶佔2013全球最HOT工作!

        去年有篇文章"搶佔2013全球最HOT工作"( http://www.cheers.com.tw/article/article.action?id=5047051)中， 市場調查業在幾個雜誌的評比中都佔據了前十名的位置。其實這個結果也不難解釋，當傳統的大眾(喜好相對單一)轉為分眾時，消費者需求逐漸分化、多元、細緻，一般大眾化的產品已經無法滿足所有消費者的需求，商業環境由製造者本位轉為消費者本位，商業活動越來越重視消費者的需求和回饋，自然也需要有一批專業人士來作為消費者與製造商之間的橋樑，協助產品提供者了解消費者。


        這群專家橫跨生產與消費的兩端，自然也會比較需要跨領域的能力，無法被概括在任何一個單一的研究領域。一般的市場分析研究員的工作內容流程大致如下：

[R]用R抓網頁資料

        幾個月以前老闆丟了個問題"氣象跟業績會不會有關係啊？"，老闆請人當然就是為了解決問題，所以當下我馬上點頭如搗蒜答應了(殊不知才是痛苦的開始)。我當下想法很簡單，中央氣象局有OPEN DATA，從上面抓氣象資料就可以了。但是事實總比想像殘酷。第一，中央氣象局的OPEN DATA格式是XML格式，當時的我只會處理傳統結構化資料，對於網頁資料完全沒轍。第二，中央氣象局提供的氣溫資料只有月份資料!!!太粗糙啦!!根本不符合需求。所以當時就以沒有資料為藉口推掉了這個工作。

專案管理技巧分享

        當手上的分析專案越來越多，管理不同的專案變成一個令人頭大的事情。先前我都會將不同專案設置在不同資料夾，將相關的語法以及分析檔案放在一起。但是當專案越來越多，例如我今天分析銷量、明天分析折扣，其中有些DATA是共用的，或是有些分析步驟是共用的，如果重複擺放一來浪費空間，二來在分析時也會浪費不必要的時間，有時候還會涉及到版本的問題又更複雜，是個相當惱人的問題。

        在使用SAS EG時，由於每個分析的步驟都以圖像化的方式表現出來，在專案頁面也可以使用註解來標示，對於專案的管理相對容易，只要透過適當的註解和新的分析，就能將需要用到相似DATA和步驟的專案放在一起管理。

        R相對來說就沒有SAS EG那麼方便(賣那麼貴也不是賣假的)，但是精神差不多。我目前的作法也是利用R-Studio來建立專案，將相關的DATA和script放在一起，因為沒有圖形化介面，各檔案的名稱和關聯性必須標示的更加清楚，文件中的註解也絕對不能少，以現在專案的量來說，不用說半年前寫的，過了一個月再看程式碼都覺得陌生(難道是初老徵兆!)，有人說寫程式最難的就是命名和註解，可真是一點也不假。

圖片來源：http://wintlogix.com/project-management/

[R]最近投入了R的世界

     

        說實在的，在習慣SAS EG之後，實在很難習慣其他統計軟體，但是每年SAS的開銷實在不小，如果能夠從軟體上精簡成本，說不定老闆會把這筆錢拿來直接投資在我身上。

        其實四、五年前就接觸過R，但是當時R的介面實在很陽春，而且如果DATA又多又大，在原始的R裡面是很難查看的。但是最近上課認識一套很棒的IDE，讓R操作起來相對平易近人很多。

        這套IDE是叫做 RSTUDIO (https://www.rstudio.com/) 除了保有原本R的介面之外，另外還整合了Script、Data、以及Help視窗，對於不習慣直接寫script的人來說相當友善。

        這次認真地摸了一下R之後，發現R的幾個特色：

從反黑箱服貿協議看傳統媒體的沒落

反黑箱服貿協議[置頂] 3/19 19:00，隨時更新！
儲量、飲水目前已經充足，目前希望徵求各種 3C 電源產品：充電器、電池、行動電源，讓現場人員能和外界保持連線。請以帶自家存貨借用優先，訂購、捐贈前請到 http://bit.ly/occupylysupport確認最新需求。
現場堅持的信念，和網路遠端的關注與打氣成正比，請用力分享轉播連結，讓無法到場的朋友也能貢獻一份心意：
場外直播
濟南路 https://www.youtube.com/watch?v=XehUwbeYcz8青島東1 http://youtu.be/pptmdPk-0DQ青島東2 http://www.youtube.com/watch?v=Nxu0IlaF3CI場內直播（確認部分插座已被斷電 ）
網民版 http://www.ustream.tv/channel/longson3000蘋果版 http://www.appledaily.com.tw/live‪#‎佔領立法院‬ ‪#‎CongressOccupied‬★★★請大家發布相關訊息時，加入下面這兩個關鍵字（前面加#）
#佔領立法院 #CongressOccupied 之前的貼文也可以點進去改喔！
資料來源：https://www.facebook.com/antiblacktw/posts/617239568346888

"7.5 億台幣做 Full HD 轉型，專訪 TVBS 總經理楊鳴：我們已在生死存亡關頭上"?

7.5 億台幣做 Full HD 轉型，專訪 TVBS 總經理楊鳴：我們已在生死存亡關頭上
http://techorange.com/2014/03/07/interview-with-tvbs-general-manager-young-ming/
資料來源：科技橘報

文章大意：
        TVBS幾乎已經完成FULL HD轉型，但是系統業者線路無法支援。
        網路視頻沒有良好的獲利模式，傳統電視業者不敢進入，但是不進入觀眾又被網路瓜分掉。TVBS投入很多在網站了，但是沒有獲利很難繼續投入。

當行為紀錄器越來越方便和普及時

     

        文章網址http://technews.tw/2014/03/11/big-data-feed-the-world/

        文章中提到："例如在美國德克薩斯州將會有一個全新的資料收集實驗，Vital Herd 公司已經開發出一個可供牛隻吞嚥的小型電子感應器，感應器最後會停在牛隻的「瘤胃」（通常是反芻動物最大的一個胃）中，並利用聲納技術在牛的體內收集各種訊息，包括牛隻的心跳頻率、溫度、反芻的時間、胃酸濃度甚至雌激素分泌等資料。"

3.11日本大地震，日本YAHOO搜索關鍵字視覺化宣傳

          影片來源網址http://promo.search.yahoo.co.jp/searchfor311/
        今天是日本3.11大地震三周年，日本YAHOO結合了關鍵字搜尋和視覺化技術推出了這個宣導影片，只要你在日本YAHOO搜索關鍵字"3.11"，日本YAHOO將捐出10日圓做為賑災復興之用。整個影片只有文字和音樂，沒有任何圖片，卻也實在地反映了日人對於地震的驚慌以及地震後的關懷和援助，是個結合BIG DATA分析與公益很好的例子。

        其實在開始工作之後，更希望利用自己的專長為社會做些什麼。參與公益其實不限定慈善機構或社會機構，只要是在社會中的一份子，都可以利用自己的方式來讓社會環境變得更好。

     

資料分析鍊金術(七)-消費者分層-RFM模型原理與應用

        BIG DATA在行銷研究中其中一個重要應用就是將消費者分群，再依照不同族群的特性擬定不同的行銷策略以達到更精準的行銷策略及更佳的行銷效益。這樣分群>擬訂策略>效益評估是個標準的行銷研究流程，這篇文章只會提到第一個步驟-分群其中的某種方式而已。