Bash Shell Pipeline 將資料一行一行分開處理 (read + while)

Linux Shell 處理資料, 大多都用 cat、sed、grep、awk ... 等等, 但這些都是對整堆資料處理, 若需要將這些資料額外一行一行拉出來另外處理的時候, 於 Shell script 要怎麼做?

閱讀全文〈Bash Shell Pipeline 將資料一行一行分開處理 (read + while)〉

色情行業 如何分析運用 數據資料 (Big Data)

情色行業的科技、技術都領先群雄, 這篇文章特別讓我感受良深~ 他們不打口號, 直接運用數據資料, 這才是 Big Data 的精華~

文章內的這段話, 講得非常寫實:

  • 如今,網路產業會如此之多如同過江之鯽,隨便找個會場坐下,估計不出一分鐘,就能聽到創新、大數據、雲端等幾個名詞。而在世界範圍上,很少有色情網站界的人士參加這種產業研討會,去暢談大數據。
  • 原因也許是因為他們離錢太近,他們更關注每次從數據引發的創新能否帶來收益上的變化,而不是去當專家空談。我一直有個狹隘不成熟的偏見,凡是在舞台上竄下跳,天天發軟文刷存在感的企業,往往是危機來臨的前兆。

這幾段話也寫得非常實在:

  • 在這個不缺創意缺實現的年代,想到什麼不重要,做出什麼才重要。
  • 很簡單,去發現用戶喜歡什麼,然後我們去滿足他們。
  • 多時候,數據就是這麼簡單,清清楚楚的放在那裡,任你蹂躪,但是如何用得漂亮,那就需要對數據對使用者的潛心研究。

閱讀全文〈色情行業 如何分析運用 數據資料 (Big Data)〉

免費電子書 - Startup 2.0 工程師創業手冊

一個年薪 600萬的人, 選擇創業後, 把心路歷程寫成書, 此書我也還沒看完, 有空可以參考看看~

  • 書: Startup 2.0 工程師創業手冊 (PDF) 備份
  • 註:原網站 http://startup20.org/ 已經失效,所以先把連結移除

作者網頁

  • 工程師創業手冊,終於集結成書了 | Startup 2.0 工程師創業手冊 - 高科技創業經驗分享

WebScaleSQL 為了能承載大規模、大資料量而打造的資料庫

大型的網路公司都遇到資料量太大的問題, 而 Facebook 跳下來說(詳見: WebScaleSQL: A collaboration to build upon the MySQL upstream)要改寫 MySQL(目前是改寫 5.6版), 改寫後的 MySQL 版本希望可以承受這種大資料量, 於是取名叫: WebScaleSQL.

而大規模、大資料量的問題, 中、大型的網路公司都會遇到, 有人自願跳下水, 其它公司自然也跟著要來 提出需求 提供幫忙, 所以 Google、LinkedIn、Twitter 也加入這個行列了~

於是由 Facebook、Google、LinkedIn、Twitter 一起合作打造的 WebScaleSQL 就誕生囉~ 期待看看後續的發展~

閱讀全文〈WebScaleSQL 為了能承載大規模、大資料量而打造的資料庫〉

PHP CURL 直接設定 Cookie 帶入

PHP 透過 CURL 設定讀寫 Cookie 的方式, 大部分都用下述兩個參數:

  • curl_setopt($ch, CURLOPT_COOKIEFILE, '/tmp/cookie_jar'); // 讀取
  • curl_setopt($ch, CURLOPT_COOKIEJAR, '/tmp/cookie_jar'); // 寫入

不過若讀取網站的 Cookie 一直寫不進去要怎麼辦? (我也不知道為何會寫不進去. orz.)

閱讀全文〈PHP CURL 直接設定 Cookie 帶入〉

好文 台灣肉圓 + 高雄特色肉圓 彙整

年度十大排名之類的看多了, 我還是喜歡個人整理的清單, 看到這個肉圓吃透透的專家, 同是高雄人, 自感慚愧. (這個應該列為 台灣十大肉圓.... 或者 台灣30大肉圓之類的..)

所以他的清單整理起來, 下次回高雄時, 可以沿路吃回去. XD

註: 此篇文章整理的內容大多是 2011~2012年的資料.

閱讀全文〈好文 台灣肉圓 + 高雄特色肉圓 彙整〉