Fromawktopig–美麗說數據統計變遷

第二十一期 《高性能數據庫應用之“美麗說”技術專場 》 主題一：《From awk to pig 美麗說數據統計變遷》 簡介： 1、美麗說簡介。 2、數據統計問題描述。 3、數據統計的變遷。 a、石器時代 單機單進程(python+shell(sed, awk)) 。 b、青銅時代 單機單進程多

第二十一期 《高性能數據庫應用之“美麗說”技術專場 》
主題一：《From awk to pig –美麗說數據統計變遷》
簡介：
1、美麗說簡介。 2、數據統計問題描述。 3、數據統計的變遷。 a、石器時代 –單機單進程(python+shell(sed, awk)) 。 b、青銅時代 –單機單進程多線程(mysql+python)。 c、農業時代 –單機多進程(hive+sqlite+python)。 d、工業時代 –多機多進程(hive+sqlite+python)。 e、信息時代 –hadoop集群(pig+python+java)。
嘉　賓：陳文江

原文地址：From awk to pig –美麗說數據統計變遷, 感謝原作者分享。

聲明：本網頁內容旨在傳播知識，若有侵權等問題請及時與本網聯系，我們將在第一時間刪除處理。TEL:177 7030 7066 E-MAIL:11247931@qq.com