數據太大十幾萬用什麼工具好?
問題是現在的數據量太大感覺excel超負荷了用什麼工具可以替換?
數據量一大Excel就容易卡死,幾十萬的數據就得跑幾個小時,對於海量數據處理,可以嘗試使用BDP個人版,億條數據秒級響應,個人的可以免費註冊~
支持幾十種可視化圖表,簡單拖拽就可以生成,還可以實現隨數據同步更新。
發佈於 03-04繼續瀏覽內容知乎發現更大的世界打開Chrome繼續Smartbi?已認證的官方帳號
Smartbi自助儀錶盤為企業級用戶提供數據自助分析服務,化數據為價值,有效解決企業大數據隱患,大幅度降低溝通成本,提高企業營運效率。
Smartbi自助儀錶盤零門檻、多維度做好數據分析,精準可靠,讓運營人員也可以完成「技術工作」。通過滑鼠拖拉拽即可快速完成數據集準備、可視化探索和儀錶盤的製作,簡單易用,還能通過抽取數據到MPP資料庫保證性能。
圖:自助儀錶盤示例
◆ 提供豐富的圖形資源庫,報表圖形任意切換,且不受維儀式、度量的限制。
◆ 支持業務主題和自助數據集,直接創建自助儀錶盤。
◆ 內置導出引擎,多格式一鍵導出。
◆ 多元的地圖功能:多種地圖類型(染色、散點、熱力),一鍵切換。
圖:自助儀錶盤各種圖形類型
◆ 圖表自定義跳轉:
1.支持基於當前頁面的圖表自定義跳轉到其他報表。
2.支持跑馬燈效果的製作。
3.支持4種打開方式:新窗口、tab頁,浮動窗等。
4.支持URL鏈接支持內外部資源互動
◆ 定時刷新數據,且對當前頁面的所有組件生效。
◆ 能夠使用富文本實現指標卡,支持插入單元格數據、組件及篩選器的欄位。
◆ 流式布局,支持發布到APP。
圖:自助儀錶盤移動端
為業務人員量身定做,一屏完成自助分析,界面清新脫俗,10分鐘掌握!看完介紹,按奈不住,想要上手一試,歡迎通過官網進入」體驗中心」在線體驗,也可以下載產品試用。
發佈於 03-05繼續瀏覽內容知乎發現更大的世界打開Chrome繼續可以使用R語言,幾千萬條數據都可以處理。
下面是我用R語言處理大量數據的案例:
R語言:大量數據(1600萬條)的分組分位數(極大值 90分位 75分位 中位數)
R語言:使用R語言比較兩個欄位不同的字元數
Smartbi自助儀錶盤為企業級用戶提供數據自助分析服務,化數據為價值,有效解決企業大數據隱患,大幅度降低溝通成本,提高企業營運效率。
Smartbi自助儀錶盤零門檻、多維度做好數據分析,精準可靠,讓運營人員也可以完成「技術工作」。通過滑鼠拖拉拽即可快速完成數據集準備、可視化探索和儀錶盤的製作,簡單易用,還能通過抽取數據到MPP資料庫保證性能。
圖:自助儀錶盤示例
◆ 提供豐富的圖形資源庫,報表圖形任意切換,且不受維儀式、度量的限制。
◆ 支持業務主題和自助數據集,直接創建自助儀錶盤。
◆ 內置導出引擎,多格式一鍵導出。
◆ 多元的地圖功能:多種地圖類型(染色、散點、熱力),一鍵切換。
圖:自助儀錶盤各種圖形類型
◆ 圖表自定義跳轉:
1.支持基於當前頁面的圖表自定義跳轉到其他報表。
2.支持跑馬燈效果的製作。
3.支持4種打開方式:新窗口、tab頁,浮動窗等。
4.支持URL鏈接支持內外部資源互動
◆ 定時刷新數據,且對當前頁面的所有組件生效。
◆ 能夠使用富文本實現指標卡,支持插入單元格數據、組件及篩選器的欄位。
◆ 流式布局,支持發布到APP。
圖:自助儀錶盤移動端
為業務人員量身定做,一屏完成自助分析,界面清新脫俗,10分鐘掌握!看完介紹,按奈不住,想要上手一試,歡迎通過官網進入」體驗中心」在線體驗,也可以下載產品試用。
發佈於 03-05繼續瀏覽內容知乎發現更大的世界打開Chrome繼續可以使用R語言,幾千萬條數據都可以處理。
下面是我用R語言處理大量數據的案例:
R語言:大量數據(1600萬條)的分組分位數(極大值 90分位 75分位 中位數)
R語言:使用R語言比較兩個欄位不同的字元數
可以使用R語言,幾千萬條數據都可以處理。
下面是我用R語言處理大量數據的案例:
R語言:大量數據(1600萬條)的分組分位數(極大值 90分位 75分位 中位數)
R語言:使用R語言比較兩個欄位不同的字元數
十幾萬,excel就行,超過100萬,Python,mysql都可以
這個要看你主要是需要對數據進行什麼操作了
如果是查詢/數據處理這類的,用資料庫就可以
如果是做圖、數據分析建議使用一些BI工具,例如Tableau、Power bi、BDP個人版,這些工具基本都可以滿足數據匯總、數據處理(關聯、聚合等等),以及可視化的製作
推薦閱讀: