PiFlow是一個功能強大的大數(shù)據(jù)流水線系統(tǒng),基于分布式計算框架Spark開發(fā)使用它可以進行高效的數(shù)據(jù)采集、清洗、計算和存儲等功能。并且可以將數(shù)據(jù)可視化,通過各種線形圖、柱狀圖和餅狀圖等等直觀將數(shù)據(jù)展現(xiàn)出來。
軟件特色
使用方便
提供所見即所得的Web界面來配置數(shù)據(jù)流
監(jiān)控數(shù)據(jù)流狀態(tài)
檢查數(shù)據(jù)流日志
提供檢查點
強大的可擴展性:
支持定制的數(shù)據(jù)處理組件開發(fā)
出眾的表演
基于分布式計算引擎Spark
強大
提供100多種數(shù)據(jù)處理組件
包括spark,mllib,hadoop,hive,hbase,solr,redis,memcache,elasticSearch,jdbc,mongodb,http,ftp,xml,csv,json等
使用要求
JDK 1.8
Scala-2.11.8
Apache Maven 3.1.0或更高版本
Spark-2.1.0,Spark-2.2.0,Spark-2.3.0
Hadoop-2.6.0
更新內容
增加可視化分析功能,包括線性圖、柱狀圖、餅狀圖、散點圖;
增加可編程特性,無縫銜接上下游組件,按需在線開發(fā)和調試;
增加多語言特性,支持Scala、Python、Shell等多種語言的編程;
增加Spark依賴jar包管理

數(shù)據(jù)管理軟件在現(xiàn)今還是蠻受用戶們的喜愛的,軟件能夠快速的幫助你進行管理,將數(shù)據(jù)進行調整,幫助你很好的進行把控,有需求的用戶們一起來看看吧!

數(shù)據(jù)采集在現(xiàn)在的各行各業(yè)都是非常重要的,用戶們可以根據(jù)相關的數(shù)據(jù)來進行分析出各種不同的需求,這樣就能解決各種不同的問題,提高工作效率!
下載地址
裝機必備軟件
網友評論