2019年Kafka和Spark成為大數(shù)據(jù)行業(yè)主流應(yīng)用

大數(shù)據(jù)(big data)是指無法在一定時(shí)間范圍內(nèi)用常規(guī)軟件工具進(jìn)行捕捉、管理和處理的數(shù)據(jù)集合，是需要新處理模式才能具有更強(qiáng)的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產(chǎn)。通過快速獲取、處理、分析以從中提取價(jià)值的海量、多樣化的交易數(shù)據(jù)、交互數(shù)據(jù)與傳感數(shù)據(jù)，其規(guī)模往往達(dá)到了PB(1024TB)級。不同機(jī)構(gòu)對大數(shù)據(jù)也有不同的定義。