大數據采集技術
大數據采集技術就是對數據進行ETL操作,通過對數據進行提取、轉換、加載,最終挖掘數據的潛在價值。ETL,是英文 Extract-Transform-Load 的縮寫,數據從數據來源端經過抽取(extract)、轉換(transform)、加載(load)到目的端,然后進行處理分析的過程。用戶從數據源抽取出所需的數據,經過數據清洗,最終按照預先定義好的數據模型,將數據加載到數據倉庫中去,最后對數據倉庫中的數據進行數據分析和處理。