做大數(shù)據(jù)分析，那么這個(gè)數(shù)據(jù)來源就需要有一個(gè)功能模塊來解決，它專門負(fù)責(zé)數(shù)據(jù)的收集。　　這個(gè)數(shù)據(jù)收集模塊就像是股神的手腳，負(fù)責(zé)從網(wǎng)絡(luò)上收集對(duì)應(yīng)的數(shù)據(jù)，這個(gè)模塊一個(gè)關(guān)鍵的組成部分就是爬蟲?！　H互聯(lián)網(wǎng)發(fā)展到今天，變成了體系龐雜內(nèi)容浩繁的網(wǎng)狀系統(tǒng)，這個(gè)系統(tǒng)上的信息節(jié)點(diǎn)規(guī)模數(shù)以十億計(jì)，這些節(jié)點(diǎn)可能包括臺(tái)式機(jī)、筆記本、服務(wù)器、大規(guī)模群組、智能手機(jī)、平板、智能導(dǎo)航終端、各類信息采集終端、信息發(fā)射終端等等等等?！　≈灰軌蜴溄由匣ヂ?lián)網(wǎng)，能夠與互聯(lián)網(wǎng)進(jìn)行數(shù)據(jù)交互的，都可以視為一個(gè)信息節(jié)點(diǎn)，比如遍布城市的各類監(jiān)控探頭，各類通訊基站，嚴(yán)格來說都屬于節(jié)點(diǎn)之一?！　∵@些節(jié)點(diǎn)為互聯(lián)網(wǎng)提供的數(shù)據(jù)類型也各種各樣，有文字，有數(shù)據(jù)，有圖表，有文檔，有視頻，有音頻，有數(shù)據(jù)庫；它們的表現(xiàn)形式各式各樣，有通用格式，...