第69章 情感問題 (第2/8頁)
怪味花生豆提示您:看後求收藏(貓撲小說www.mpzw.tw),接着再看更方便。
“這種收集速度太過緩慢了。”
雖然說網絡爬蟲已經是很有效率的信息抓取手段,但他畢竟只是一個小公司,沒有巨大的流量做支撐。
如果換成千度、企鵝這種幾乎壟斷生態的企業,網絡爬蟲的效率就會成倍增加。當然了,這些企業也是這樣做的,釋放爬蟲抓取用戶個人信息什麼的,在正常不過了。
“零,分析一下,如何獲取加快信息獲取效率?”
“正在分析……您可以使用分佈式算法。”
分佈式算法?
分佈式算法的前提是,要有一臺合用的終端,比如說三臺個人電腦,一臺個人電腦的運算力不足,那麼利用分佈式算法,就可以整個三臺個人電腦的運算力,將其變成一個整體,將一個完整的任務分割成不同的部分,再同時在三臺電腦上同時進行運算。
這樣一來,可以大大增加電腦的利用效率,節省時間。
但分佈式算法用在收集數據上?
似乎有些不可行。