項(xiàng)目1
了解爬蟲與Python爬蟲環(huán)境

項(xiàng)目背景

隨著互聯(lián)網(wǎng)的快速發(fā)展，越來越多的信息被發(fā)布到互聯(lián)網(wǎng)上。發(fā)布后的信息都會(huì)被嵌入各式各樣的網(wǎng)站結(jié)構(gòu)當(dāng)中，雖然搜索引擎可以輔助人們尋找這些信息，但是搜索引擎也存在局限性。通用的搜索引擎的目標(biāo)是盡可能覆蓋全網(wǎng)絡(luò)，其難以針對(duì)特定的目的和需求進(jìn)行索引。面對(duì)如今結(jié)構(gòu)越來越復(fù)雜，且信息含量越來越密集的數(shù)據(jù)，通用的搜索引擎很難對(duì)數(shù)據(jù)進(jìn)行有效的發(fā)現(xiàn)和獲取。在上述背景下，網(wǎng)絡(luò)爬蟲應(yīng)運(yùn)而生，它為互聯(lián)網(wǎng)數(shù)據(jù)的應(yīng)用提供了新的方法。