一、需求描述:
需要爬取美團(tuán)攜程的酒店數(shù)據(jù),整套解決方案包括IP地址自動(dòng)切換、分布式爬蟲、定時(shí)全量更新功能、私有云部署。
數(shù)據(jù)分兩個(gè)表:第一個(gè)表是酒店的信息,第二個(gè)表是酒店內(nèi)房型的信息。
兩張表,具體字段如下:
酒店id,房型名稱,價(jià)格,門店價(jià)格,銷量,早餐wifi,有效期,預(yù)約方式,入住須知,使用規(guī)則,溫馨入住,詳情描述,介紹圖片,url
酒店id,城市,區(qū)域,酒店名稱,起價(jià),特色,評(píng)分,地址,封面圖,所有圖,經(jīng)緯度,聯(lián)系方式,酒店信息,酒店簡介,酒店設(shè)施,酒店服務(wù),房間設(shè)施,url
二、合作方式:
項(xiàng)目制,遠(yuǎn)程開發(fā)