基本信息
案例ID:202851
技術(shù)顧問:Ai-Mr 芮 - 6年經(jīng)驗(yàn) - 視若飛信息科技有限公司

項(xiàng)目名稱:網(wǎng)絡(luò)輿情態(tài)勢感知
所屬行業(yè):企業(yè)服務(wù) - 數(shù)據(jù)服務(wù)
->查看更多案例案例ID:202851
技術(shù)顧問:Ai-Mr 芮 - 6年經(jīng)驗(yàn) - 視若飛信息科技有限公司
項(xiàng)目名稱:網(wǎng)絡(luò)輿情態(tài)勢感知
所屬行業(yè):企業(yè)服務(wù) - 數(shù)據(jù)服務(wù)
->查看更多案例在國產(chǎn)V10麒麟系統(tǒng)中搭建CDH6.3.2集群,實(shí)現(xiàn)對每天爬取的輿情數(shù)據(jù)進(jìn)行分層處理,清洗好的數(shù)據(jù)發(fā)送到ES集群,供前后端人員使用,我在其中負(fù)責(zé)CDH集群的搭建和維護(hù)、輿情實(shí)時(shí)數(shù)倉的搭建、負(fù)責(zé)Kafka集群中的數(shù)據(jù)清洗和入庫、負(fù)責(zé)數(shù)據(jù)質(zhì)量監(jiān)控體系的搭建和維護(hù)