SaaS業(yè)務(wù)平臺搭建,微服務(wù)架構(gòu)轉(zhuǎn)型
熟練使用 Python 開發(fā)數(shù)據(jù)處理、微服務(wù)接口。
熟悉 Hadoop、spark 等大數(shù)據(jù)組件" />
可賦能業(yè)務(wù)的大數(shù)據(jù)平臺包括:大數(shù)據(jù)系統(tǒng)架構(gòu),數(shù)據(jù)采集與挖掘,數(shù)據(jù)分析與用戶畫像。
SaaS業(yè)務(wù)平臺搭建,微服務(wù)架構(gòu)轉(zhuǎn)型
熟練使用 Python 開發(fā)數(shù)據(jù)處理、微服務(wù)接口。
熟悉 Hadoop、spark 等大數(shù)據(jù)組件及分布式架構(gòu)與使用。熟悉 TensorFlow 框架。 熟悉 docker、k8s 等容器相關(guān)技術(shù)。熟練掌握 Linux 系統(tǒng)下常用服務(wù)及服務(wù)性能優(yōu)化。 熟練掌握數(shù)據(jù)挖掘、數(shù)據(jù)清洗與格式化、數(shù)據(jù)分析技術(shù)。了解機(jī)器學(xué)習(xí)算法,了解推薦 系統(tǒng)設(shè)計。
了解項目管理,獲得 PMP 證書。熟悉網(wǎng)絡(luò),獲得 CCNP 證書
2018 年 - 2019 年:區(qū)塊鏈與數(shù)據(jù)可視化
職責(zé):基于 RPCA 共識機(jī)制的區(qū)塊鏈開發(fā)管理。開發(fā) Vue+nodejs 的數(shù)據(jù)可視化平臺。 2017 年 - 2018 年:JA 大數(shù)據(jù)平臺項目
職責(zé):開發(fā)基于 Openresty+Lua+Kafka 的數(shù)據(jù)采集端,使用 Python、Spark、 elasticsearch、Hbase 清洗數(shù)據(jù)與格式化數(shù)據(jù)。Python+Matlab 進(jìn)行數(shù)據(jù)訓(xùn)練和算法 設(shè)計,完成用戶畫像。開發(fā) Flask 數(shù)據(jù)查詢接口,與前端部門合作數(shù)據(jù)可視化?;?TensorFlow 的推薦系統(tǒng)。
2017 年 - 2018 年:網(wǎng)家 SaaS 平臺架構(gòu)
職責(zé):設(shè)計與架構(gòu)基于 docker+K8s+Qingcloud 和阿里云+Flask 的微服務(wù)管理與調(diào)度 平臺。負(fù)責(zé)基于 Lua+Python 的 SaaS 平臺的緩存設(shè)計與中間件開發(fā)。
設(shè)計與架構(gòu)基于 docker+K8s+Qingcloud 和阿里云+Flask 的微服務(wù)管理與調(diào)度 平臺。負(fù)責(zé)基于 Lua+Python 的 SaaS 平臺的緩存設(shè)計與中間件開發(fā)。
開發(fā)基于 Openresty+Lua+Kafka 的數(shù)據(jù)采集端,使用 Python、Spark、 elasticsearch、Hbase 清洗數(shù)據(jù)與格式化數(shù)據(jù)。Python+Matlab 進(jìn)行數(shù)據(jù)訓(xùn)練和算法 設(shè)計,完成用戶畫像。開發(fā) Flask 數(shù)據(jù)查詢接口,與前端部門合作數(shù)據(jù)可