(2)掌握Python/Django,Hive,Linux,Spark Streaming,ElasticSearch。
(3)掌握J(rèn)ava基礎(chǔ),Hado" />
(1)兩個(gè)大數(shù)據(jù)BI系統(tǒng)從設(shè)計(jì)到實(shí)現(xiàn),分別為核心開發(fā)者和后端負(fù)責(zé)人。
(2)掌握Python/Django,Hive,Linux,Spark Streaming,ElasticSearch。
(3)掌握J(rèn)ava基礎(chǔ),Hadoop生態(tài),web生態(tài)與數(shù)據(jù)庫,restful RPC,SQL和NoSQL。
(4)長(zhǎng)期使用各Linux系統(tǒng),云產(chǎn)品,接入三方sdk等,文檔閱讀能力強(qiáng)。
(5)熟悉一些其他語言,入門級(jí)機(jī)器學(xué)習(xí)(增強(qiáng)學(xué)習(xí)),Docker。
XX手游SDK服務(wù)器后端
項(xiàng)目簡(jiǎn)介:
著迷網(wǎng)與合一集團(tuán)為發(fā)行游戲推出的手游SDK,其中提供有用戶系統(tǒng),支付與三方登錄,綁定等功能,連接內(nèi)容提供商與用戶端,傳統(tǒng)的后端,django+mysql+redis實(shí)現(xiàn)。
個(gè)人職責(zé):
(1)和IOS與Android前端配合,進(jìn)行版本功能控制。
(2)設(shè)計(jì)并開發(fā)客服系統(tǒng),允許權(quán)限賬號(hào)進(jìn)行補(bǔ)單/查單,大R賬戶查詢等。
(3)對(duì)已有接口進(jìn)行修改維護(hù),包括但不限于:
合服,分離接口功能,修復(fù)bug,內(nèi)部系統(tǒng),結(jié)構(gòu)控制,兼容國(guó)內(nèi)與海外等。
(4)對(duì)新需求實(shí)現(xiàn)新接口,包括但不限于:
微信/google/愛貝/MOL/分期支付,微信/微博/qq登錄,綁定三方賬號(hào)等。
(5)更新部署與維護(hù)。(Celery,Supervisor,Uwsgi,Nginx)
XX數(shù)據(jù)平臺(tái)(BI系統(tǒng))
項(xiàng)目簡(jiǎn)介:
公司整體的大數(shù)據(jù)平臺(tái),囊括數(shù)十款移動(dòng)端游戲和一些運(yùn)維向數(shù)據(jù)分析,由各語言的SDK提供數(shù)據(jù)報(bào)送通訊,收入后進(jìn)行ETL,之后開始分析出報(bào)表,由restful RPC 提供分析報(bào)表的查詢,包含有周期性的批處理數(shù)據(jù),以及當(dāng)日實(shí)時(shí)數(shù)據(jù)報(bào)表。除此以外,還提供有記錄服務(wù)(對(duì)大量?jī)?nèi)容記錄進(jìn)行永久存儲(chǔ)與實(shí)時(shí)查詢)排序服務(wù)(海量數(shù)據(jù)快速實(shí)時(shí)排序)等平臺(tái)服務(wù)。
個(gè)人職責(zé):
(1)云服務(wù)選型及購(gòu)買,關(guān)聯(lián),維護(hù)以及環(huán)境搭建,項(xiàng)目部署與監(jiān)控(nginx,uwsgi,shell)。
(2)協(xié)助運(yùn)營(yíng)方確定數(shù)據(jù)分析需求,根據(jù)需求設(shè)計(jì)事件打點(diǎn)與字段。
(3)提供接口(django)與Java SDK,協(xié)助完成PHP,Lua SDK,異步報(bào)送采集數(shù)據(jù)。
(4)對(duì)接收到的數(shù)據(jù)分別進(jìn)行流分析(spark streaming)和批處理(beeline,hive),產(chǎn)出歷史與實(shí)時(shí)數(shù)據(jù),并將報(bào)表數(shù)據(jù)入庫(elasticsearch)。
(5)提供基于Elasticsearch的排序服務(wù)和記錄服務(wù)。
(6)提供高度抽象restful API(django實(shí)現(xiàn)),供各產(chǎn)品后端展示,與服務(wù)使用方調(diào)用。
(7)對(duì)公司運(yùn)營(yíng)向決策提供大數(shù)據(jù)支持,以及異常排查,危險(xiǎn)預(yù)警。
公司整體的大數(shù)據(jù)平臺(tái),囊括數(shù)十款移動(dòng)端游戲和一些運(yùn)維向數(shù)據(jù)分析,由各語言的SDK提供數(shù)據(jù)報(bào)送通訊,收入后進(jìn)行ETL,之后開始分析出報(bào)表,由restful RPC 提供分析報(bào)表的查詢,包含有周期性的批處理數(shù)據(jù),以及當(dāng)日實(shí)時(shí)數(shù)據(jù)報(bào)表。除此以外,還提供有記錄服務(wù)(對(duì)大量?jī)?nèi)容記錄進(jìn)行永久
django web系統(tǒng),使用簡(jiǎn)單的表單和數(shù)據(jù)庫,為某學(xué)校的老師提供簡(jiǎn)單的問卷統(tǒng)計(jì),和自動(dòng)短信提醒功能。