需要金幣:![]() ![]() |
資料包括:完整論文 | ![]() |
![]() |
轉(zhuǎn)換比率:金額 X 10=金幣數(shù)量, 例100元=1000金幣 | 論文字?jǐn)?shù):12476 | ![]() | |
折扣與優(yōu)惠:團(tuán)購(gòu)最低可5折優(yōu)惠 - 了解詳情 | 論文格式:Word格式(*.doc) | ![]() |
摘要:為幫助大學(xué)生,社會(huì)從業(yè)人員了解當(dāng)前市場(chǎng)的就業(yè)環(huán)境和社會(huì)對(duì)人才的需求,也為幫助大學(xué)生更好的就業(yè)擇業(yè),使得大學(xué)生在學(xué)校中能夠及時(shí)了解社會(huì)的職位情況,以便及時(shí)的學(xué)習(xí)相應(yīng)的知識(shí)為就業(yè)提供支撐,但是目前互聯(lián)網(wǎng)沒有一款產(chǎn)品能夠?qū)崟r(shí)有效的反映出社會(huì)中的職位變化以供參考。因此,基于python分布式爬蟲的全國(guó)招聘數(shù)據(jù)分析平臺(tái)應(yīng)運(yùn)而生。 該平臺(tái)采用B/S模式,基于python開發(fā)。借助Python 完成招聘數(shù)據(jù)的爬取和清洗;依靠Elasticsearch數(shù)據(jù)搜索分析服務(wù),完成對(duì)百萬級(jí)招聘數(shù)據(jù)的聚合統(tǒng)計(jì)等操作;通過python的Flask框架完成webAPI,使用阿里云服務(wù)DataV完成網(wǎng)頁(yè)的編寫及簡(jiǎn)單的用戶交互體驗(yàn);使用阿里云服務(wù)器ECS實(shí)例完成云上環(huán)境的部署;綜合運(yùn)用各種技術(shù)來增強(qiáng)用戶體驗(yàn)效果。平臺(tái)采用python實(shí)時(shí)爬蟲自動(dòng)解析網(wǎng)頁(yè)數(shù)據(jù)入庫(kù),自動(dòng)完成實(shí)時(shí)數(shù)據(jù)分析,實(shí)時(shí)渲染數(shù)據(jù)可視化大屏,達(dá)到一目了然,數(shù)據(jù)實(shí)時(shí)有效,視覺沖擊力震撼的數(shù)據(jù)平臺(tái)效果[123]。 借助瀏覽器,教師可以了解社會(huì)招聘職位需求變化,學(xué)生了解社會(huì)嚴(yán)峻的就業(yè)形勢(shì),針對(duì)性的補(bǔ)充自己的理論知識(shí)和實(shí)踐能力,對(duì)自己的學(xué)業(yè)一定的知指導(dǎo)作用。系統(tǒng)可以較好,全面的展示社會(huì)職位的分布和變化,數(shù)據(jù)可視化大屏滿足基本的數(shù)據(jù)分析圖表。
關(guān)鍵詞:python爬蟲;數(shù)據(jù)清洗;Elasticsearch存儲(chǔ)分析;數(shù)據(jù)可視化
目錄 摘要 ABSTRACT 第1章 前言-4 1.1課題研究背景-4 1.2國(guó)內(nèi)外研究現(xiàn)狀-4 1.3平臺(tái)開發(fā)模式與運(yùn)行環(huán)境-4 1.3.1 B/S模式-4 1.3.2 開發(fā)與運(yùn)行環(huán)境-5 1.4課題研究?jī)?nèi)容-5 1.5課題研究目的與意義-5 1.5.1 研究目的-5 1.5.2 研究意義-5 1.6全文組織結(jié)構(gòu)-6 第2章 招聘數(shù)據(jù)分析平臺(tái)的系統(tǒng)分析-7 2.1可行性分析-7 2.2系統(tǒng)需求調(diào)研-7 2.3系統(tǒng)架構(gòu)分析-7 2.3.1 系統(tǒng)瓶頸分析-7 2.3.1 系統(tǒng)架構(gòu)圖-8 2.4系統(tǒng)需求分析-8 2.4.1功能需求分析-8 2.4.2非功能性需求分析-10 第3章 招聘數(shù)據(jù)分析平臺(tái)的設(shè)計(jì)-11 3.1系統(tǒng)架構(gòu)層次設(shè)計(jì)-11 3.2數(shù)據(jù)庫(kù)設(shè)計(jì)-11 3.2.1概念設(shè)計(jì)-11 3.4 代碼框架設(shè)計(jì)-14 3.4.1 爬蟲代碼設(shè)計(jì)-14 3.4.2 數(shù)據(jù)分析及可視化API設(shè)計(jì)-15 第4章 招聘數(shù)據(jù)分析平臺(tái)的實(shí)現(xiàn)-17 4.1主要功能模塊的實(shí)現(xiàn)-17 4.2 數(shù)據(jù)分析圖表解讀-20 4.3數(shù)據(jù)分析不足-20 4.3小結(jié)-20 第5章 招聘數(shù)據(jù)分析平臺(tái)的測(cè)試-21 第6章 總結(jié)與展望-25 6.1 總結(jié)-25 6.2 展望-25 附-錄-26 參 考 文 獻(xiàn)- 致 謝 |