需要金幣:![]() ![]() |
資料包括:完整論文 | ![]() |
![]() |
轉(zhuǎn)換比率:金額 X 10=金幣數(shù)量, 例100元=1000金幣 | 論文字?jǐn)?shù):15776 | ![]() | |
折扣與優(yōu)惠:團(tuán)購最低可5折優(yōu)惠 - 了解詳情 | 論文格式:Word格式(*.doc) | ![]() |
摘要:在21世紀(jì)的今天,人們開始進(jìn)入大數(shù)據(jù)時(shí)代,傳統(tǒng)的數(shù)據(jù)資料不再局限于書本文字形式,互聯(lián)網(wǎng)成為了信息數(shù)據(jù)資料存儲的關(guān)鍵,而如何有效的搜索并挖掘這些數(shù)據(jù)成為了一個(gè)難題,由此聚焦爬蟲技術(shù)應(yīng)運(yùn)而生。就研究爬蟲技術(shù)的現(xiàn)狀,分析了國內(nèi)外爬蟲研究的多方面應(yīng)用,如EbizSearch圖書館,STIP系統(tǒng)等其他主題搜索的聚焦爬蟲系統(tǒng)都有著豐富的應(yīng)用前景。 首先研究了搜索引擎和通用爬蟲技術(shù)原理及模型,工作流程,了解通用爬蟲的不足,進(jìn)而研究典型的聚焦爬蟲系統(tǒng)結(jié)構(gòu),重點(diǎn)分析了聚焦爬蟲的技術(shù)以及它的算法,著重于分析“優(yōu)先算法”并改進(jìn)算法,利用JAVA的多線程原理,從而提高“查全率”。 根據(jù)聚焦爬蟲技術(shù)發(fā)展的趨勢由兩部分構(gòu)成:數(shù)據(jù)采集分布化、網(wǎng)頁數(shù)據(jù)動態(tài)化。并使用AJAX,JavaScript技術(shù)研究動態(tài)化的網(wǎng)頁爬蟲系統(tǒng),更好的進(jìn)行目標(biāo)搜索分析。通過使用神箭手云爬蟲平臺,對雪球網(wǎng)滬深股市的信息咨詢進(jìn)行爬取,實(shí)現(xiàn)爬蟲技術(shù)在互聯(lián)網(wǎng)金融領(lǐng)域的應(yīng)用。 最后結(jié)合實(shí)例,通過支付寶信貸系統(tǒng)分析了聚焦爬蟲在互聯(lián)網(wǎng)金融行業(yè)的對數(shù)據(jù)資料特點(diǎn),及其應(yīng)用,更好的驗(yàn)證了聚焦爬蟲在互聯(lián)網(wǎng)金融領(lǐng)域的前景。
關(guān)鍵詞聚焦爬蟲;分析常見算法;AJAX;爬蟲應(yīng)用;互聯(lián)網(wǎng)金融
目錄 摘要 Abstract 1 緒論-1 1.1 研究背景-1 1.2 國內(nèi)外研究現(xiàn)狀-2 1.2.1 國外研究現(xiàn)狀-2 1.2.2 國內(nèi)研究現(xiàn)狀-3 2 聚焦爬蟲原理及其關(guān)鍵性技術(shù)研究-4 2.1 網(wǎng)絡(luò)爬蟲的概念-4 2.2 通用爬蟲-5 2.2.1 通用爬蟲的原理及模型-5 2.2.2 通用爬蟲的不足-7 2.3 聚焦爬蟲-7 2.3.1 聚焦爬蟲的系統(tǒng)結(jié)構(gòu)-7 2.3.2 聚焦爬蟲的關(guān)鍵技術(shù)-10 2.4 分析常見算法-12 2.4.1 廣度優(yōu)先搜索算法-12 2.4.2 最佳優(yōu)先搜索算法-13 2.4.3 算法的改進(jìn)-14 3 網(wǎng)絡(luò)爬蟲分析及其在互聯(lián)網(wǎng)金融的爬蟲應(yīng)用實(shí)現(xiàn)-16 3.1 網(wǎng)絡(luò)爬蟲技術(shù)的分析-16 3.1.1 數(shù)據(jù)采集分布化-16 3.1.2 網(wǎng)頁數(shù)據(jù)動態(tài)化-16 3.2 互聯(lián)網(wǎng)金融的爬蟲應(yīng)用實(shí)現(xiàn)-17 3.2.1 AJAX概述及其框架爬蟲系統(tǒng)的實(shí)現(xiàn)-17 3.2.2 JavaScript概述-18 3.2.3 互聯(lián)網(wǎng)金融的爬蟲應(yīng)用實(shí)現(xiàn)的具體操作-19 4聚焦爬蟲技術(shù)原理在互聯(lián)網(wǎng)金融領(lǐng)域的應(yīng)用前景-22 4.1 互聯(lián)網(wǎng)金融數(shù)據(jù)抓取特點(diǎn)-22 4.1.1 互聯(lián)網(wǎng)上金融領(lǐng)域數(shù)據(jù)的特點(diǎn)-22 4.1.2 互聯(lián)網(wǎng)金融領(lǐng)域網(wǎng)頁數(shù)據(jù)的獲取-22 4.2 聚焦爬蟲技術(shù)原理在互聯(lián)網(wǎng)金融領(lǐng)域的作用-23 4.2.1 網(wǎng)絡(luò)輿情的監(jiān)管-23 4.2.2 構(gòu)建客戶全景畫像-23 4.2.3 提高危機(jī)意識-23 4.2.4 金融領(lǐng)域垂直搜索-24 4.3 聚焦爬蟲與互聯(lián)網(wǎng)金融結(jié)合實(shí)例-24 結(jié)論-28 致謝-29 參考文獻(xiàn)-30 附錄-31 |