資料介紹
針對數(shù)字城市研究手段不足,尤其在收集大量研究文獻的基礎(chǔ)上對數(shù)字城市進行整體研究上的欠缺,本文基于R語言和Selenium框架設(shè)計了穩(wěn)定、高效的爬蟲程序,獲取了中國知網(wǎng)2018年5月前收錄的數(shù)字城市為主題的研究文獻,并建立了數(shù)字城市文獻數(shù)據(jù)庫和數(shù)字城市自動分詞模型。通過分析數(shù)字城市研究的時序性、空間分布特征和研究熱點,揭示了數(shù)字城市研究的發(fā)展歷程、現(xiàn)狀、發(fā)展趨勢和研究熱點。結(jié)果表明本文設(shè)計的網(wǎng)絡(luò)爬蟲程序在數(shù)字城市研究文獻的收集方面具有可行性和有效性。
數(shù)字城市源自“數(shù)字地球”的概念,是把城市的地理信息和其他與城市相關(guān)的信息結(jié)合并存儲在計算機網(wǎng)絡(luò)中,讓城市和城市外空間連接在一起的虛擬空間[1]。目前數(shù)字城市的建設(shè)在全國多個省份、城市中展開,行業(yè)應(yīng)用深入城市的各個領(lǐng)域。關(guān)于數(shù)字城市的研究,近年來雖然不乏技術(shù)和理論等方面的研究,但從獲取大量的數(shù)字城市研究文獻的角度對數(shù)字城市研究的發(fā)展歷程、現(xiàn)狀、發(fā)展趨勢、研究熱點的研究目前還沒有。
?
網(wǎng)絡(luò)爬蟲是依據(jù)程序,模擬訪問網(wǎng)頁、自動化提取網(wǎng)頁信息的腳本,是快速獲取網(wǎng)頁信息的一種方式。網(wǎng)絡(luò)爬蟲按照類型主要分為通用型爬蟲、面向主題爬蟲、分布式爬蟲三種,相比較而言面向主題爬蟲應(yīng)用廣泛,形式較為靈活,可針對特定的網(wǎng)頁數(shù)據(jù)進行設(shè)計高效的爬蟲程序。
本文采用面向主題的網(wǎng)絡(luò)爬蟲方法,以中國知網(wǎng)(National Knowledge Infrastructure, CNKI) 2018 年5 月前收錄的以數(shù)字城市為主題的文獻為研究對象,基于R 語言和Selenium 網(wǎng)絡(luò)框架設(shè)計出網(wǎng)絡(luò)爬蟲程序。該程序?qū)χ袊W(wǎng)的網(wǎng)頁進行分析,獲取網(wǎng)頁請求參數(shù),模擬瀏覽器請求和響應(yīng)服務(wù)器,最終獲取了數(shù)字城市研究文獻信息,將獲取到的數(shù)據(jù)同步保存到本地,構(gòu)建數(shù)字城市文獻數(shù)據(jù)庫(包括:編號、題名、作者、來源、發(fā)表時間、數(shù)據(jù)庫、被引、下載次數(shù)、作者單位、摘要、關(guān)鍵詞、資助基金共12 個字段)。并以數(shù)字城市文獻數(shù)據(jù)庫為數(shù)據(jù)基礎(chǔ),基于文本挖掘技術(shù)構(gòu)建了數(shù)字城市自動分詞模型,通過分析數(shù)字城市研究的時序性、空間分布特征和研究熱點,揭示了數(shù)字城市研究的發(fā)展歷程、現(xiàn)狀、發(fā)展趨勢和熱點。
數(shù)字城市源自“數(shù)字地球”的概念,是把城市的地理信息和其他與城市相關(guān)的信息結(jié)合并存儲在計算機網(wǎng)絡(luò)中,讓城市和城市外空間連接在一起的虛擬空間[1]。目前數(shù)字城市的建設(shè)在全國多個省份、城市中展開,行業(yè)應(yīng)用深入城市的各個領(lǐng)域。關(guān)于數(shù)字城市的研究,近年來雖然不乏技術(shù)和理論等方面的研究,但從獲取大量的數(shù)字城市研究文獻的角度對數(shù)字城市研究的發(fā)展歷程、現(xiàn)狀、發(fā)展趨勢、研究熱點的研究目前還沒有。
網(wǎng)絡(luò)爬蟲是依據(jù)程序,模擬訪問網(wǎng)頁、自動化提取網(wǎng)頁信息的腳本,是快速獲取網(wǎng)頁信息的一種方式。網(wǎng)絡(luò)爬蟲按照類型主要分為通用型爬蟲、面向主題爬蟲、分布式爬蟲三種,相比較而言面向主題爬蟲應(yīng)用廣泛,形式較為靈活,可針對特定的網(wǎng)頁數(shù)據(jù)進行設(shè)計高效的爬蟲程序。
本文采用面向主題的網(wǎng)絡(luò)爬蟲方法,以中國知網(wǎng)(National Knowledge Infrastructure, CNKI) 2018 年5 月前收錄的以數(shù)字城市為主題的文獻為研究對象,基于R 語言和Selenium 網(wǎng)絡(luò)框架設(shè)計出網(wǎng)絡(luò)爬蟲程序。該程序?qū)χ袊W(wǎng)的網(wǎng)頁進行分析,獲取網(wǎng)頁請求參數(shù),模擬瀏覽器請求和響應(yīng)服務(wù)器,最終獲取了數(shù)字城市研究文獻信息,將獲取到的數(shù)據(jù)同步保存到本地,構(gòu)建數(shù)字城市文獻數(shù)據(jù)庫(包括:編號、題名、作者、來源、發(fā)表時間、數(shù)據(jù)庫、被引、下載次數(shù)、作者單位、摘要、關(guān)鍵詞、資助基金共12 個字段)。并以數(shù)字城市文獻數(shù)據(jù)庫為數(shù)據(jù)基礎(chǔ),基于文本挖掘技術(shù)構(gòu)建了數(shù)字城市自動分詞模型,通過分析數(shù)字城市研究的時序性、空間分布特征和研究熱點,揭示了數(shù)字城市研究的發(fā)展歷程、現(xiàn)狀、發(fā)展趨勢和熱點。
- 網(wǎng)絡(luò)爬蟲,Python和數(shù)據(jù)分析 2次下載
- 用Python寫網(wǎng)絡(luò)爬蟲 21次下載
- 什么是網(wǎng)絡(luò)爬蟲使用Python寫網(wǎng)絡(luò)爬蟲的教程說明 3次下載
- 用Python寫網(wǎng)絡(luò)爬蟲的PDF電子書免費下載 9次下載
- 爬蟲是如何實現(xiàn)數(shù)據(jù)的獲取爬蟲程序如何實現(xiàn) 10次下載
- 如何設(shè)計一個網(wǎng)絡(luò)爬蟲程序進行智慧城市研究的獲取與分析 9次下載
- 如何使用大數(shù)據(jù)技術(shù)進行居民在夜間的情感變化研究資料分析 5次下載
- python爬蟲入門教程之python爬蟲視頻教程分布式爬蟲打造搜索引擎 29次下載
- 應(yīng)用Verilog HDL進行數(shù)字系統(tǒng)設(shè)計實例 88次下載
- 一種新型網(wǎng)絡(luò)爬蟲的設(shè)計與實現(xiàn)
- 一種新的網(wǎng)絡(luò)爬蟲帶寬控制策略
- 一種維護WAP網(wǎng)站的網(wǎng)絡(luò)爬蟲的設(shè)計
- 基于HTMLParser 信息提取的網(wǎng)絡(luò)爬蟲設(shè)計Design
- 用MatLab進行數(shù)字信號處理
- “數(shù)字城市”初步研究
- 如何使用 Verilog 進行數(shù)字電路設(shè)計 307次閱讀
- 如何看待Python爬蟲的合法性? 669次閱讀
- 網(wǎng)絡(luò)封包分析軟件——Wireshark抓包教程 1376次閱讀
- 爬蟲的學(xué)習(xí)方法 877次閱讀
- Python-爬蟲開發(fā)01 617次閱讀
- 網(wǎng)絡(luò)數(shù)據(jù)包分析軟件wireshark的基本使用 3060次閱讀
- 爬蟲技術(shù)為什么變成了害蟲?爬蟲技術(shù)到底犯了什么錯? 4276次閱讀
- 如何解決爬蟲被封的問題 5326次閱讀
- Python爬蟲8個常用的爬蟲技巧分析總結(jié) 5120次閱讀
- Python3網(wǎng)絡(luò)爬蟲入門實戰(zhàn)解析 5557次閱讀
- Python爬蟲速成指南讓你快速的學(xué)會寫一個最簡單的爬蟲 7115次閱讀
- Python學(xué)習(xí)爬蟲掌握的庫資料大全和框架的選擇的分析 5227次閱讀
- 網(wǎng)絡(luò)爬蟲教程(1):音樂歌單編寫 1171次閱讀
- 初學(xué)者寫Python爬蟲的四大工具 5849次閱讀
- 針對中小城市GSM網(wǎng)絡(luò)的網(wǎng)絡(luò)規(guī)劃和整治流程及方案分析 714次閱讀
下載排行
本周
- 1電子電路原理第七版PDF電子教材免費下載
- 0.00 MB | 1491次下載 | 免費
- 2單片機典型實例介紹
- 18.19 MB | 95次下載 | 1 積分
- 3S7-200PLC編程實例詳細資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識別和講解說明
- 4.28 MB | 18次下載 | 4 積分
- 5開關(guān)電源原理及各功能電路詳解
- 0.38 MB | 11次下載 | 免費
- 6100W短波放大電路圖
- 0.05 MB | 4次下載 | 3 積分
- 7基于單片機和 SG3525的程控開關(guān)電源設(shè)計
- 0.23 MB | 4次下載 | 免費
- 8基于AT89C2051/4051單片機編程器的實驗
- 0.11 MB | 4次下載 | 免費
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費
- 4LabView 8.0 專業(yè)版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費
- 5555集成電路應(yīng)用800例(新編版)
- 0.00 MB | 33562次下載 | 免費
- 6接口電路圖大全
- 未知 | 30320次下載 | 免費
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費
- 8開關(guān)電源設(shè)計實例指南
- 未知 | 21539次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費
- 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
- 78.1 MB | 537793次下載 | 免費
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費
- 6電路仿真軟件multisim 10.0免費下載
- 340992 | 191183次下載 | 免費
- 7十天學(xué)會AVR單片機與C語言視頻教程 下載
- 158M | 183277次下載 | 免費
- 8proe5.0野火版下載(中文版免費下載)
- 未知 | 138039次下載 | 免費
評論