2人贊同了該回答
? 數(shù)據(jù)分析,數(shù)據(jù)是根本。首先,我們要保證拿到的是可靠、真實的數(shù)據(jù),然后再把這些數(shù)據(jù)分析基礎運用到實際的工作業(yè)務中,好好理解業(yè)務邏輯,真正用數(shù)據(jù)分析驅(qū)動網(wǎng)站運營、業(yè)務管理,發(fā)揮數(shù)據(jù)的價值。那么,到底在哪里才能獲取到可靠的數(shù)據(jù)呢?拿到以后又怎樣去展示他們?
1.GitHub—Awesome Public Datasets
(https://github.com/caesar0301/awesome-public-datasets)
這個我一定要放第一個,太驚艷了。一個大神整理的非常全面的數(shù)據(jù)獲取渠道,包含各個細分領域的數(shù)據(jù)庫資源。領域科研研究,從這里開始。
涉及的領域包括:農(nóng)業(yè)、生物學、氣候、計算機網(wǎng)絡、數(shù)據(jù)科學、地球科學、經(jīng)濟學、教育、能源、金融學、GIS、圖像處理、機器學習、自然語言、神經(jīng)科學、物理學、心理學、社會科學....
oh,看到英語不用害怕。谷歌瀏覽器,你值得擁有。
2. 亞馬遜AWS
(https://aws.amazon.com/cn/datasets/?nc1=h_ls)
來自亞馬遜的跨科學云數(shù)據(jù)平臺,包含化學、生物學、經(jīng)濟學、天文學等多個領域的數(shù)據(jù)集。同樣是公開數(shù)據(jù)集,涉及領域較少但是非常權威。
3.UCI
?。╤ttp://archive.ics.uci.edu/ml/datasets.html)
加州大學歐文分校開放的經(jīng)典數(shù)據(jù)集,可以說非常經(jīng)典了,被很多機器學習實驗室采用。機器學習必選數(shù)據(jù)。
1.國家數(shù)據(jù)
?。╤ttp://data.stats.gov.cn/)
這個數(shù)據(jù)庫信息內(nèi)容涵蓋范圍全面、詳實,并且有些數(shù)據(jù)已經(jīng)做好了可視化,所以具有很高的實用性;基本只要和國情相關的信息都會在里邊發(fā)布;比如地區(qū)房價、工業(yè)、能源、居民消費總額、房地產(chǎn)投資甚至食品的平均價格。
國家統(tǒng)計數(shù)據(jù)庫包括歷年月、季、年度數(shù)據(jù),可通過數(shù)據(jù)庫“搜索”、選擇“指標”等方式,方便快捷地查詢到歷年、分地區(qū)、分專業(yè)的數(shù)據(jù)。
2.中華人民共和國國家統(tǒng)計局
(http://www.stats.gov.cn/)
這個網(wǎng)站的信息是比較宏觀的,國家統(tǒng)計局一般只發(fā)布全國和分省的宏觀統(tǒng)計數(shù)據(jù)。但如果想獲取市級、地級信息,也可以底部的友情鏈接中獲取。
網(wǎng)絡爬蟲,做數(shù)據(jù)分析的,相信大家都聽說過。但很多人就說,我不會寫Python,也沒時間學。很多公司需要數(shù)據(jù)的時候常常也會將要爬取的網(wǎng)站外包出去。但其實還有一種方式,就是采集器采集。
1.八爪魚采集器
?。╤ttp://www.bazhuayu.com/)
這是一款免費的數(shù)據(jù)采集工具,而且沒有功能限制,幾乎所有網(wǎng)站都能采集,最大的特點是上手快,免費采集幾萬條數(shù)據(jù)沒壓力,當然也有付費增值服務可選。
不得不承認,做數(shù)據(jù)分析的時候,我最喜歡的就是地圖了。因為可以自己選擇、編輯、繪制地圖。而地圖的美觀程度直接影響了我的心情。當然最重要的還是里面的開源數(shù)據(jù)。
1.OSGeo中國中心
?。╤ttp://www.osgeo.cn/)
OSGeo中國中心的使命是支持開源地理信息軟件和遙感軟件的開發(fā)以及推動其更廣泛的應用,尤其是幫助中國地區(qū)的用戶和開發(fā)者。涉及生態(tài)領域、地理、氣候資源較多。
2.ArcGIS
(https://hub.arcgis.com/pages/open-data)
3.OSM
?。╫penstreetmap.org/)
OpenStreetMap 是一個世界地圖,可依據(jù)開放許可協(xié)議自由使用、編輯、繪制。目標是創(chuàng)造一個內(nèi)容自由且能讓所有人編輯的世界地圖。設計屬于自己的地圖,從這里開始。
數(shù)據(jù)源的獲取我知道的都已經(jīng)分享給大家了。但拿到數(shù)據(jù)以后還需要用可視化工具展示出來。接下來我會整理關于如何展示數(shù)據(jù)的內(nèi)容。
發(fā)布于2023-04-20