據(jù)集:新手完整上手指南)
10 分鐘找到 36 類開源數(shù)據(jù)集新手完整上手指南【免費(fèi)下載鏈接】awesome-public-datasetsA topic-centric list of HQ open datasets.項(xiàng)目地址: https://gitcode.com/GitHub_Trending/aw/awesome-public-datasets你想做數(shù)據(jù)分析卻在幾百個(gè)公開數(shù)據(jù)集里挑花眼不知道哪個(gè)能用。awesome-public-datasets 把上千個(gè)高質(zhì)量數(shù)據(jù)源按 36 個(gè)主題歸類每條都帶簡介和可用性標(biāo)記倉庫里還自帶一份泰坦尼克號(hào)示例數(shù)據(jù)集。跟著這份指南走10 分鐘內(nèi)你就能找到數(shù)據(jù)并跑通第一次分析。第一次打開它一條命令克隆數(shù)據(jù)集清單你只需要裝好 Git沒有其他依賴。git clone https://gitcode.com/GitHub_Trending/aw/awesome-public-datasets克隆完你會(huì)得到兩樣?xùn)|西README.rst 是完整的數(shù)據(jù)目錄Datasets 文件夾里有一份泰坦尼克號(hào)乘客示例數(shù)據(jù)。打開 README 就能開工。核心能力拆解按主題找數(shù)據(jù)用領(lǐng)域定位而不是靠記名字清單按領(lǐng)域組織共 36 類從 Agriculture、Biology 一直到 eSports按字母序排列。想分析天氣直接定位到 ClimateWeather 分類WorldClim 全球氣候數(shù)據(jù)、Open-Meteo 開放天氣 API 都有條目。想做生物影像Biology 分類下有 1000 Genomes、Protein Data Bank 等四十多個(gè)條目。你不需要記數(shù)據(jù)集名字只需要知道自己屬于哪個(gè)領(lǐng)域??捎眯詧D標(biāo)先確認(rèn)數(shù)據(jù)能用再?zèng)Q定下載每個(gè)條目開頭都帶一個(gè)狀態(tài)圖標(biāo)。OK 表示鏈接可用FIXME 表示鏈接可能失效、需要驗(yàn)證元數(shù)據(jù)文件里標(biāo)注的待修復(fù)項(xiàng)??吹?FIXME 別急著下載先打開原地址確認(rèn)真?zhèn)?。失效就看下一條。清單足夠密每個(gè)分類通常有 5 到 10 條可選項(xiàng)容錯(cuò)成本很低。自帶示例數(shù)據(jù)下載之前先跑起來倉庫自帶 Datasets/titanic.csv.zip是壓縮后的泰坦尼克號(hào)乘客 CSV體積小、字段全解壓即可用。import zipfile, pandas as pd with zipfile.ZipFile(Datasets/titanic.csv.zip) as z: df pd.read_csv(z.open(titanic.csv)) print(df[Survived].mean())跑一下就能打印出平均生還率。它的用途是練手缺失值填充、分組統(tǒng)計(jì)、簡單畫圖全流程都能在這份小數(shù)據(jù)上走一遍。一個(gè)完整小案例把企鵝 CSV 做成物種統(tǒng)計(jì)圖場景你在數(shù)據(jù)小組分享只有 15 分鐘材料必須能現(xiàn)場復(fù)現(xiàn)。步驟動(dòng)作產(chǎn)出1克隆倉庫打開 README.rst36 類目錄在手2在 Biology 分類搜 Palmer Penguins記錄數(shù)據(jù)源地址一份新手友好的 CSV喙長、鰭長、物種等字段3下載并加載 CSV用中位數(shù)補(bǔ)齊 1-2 個(gè)缺失值無空值的表4按物種分組統(tǒng)計(jì)個(gè)體數(shù)、平均喙長3 行數(shù)字5畫柱狀圖并導(dǎo)出 PNG可直接放進(jìn)分享 PPT 的圖全程就是「查、下、洗、組」四步。數(shù)據(jù)在清單里找得到你省掉的是搜數(shù)據(jù)的時(shí)間而不是分析時(shí)間。常見問題與避坑FIXME 條目是不是就不能用不一定。它只是標(biāo)記鏈接曾被發(fā)現(xiàn)失效。先打開原地址驗(yàn)證能打開就照常使用打不開再換下一條。README 太長看不下去怎么辦別通讀直接搜。清單按字母序排列在編輯器里搜你領(lǐng)域的英文名Weather、Genomics、Traffic頁面會(huì)跳到對(duì)應(yīng)分類。英文簡介看不懂怎么判斷選哪條看三個(gè)信號(hào)數(shù)字告訴你規(guī)模100 品種、3.5B 頁面機(jī)構(gòu)名告訴你穩(wěn)定性USDA、EBI、NASA 都可靠格式告訴你上手難度CSV、JSON 最省事。titanic.csv.zip 是官方完整數(shù)據(jù)集嗎它是倉庫自帶的練手樣本用來跑通流程。做正式分析時(shí)按清單里的條目找到原始來源單獨(dú)下載核對(duì)。對(duì)照清單再開始克隆倉庫README.rst 能正常打開選定一個(gè)你即將使用的領(lǐng)域跳進(jìn)對(duì)應(yīng)分類驗(yàn)證至少一個(gè) OK 條目的鏈接存活跑通泰坦尼克示例數(shù)據(jù)打印一行統(tǒng)計(jì)結(jié)果收藏一條 FIXME 條目一周后復(fù)查想看最新更新在任意代碼托管站搜索項(xiàng)目名 awesome-public-datasets 即可進(jìn)入主頁。本文數(shù)據(jù)條目來自 awesome-public-datasets 開源清單原始數(shù)據(jù)版權(quán)歸各數(shù)據(jù)源所有商用前請(qǐng)單獨(dú)核對(duì)各自授權(quán)協(xié)議?!久赓M(fèi)下載鏈接】awesome-public-datasetsA topic-centric list of HQ open datasets.項(xiàng)目地址: https://gitcode.com/GitHub_Trending/aw/awesome-public-datasets創(chuàng)作聲明:本文部分內(nèi)容由AI輔助生成(AIGC),僅供參考