開放城市資料 (Open City Data)
Socrata 提供城市開放數據的 API。
對於像是 舊金山犯罪 的數據集,請到右上角的 API
標籤。
這會提供您 dataset identifier
(數據集識別碼)。
使用數據集識別碼來抓取特定城市 ID (data.sfgov.org
) 的特定表格 -
例如,舊金山 311 數據 的 vw6y-z8j6
。
例如,舊金山警察數據 的 tmnf-yvry
。
%pip install --upgrade --quiet sodapy
from langchain_community.document_loaders import OpenCityDataLoader
API 參考:OpenCityDataLoader
dataset = "vw6y-z8j6" # 311 data
dataset = "tmnf-yvry" # crime data
loader = OpenCityDataLoader(city_id="data.sfgov.org", dataset_id=dataset, limit=2000)
docs = loader.load()
WARNING:root:Requests made without an app_token will be subject to strict throttling limits.
eval(docs[0].page_content)
{'pdid': '4133422003074',
'incidntnum': '041334220',
'incident_code': '03074',
'category': 'ROBBERY',
'descript': 'ROBBERY, BODILY FORCE',
'dayofweek': 'Monday',
'date': '2004-11-22T00:00:00.000',
'time': '17:50',
'pddistrict': 'INGLESIDE',
'resolution': 'NONE',
'address': 'GENEVA AV / SANTOS ST',
'x': '-122.420084075249',
'y': '37.7083109744362',
'location': {'type': 'Point',
'coordinates': [-122.420084075249, 37.7083109744362]},
':@computed_region_26cr_cadq': '9',
':@computed_region_rxqg_mtj9': '8',
':@computed_region_bh8s_q3mv': '309'}