Feng-Gao / shanghai-opendata

datashanghai.gov.cn

README.md

This is a scraper that runs on Morph. To get started see the documentation

Contributors

Last run failed about 10 hours ago with status code 999.

Console output of last run

Data

Downloaded 7 times by

data

To download data sign in with GitHub

Download table (as CSV) Download SQLite database (121 MB) Use the API

rows 10 / 223334

format	name	topics	today	updated	frequency	count	org	desc	tags	index_url	url	id	created
format csv	name 救助管理站	topics 民生服务	today 04/16/2019	updated 2018-11-21	frequency 每半年	count 3526/507	org 上海市民政局	desc 救助管理站的机构名称、所属区县、联系地址、联系电话、工作时间等信息。	tags 救助管理站	index_url http://data.sh.gov.cn/query!queryProduct.action?currentPage=56	url http://www.datashanghai.gov.cn/query!queryGdsDataInfoById.action?type=0&dataId=AA9002014007	id 1	created 2014-12-29
format csv\|api	name 社会救助管理机构	topics 机构团体	today 04/16/2019	updated 2018-11-21	frequency 每半年	count 3644/667	org 上海市民政局	desc 社会救助事务所等救助管理机构的名称、所属区县、所属街道、地址、邮编、联系电话和工作时间等信息。	tags 社会救助	index_url http://data.sh.gov.cn/query!queryProduct.action?currentPage=56	url http://www.datashanghai.gov.cn/query!queryGdsDataInfoById.action?type=0&dataId=AA9002014004	id 2	created 2014-12-29
format csv\|xls\|api	name 慈善救助服务社	topics 民生服务	today 04/16/2019	updated 2018-11-21	frequency 每半年	count 3643/735	org 上海市民政局	desc 慈善救助服务社的机构名称、所属区县、地址、电话、工作时间等信息。	tags 慈善救助服务社	index_url http://data.sh.gov.cn/query!queryProduct.action?currentPage=56	url http://www.datashanghai.gov.cn/query!queryGdsDataInfoById.action?type=0&dataId=AA9002014006	id 3	created 2014-12-29
format xls\|xls\|csv\|xls\|csv\|xls\|api\|api	name 农产品地理标志	topics 经济建设	today 04/16/2019	updated 2018-11-21	frequency 每年	count 6174/2107	org 上海市农业农村委员会	desc 上海市农委农产品质量安全中心认定的农产品地理标示信息，包括：申报单位、产品名称、登记证书编号、划定的区域保护范围等。	tags 农产品,地理标志	index_url http://data.sh.gov.cn/query!queryProduct.action?currentPage=56	url http://www.datashanghai.gov.cn/query!queryGdsDataInfoById.action?type=0&dataId=AB5002015018	id 4	created 2015-10-27
format xls\|csv\|xls\|csv\|csv\|xls\|xlsx\|xls\|xls\|xls\|xlsx\|api\|api\|api\|api	name 无公害、绿色、有机农产品认证	topics 民生服务	today 04/16/2019	updated 2018-11-21	frequency 每年	count 8835/4530	org 上海市农业农村委员会	desc 无公害、绿色、有机农产品认证包括产品名称、产品种类、生产地址、证书编号、证书有效期等信息。	tags 无公害，绿色，有机	index_url http://data.sh.gov.cn/query!queryProduct.action?currentPage=56	url http://www.datashanghai.gov.cn/query!queryGdsDataInfoById.action?type=0&dataId=AB5002014003	id 5	created 2014-11-14
format xls\|xls\|csv\|xls\|api	name 跨省引进乳用及种用动物调运审批信息	topics 经济建设	today 04/16/2019	updated 2018-11-20	frequency 每年	count 2058/229	org 上海市农业农村委员会	desc 本市有关企业通过市农委行政许可审批，跨省市引进乳用及种用动物，含企业名称、办理编码、发证日期、许可证编号信息。	tags 业名称,办理编码,发证日期,许可证编号	index_url http://data.sh.gov.cn/query!queryProduct.action?currentPage=56	url http://www.datashanghai.gov.cn/query!queryGdsDataInfoById.action?type=0&dataId=AB5002016003	id 6	created 2016-12-13
format xls\|csv\|xls\|xls\|api	name 渔业捕捞许可证审批	topics 经济建设	today 04/16/2019	updated 2018-11-20	frequency 每年	count 2531/345	org 上海市农业农村委员会	desc 根据市农委行政许可事项办理要求，通过渔业捕捞许可的有关信息，包括：企业/申请人，申请办理编号，发证日期，许可证编号等。	tags 企业/申请人,申请办理编号,发证日期,许可证编号	index_url http://data.sh.gov.cn/query!queryProduct.action?currentPage=56	url http://www.datashanghai.gov.cn/query!queryGdsDataInfoById.action?type=0&dataId=AB5002016004	id 7	created 2016-12-13
format csv\|api	name 国有博物馆备案相关信息	topics 文化休闲	today 04/16/2019	updated 2018-11-20	frequency 每年	count 2332/522	org 上海市文化广播影视管理局	desc 提供上海国有博物馆名单，包含地址、博物馆性质、质量等级等信息	tags 文化，博物馆	index_url http://data.sh.gov.cn/query!queryProduct.action?currentPage=56	url http://www.datashanghai.gov.cn/query!queryGdsDataInfoById.action?type=0&dataId=AB7002017001	id 8	created 2017-11-29
format xls\|csv\|api	name 上海各类博物馆情况一览表	topics 文化休闲	today 04/16/2019	updated 2018-11-20	frequency 每年	count 17983/9920	org 上海市文化广播影视管理局	desc 提供上海市各类博物馆名称、地址、联系电话、开放情况等信息，按区县分别排列	tags 博物馆	index_url http://data.sh.gov.cn/query!queryProduct.action?currentPage=56	url http://www.datashanghai.gov.cn/query!queryGdsDataInfoById.action?type=0&dataId=AB7002014001	id 9	created 2014-12-31
format xls\|csv\|csv\|csv\|api\|api	name 本市中心城区犬类管理信息	topics 民生服务	today 04/16/2019	updated 2018-11-20	frequency 每年	count 4782/1572	org 上海市农业农村委员会	desc 上海市中心城区犬只狂犬病免疫点，由市农委畜牧办提供，包括：区县、宠物诊所、地址、负责人、联系电话等信息。	tags 宠物,诊所,	index_url http://data.sh.gov.cn/query!queryProduct.action?currentPage=56	url http://www.datashanghai.gov.cn/query!queryGdsDataInfoById.action?type=0&dataId=AB5002015007	id 10	created 2015-10-26

Statistics

Average successful run time: 18 minutes

Total run time: about 2 months

Total cpu time used: about 3 hours

Total disk space used: 121 MB

History

Auto ran and failed about 10 hours ago.

run time 0 s
Auto ran and failed a day ago.

run time 0 s
Auto ran and failed 2 days ago.

run time 0 s
Auto ran and failed 3 days ago.

run time 0 s
Auto ran and failed 4 days ago.

run time 0 s
...
Created on morph.io 6 years ago

Show complete history

Scraper code

Python

shanghai-opendata / scraper.py

git clone URL