我计划从SEC EDGAR下载基本数据(现金流,收入,资产负债表等)-我计划下载标准普尔500指数中的所有股票。有人知道可以使用FTP下载的数据/文件总量是否有上限吗?每天可以下载的数据有限制吗?
提前谢谢。
发布于 2016-12-11 12:56:43
我希望你能得到你需要的数据/文件-- FTP的时间已经不多了。美国证券交易委员会宣布将在年底永久终止FTP服务。
https://www.sec.gov/edgar/searchedgar/ftpusers.htm
与此同时,听起来他们只是要求你要有礼貌:
为了保证公平的服务器访问,我们要求在东部时间晚上9点到早上6点之间执行批量传输请求。请使用高效的脚本,只下载您需要的内容,并将请求留出空间以最大限度地减少服务器负载。
发布于 2017-11-02 02:45:47
当ftp关闭时,我使用像这样的基本url来下载文件。
base_url = "https://www.sec.gov/cgi-bin/browse-edgar?action=getcompany&CIK="+str(cik)+"&type="+str(type)+"&dateb="+str(priorto)+"&owner=exclude&output=xml&count="+str(count)您只需在看到str(*)的地方填写相关信息即可。
我没有遇到任何限制,除了当SEC管理员阻止我,如果我同时发送多个请求。为了避免这种情况,我在每个请求之间放置了sleep(0.5)。
发布于 2017-01-09 18:18:15
关于关闭ftp,您可以将URI中的ftp://ftp.sec.gov/部分替换为https://www.sec.gov/Archives/,然后继续以与以前几乎相同的方式继续下载。
https://stackoverflow.com/questions/36817262
复制相似问题