了解挑战我们建议您先阅读本自述文件的全部内容,再考虑潜在的解决方案。复习这些示例并从高层次理解问题可能很有帮助,FAQ中涵盖了许多细节。投资者、研究人员、新闻工作者和其他人员经常使用美国证券交易委员会的电子数据收集、分析和检索(EDGAR)系统来获取财务文件,揭示公司的财务状况和新信息。SEC维护EDGAR网络日志,记录IP地址访问哪些公司的文档及时间。挑战在于建立一个管道,实时获取和分析用户在EDGAR上的访问数据,包括访问时间和文档数量。您作为数据工程师的任务是构建这样的管道。