文件名称:
cob_datapipeline:用于Blacklight数据的TUL目录的气流数据处理管道-源码
开发工具:
文件大小: 126kb
下载次数: 0
上传时间: 2021-03-17
详细说明：cob_datapipeline
cob_datapipeline是存储Airflow DAG（有向无环图，例如数据处理工作流）以及Temple大学图书馆的图书馆搜索（ ）索引工作流的相关脚本的存储库。
这些DAG（及相关脚本）预计将在Airflow安装中运行，类似于我们的构建的安装。
这些DAG的本地开发，质量检查和生产环境用法将在下面详细说明。
储存库结构
在制品。
气流期望
这些是库搜索DAG和脚本成功运行的气流期望。 这些适用于各种环境（开发，质量检查，生产）。
库和包
Python。 这些步骤已经过测试，并可以与以下Python版本一起使用： 3.6.8（pip版本18.1）
Python库：请参阅 。
Ruby（用于通过TUL_COB Rails应用程序运行Traject）。 这些步骤已通过以下Ruby版本进行了测试： 2.7.2
Ruby库：
rvm
安装
(系统自动生成,下载前可以参看下载内容)
下载文件列表
相关说明
- 本站资源为会员上传分享交流与学习,如有侵犯您的权益,请联系我们删除.
- 本站是交换下载平台，提供交流渠道，下载内容来自于网络，除下载问题外，其它问题请自行百度。
- 本站已设置防盗链，请勿用迅雷、QQ旋风等多线程下载软件下载资源，下载后用WinRAR最新版进行解压.
- 如果您发现内容无法下载，请稍后再次尝试；或者到消费记录里找到下载记录反馈给我们.
- 下载后发现下载的内容跟说明不相乎，请到消费记录里找到下载记录反馈给我们，经确认后退回积分.
- 如下载前有疑问，可以通过点击"提供者"的名字，查看对方的联系方式，联系对方咨询.
