注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. openews:实验性NLP（自然语言处理）项目旨在捆绑各种分散的更新-源码

  2. Openews 基于NLP（自然语言处理）的实验项目，旨在捆绑来自各种来源的新闻。 建筑学 成分 MongoDB-数据库层。 Redis-对刮板作业进行排队。 Flask-REST / Web服务。 概念 报废者：新的收藏家。 DataProcessor ：处理由废料收集的原始数据并对其进行结构化（这是NLP的一部分）。 职位：排队的刮板工人。 Worker ：一个Python进程，正在运行，等待Jobs添加到队列中，然后执行它们。 服务器：管理所有服务的RESTful Web服务器。

  3. 所属分类：其它

    • 发布日期：2021-03-20
    • 文件大小：37888
    • 提供者：weixin_42151599

  1. peru_news:使用git action从秘鲁的主要报纸网页上收集标题-源码

  2. 秘鲁新闻 该项目旨在使用git action从秘鲁的主要报纸网页上收集头条新闻。 修改刮板 您可以通过修改settings.json来settings.json自己的标题抓取工具 { " out_path " : " data " , " sources " : [ { " name " : " some_name " , " url " : " https://some_url " , " selector " : " css selecto

  3. 所属分类：其它

    • 发布日期：2021-03-18
    • 文件大小：15728640
    • 提供者：weixin_42109545

  1. daily-news-scraper:这是一个简单的新闻抓取工具和通知脚本-源码

  2. 每日新闻刮板 这是一个简单的网络抓取工具，利用3k抓取新闻文章并通过文本发送。 目前，它抓取了2个来源：《和《 然后，脚本会发送前3个标题，并带有指向.env中指定的mobile_number的链接。 先决条件 该项目还使用一个.env文件存储API密钥，用户名和手机号码均可通过来获取。提供了一个env示例供参考。 步骤1 将此仓库克隆到合适的位置。 git clone https://github.com/KenMwaura1/daily-news-scraper 或者 下载zip并将

  3. 所属分类：其它

    • 发布日期：2021-03-13
    • 文件大小：15360
    • 提供者：weixin_42113552

  1. pharma-news-scraper:Web刮板，用于根据制药公司提供的最新新闻，刮标题和张贴日期-源码

  2. 医药新闻刮板 Web Scraper获取制药公司的最新新闻-投资工具

  3. 所属分类：其它

    • 发布日期：2021-03-10
    • 文件大小：2048
    • 提供者：weixin_42121905

  1. bbc_scraper-源码

  2. BBCS刮板 特征 搜寻有关任何主题的最新新闻，例如或 刮取有关主题的最新新闻更新的多个页面 如果您不确定要剪贴的主题，则说唱歌手将为您提供潜在主题的列表 用法 要使用刮板，只需下载项目并转到项目主目录： $ git clone https://github.com/yarusl/bbc_scraper.git $ cd bbc_scraper/bbc_scraper 然后运行main.py文件： $ python3 main.py 模式 互动模式 刮板有两种模式，第一种是交互模式，它

  3. 所属分类：其它

    • 发布日期：2021-02-28
    • 文件大小：26214400
    • 提供者：weixin_42101384

  1. 新闻刮板-源码

  2. 新闻刮板 关于 新闻抓取器允许用户从Vox网站的“重点”部分抓取最新文章。 抓取完成后，用户可以选择他们感兴趣的文章并为该文章添加注释。 要观看现场演示，请单击 指示 克隆回本地 运行npm i以安装所有必需的软件包 运行node server.js以在PORT 3000上启动 使用的技术 Node.js jQuery的 引导CSS 表示 轴距 欢乐 MongoDB 猫鼬

  3. 所属分类：其它

    • 发布日期：2021-02-21
    • 文件大小：3145728
    • 提供者：weixin_42115074

  1. 新闻刮板-源码

  2. 新闻刮板 这是一个允许用户查看最新新闻并发表评论的应用程序。 使用的技术 MVC标准Javascr ipt库NodeJs Nodeman axios cheerio express express-handlebars猫鼬摩根

  3. 所属分类：其它

    • 发布日期：2021-02-21
    • 文件大小：18432
    • 提供者：weixin_42118161

  1. NewsScraper-Prototype2.0-Twilio：Java新闻刮板，通过Twilio发送带有内容的SMS-源码

  2. NewsScraper-Prototype2.0-Twilio：Java新闻刮板，通过Twilio发送带有内容的SMS

  3. 所属分类：其它

    • 发布日期：2021-02-16
    • 文件大小：19456
    • 提供者：weixin_42138408

  1. CNN-旅行-新闻-文章-抓取器：用于获取新闻文章内容的网络抓取器-源码

  2. CNN-旅行新闻-文章刮板 介绍 我构建了一个简单的网络抓取工具，当指定特定的URL时，它将返回cnn旅行新闻文章的内容。 使用类似技术的实际产品的一些示例包括价格跟踪网站和SEO审核工具，这些工具可能会抓取热门搜索结果。 这个项目可能要花我大约4个小时才能完成。 如何运行脚本 就这么简单，只需运行以下代码： python cnn.py 这就是您所需要做的，然后文件将保存在cnn travel news文件夹中。 图书馆 python库在以下位置使用： 请求库这是用来连接新闻网站的。 B

  3. 所属分类：其它

    • 发布日期：2021-02-16
    • 文件大小：6144
    • 提供者：weixin_42175516

  1. HeadlineScraper：从新闻网站抓取标题的脚本-源码

  2. 标题刮板脚本 这是一个非常基本的新闻网站标题抓取类，使用urllib用于分页网页，使用Selenium用于连续滚动网页。 我这样做是为了为现在废弃的机器学习项目收集数据。 这个脚本是专门为我试图从中抓取的网站而制作的，但是在某种程度上可以扩展到其他网站。 我不打算维护此功能，因此使用后果自负，但是如果有帮助，您可以自由使用它们。 虽然那里可能还有更多有用的代码。 所需的包 Selenium（我使用的版本为3.141.0，但以后的版本可能会起作用） WebScraper类 此文件包含WebScra

  3. 所属分类：其它

    • 发布日期：2021-02-16
    • 文件大小：6144
    • 提供者：weixin_42128393

  1. 黑客新闻刮板-源码

  2. 黑客新闻刮板 概括 从Hacker News获取最新故事！ 指示 运行程序 获取指向前10个故事的链接

  3. 所属分类：其它

    • 发布日期：2021-02-15
    • 文件大小：3072
    • 提供者：weixin_42117150

  1. News_Article_Scraper：一个完整​​的应用程序，可从技术博客The Verge中抓取文章。 保存有关文章的注释或删除它们-源码

  2. 新闻_文章_刮板 此应用程序从The Verge（技术新闻来源）中抓取文章，允许用户在单个文章上做一个注释，然后将这些注释持久存储在Mongo数据库中，然后再删除这些注释或这些文章（如果他们选择） 。

  3. 所属分类：其它

    • 发布日期：2021-02-15
    • 文件大小：5242880
    • 提供者：weixin_42135462

  1. anime-web-scraper：动漫网络抓取工具-从官方网站和新闻网站下载动漫剧集预览的图像-源码

  2. 动漫网页刮板 从官方和新闻网站下载动漫剧集预览的图像。 介绍 Anime Web Scraper是一个脚本，可从官方网站下载剧集预览图像。 刮板还可以检测并下载较新的动画的角色视觉效果，蓝光封面和奖金插图（主要从2020年开始）。 该程序是用Python 3编写的。 单击查看YouTube上的演示。 动机 构建刮板的动机是为了博客目的而快速下载内容（例如，在Twitter上发布）。 配置 下载并安装最新版本的 安装Python时，请确保选中“将Python 3.X添加到PATH”： 打开命

  3. 所属分类：其它

    • 发布日期：2021-02-14
    • 文件大小：474112
    • 提供者：weixin_42123456

  1. News-scraper-workers-eng-go：新闻-scraper-workers-eng-源码

  2. 新闻刮板走 该存储库包含从el mundo ， el pais ， la vanguardia和larazón报纸中提取数据的工人代码。 安装 您还将需要golang （至少为1.12版）。 请按照进行安装。 组态 将此存储库克隆到目录： git clone 移至克隆的目录并创建一个名为.env的文件。 在此文件中，您将需要指定mongodb数据库的URL以及要剪贴的报纸。 也是您的刮板的ID。 这是一个示例，如果您在本地运行后端并且想要废弃所有报纸，则该示例将起作用： scraper_

  3. 所属分类：其它

    • 发布日期：2021-02-11
    • 文件大小：27648
    • 提供者：weixin_42102634

  1. Headline-Scraper-Topic-Analyzer：这两个程序1）抓取新闻来源CNN，Business Insider，Fox和ABC并创建中央数据源，以及2）归一化和定形化数据以通过单词袋模型识别关键主题-源码

  2. 新闻-刮板主题分析器 用例 该代码是MVP原型，用于评估新闻的偏见，首先是刮板，然后是主题分析器。 后来，该代码库用于创建Abridge News偏差意识产品。 当今的许多新闻来源都带有偏见。 您可能会经常看到CNN上显示的某些主题，而Fox News并未涉及这些主题，有时甚至反之亦然。 该工具的目的是快速吸引各种新闻来源全面讨论的关键主题。 这两个程序1）Scraper.py抓取新闻来源CNN，Business Insider，Fox和ABC并创建该时刻新闻的中央数据源； 2）Analyz

  3. 所属分类：其它

    • 发布日期：2021-02-09
    • 文件大小：5120
    • 提供者：weixin_42132354

  1. devdocs：API文档浏览器-源码

  2. -API文档浏览器 DevDocs在干净整洁的Web UI中结合了多个开发人员文档，并提供即时搜索，离线支持，移动版本，深色主题，键盘快捷键等。 DevDocs被创造 ，由操作 。 我们目前正在寻找维护者 如果您想加入团队，请与上的社区联系！ 跟踪发展新闻： 加入上的贡献者聊天室 在观看存储库 在Twitter上关注 目录：·········有 快速开始 除非您希望为该项目做贡献，否则我们建议使用的托管版本。 它是最新的，并且可以立即离线使用。 DevDocs由两部分组成：一个用于生

  3. 所属分类：其它

    • 发布日期：2021-02-05
    • 文件大小：3145728
    • 提供者：weixin_42135753

  1. DataEngineeringProject：示例端到端数据工程项目-源码

  2. 数据工程项目 数据工程项目是数据管道的实现，该管道使用RSS Feed中的最新新闻，并通过方便的API供用户使用。 管道基础结构是使用流行的开源项目构建的。 在一个地方访问最新新闻和头条新闻。 :flexed_biceps: 目录 架构图 这个怎么运作 数据搜集 Airflow DAG负责执行Python抓取模块。 它每X分钟定期运行，产生微批。 第一个任务更新proxypool 。 将代理与旋转的用户代理程序结合使用可以帮助刮板通过大多数防刮擦措施，并防止被检测为刮板。 第二项任务是

  3. 所属分类：其它

    • 发布日期：2021-02-04
    • 文件大小：901120
    • 提供者：weixin_42144604

  1. pytipeee:Tipeee的Python刮板-源码

  2. y Pytipeee是使用python的Pytipeee的非官方。 代码在该，多亏了Pytipeee您可以： 按类别收集大量创作者 查看每个创作者的信息 阅读评论 看新闻 获得自卸车和小费 安装 要安装，您可以通过终端使用pip： pip install pytipeee 用法 进口 import pytipeee as pt 分类目录 可以使用不同的类别。 pt . show_categories () other bd-illustration movies food geek v

  3. 所属分类：其它

    • 发布日期：2021-03-29
    • 文件大小：50176
    • 提供者：weixin_42101237

  1. newsScraper:该服务从主流媒体获得新闻头条-源码

  2. 新闻刮板 描述 从主流媒体的主板（wp，onet，interia，polsat新闻）获取新闻信息（标题）。

  3. 所属分类：其它

    • 发布日期：2021-03-29
    • 文件大小：17408
    • 提供者：weixin_42118423