注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. Python多线程爬虫

  2. Python多线程爬虫 功能描述 使用python编写一个网站爬虫程序，支持参数如下： spider.py -u url -d deep -f logfile -l loglevel(1-5) --testself -thread number --dbfile filepath --key=”HTML5” 参数说明： -u 指定爬虫开始地址 -d 指定爬虫深度 --thread 指定线程池大小，多线程爬取页面，可选参数，默认10 --dbfile 存放结果数据到指定的数据库（sqlite）文

  3. 所属分类：Python

    • 发布日期：2016-11-07
    • 文件大小：33792
    • 提供者：q6115759

  1. Python-Python实现多线程下载http文件并将最终代码转化为可执行文件

  2. 本项目的目的是使用Python编写一个http下载器，并生成（*.exe可执行文件）

  3. 所属分类：其它

    • 发布日期：2019-08-10
    • 文件大小：5242880
    • 提供者：weixin_39841882

  1. Python文件多线程下载工具.zip

  2. Python 大文件多线程下载 支持断点续传，主要调用了ThreadPool 和 requests，控制线程数量，减少浪费内存资源。

  3. 所属分类：Python

    • 发布日期：2020-07-10
    • 文件大小：3072
    • 提供者：oForeverangel

  1. 使用python多线程下载在线视频

  2. 使用python多线程下载在线视频，然后进行视频合并。 需要事先取得在线视频地址或m3u8文件地址，运行后输入，会自动建立临时文件夹，等视频文件全部下载完后，会生成cmd文件，运行会进行视频，需要使用ffmpeg。

  3. 所属分类：Python

    • 发布日期：2020-08-05
    • 文件大小：5120
    • 提供者：lengguao

  1. python实现多线程下载大量图片的代码

  2. python实现多线程下载大量图片的代码，代码中加入了代理ip，加入了随机head，这两项内容可以防止客户机ip被屏蔽，从目前测试的结果来看，代码的使用效果非常好，对于有需要的小伙伴可以下载使用。同理该代码可以用于下载其他文件使用，迅雷批量下载数量有限，可以用该代码解决对应问题。

  3. 所属分类：Python

    • 发布日期：2020-09-12
    • 文件大小：23552
    • 提供者：weixin_42152696

  1. Python多线程下载文件的方法

  2. 主要介绍了Python多线程下载文件的方法,涉及Python多线程及文件操作的相关技巧,具有一定参考借鉴价值,需要的朋友可以参考下

  3. 所属分类：其它

    • 发布日期：2020-09-21
    • 文件大小：26624
    • 提供者：weixin_38608379

  1. python 多线程将大文件分开下载后在合并的实例

  2. 今天小编就为大家分享一篇python 多线程将大文件分开下载后在合并的实例，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧

  3. 所属分类：其它

    • 发布日期：2020-09-19
    • 文件大小：32768
    • 提供者：weixin_38674409

  1. Python实现多线程下载文件的代码实例

  2. 实现简单的多线程下载，需要关注如下几点：1.文件的大小：可以从reponse header中提取，如“Content-Length:911”表示大小是911字节2.任务拆分：指定各个线程下载的文件的哪一块，可以通过request header中添加“Range: bytes=300-400”（表示下载300~400byte的内容），注意可以请求的文件的range是[0, size-1]字节的。3.下载文件的聚合：各个线程将自己下载的文件块保存为临时文件，所有线程都完成后，再将这些临时文件按顺序聚

  3. 所属分类：其它

    • 发布日期：2020-12-25
    • 文件大小：46080
    • 提供者：weixin_38583278

  1. Python多线程下载文件的方法

  2. 本文实例讲述了Python多线程下载文件的方法。分享给大家供大家参考。具体实现方法如下： import httplib import urllib2 import time from threading import Thread from Queue import Queue from time import sleep proxy = 'your proxy'; opener = urllib2.build_opener( urllib2.ProxyHandler({'http':prox

  3. 所属分类：其它

    • 发布日期：2020-12-25
    • 文件大小：35840
    • 提供者：weixin_38551143

  1. python 多线程将大文件分开下载后在合并的实例

  2. 废话不多说了，上代码吧： import threading import requests import time import os class Mythread(threading.Thread): def __init__(self,url,startpos,endpos,f): super(Mythread,self).__init__() self.url=url self.startpos=startpos self.endpos=endpos

  3. 所属分类：其它

    • 发布日期：2020-12-25
    • 文件大小：40960
    • 提供者：weixin_38527978

  1. Python实现基于多线程、多用户的FTP服务器与客户端功能完整实例

  2. 本文实例讲述了Python实现基于多线程、多用户的FTP服务器与客户端功能。分享给大家供大家参考，具体如下： 项目介绍： 1. 用户加密认证 2. 允许同时多用户登录 3. 每个用户有自己的家目录 ，且只能访问自己的家目录 4. 对用户进行磁盘配额，每个用户的可用空间不同 5. 允许用户在ftp server上随意切换目录 6. 允许用户查看当前目录下文件 7. 允许上传和下载文件，保证文件一致性 8. 文件传输过程中显示进度条 实现的原理： 服务器端启用端口监听，并对每一连接启用一个线程，对用

  3. 所属分类：其它

    • 发布日期：2020-12-24
    • 文件大小：118784
    • 提供者：weixin_38549721

  1. python多线程http下载实现示例

  2. 测试平台 Ubuntu 13.04 X86_64 Python 2.7.4 花了将近两个小时， 问题主要刚开始没有想到传一个文件对象到线程里面去， 导致下载下来的文件和源文件MD5不一样，浪费不少时间. 有兴趣的同学可以拿去加上参数，改进下， 也可以加上断点续传. 复制代码 代码如下:# -*- coding: utf-8 -*-# Author: ToughGuy# Email: wj0630gmail.com# 写这玩意儿是为了初步了解下python的多线程机制# 平时没写注释的习惯, 这次

  3. 所属分类：其它

    • 发布日期：2020-12-24
    • 文件大小：52224
    • 提供者：weixin_38683930

  1. onedrive-dl:多线程顺序下载OneDrive视频（多个视频，其他文件理论上也可以），实现边下边播不卡顿-源码

  2. OneDrive下载器 由于个人使用OneDrive搭了一个网盘，想在线看视频，但是网速总是扭曲。由于OneDrive可以支持多个连接，（具体最大有多少清除）于是采用多线程下载的方法实现视频的边下边播。 原理 我是用的多线程并非平均分为多少段，每段多少M。而是把视频分割成单位为1M的多个片段。按顺序将这些片段的起始地址放到串联里，然后使用多线程（有些视频格式的索引表在结尾，所以首先下载尾部20M） 造个轮子，aria2一样可以实现 aria2c --stream-piece-selector=i

  3. 所属分类：其它

    • 发布日期：2021-03-15
    • 文件大小：400384
    • 提供者：weixin_42097967

  1. TiktokCrawler:TiktokCrawler抖音爬虫（无水印），多线程爬虫+ JS逆向-源码

  2. TiktokCrawler抖音爬虫（无/去掉水印），多线程爬虫+ JS逆向 项目普及技术：JS逆向（调用JS文件），抖音的一些接口加密，多线程操作，某些Linux命令操作（可在Win或Linux运行） 请在Python3下运行（版本太低可能会出现不兼容，本人用的是3.7版本） 这是一个的脚本，配置运行后可以下载指定分享视频，指定抖音用户的全部视频（含收藏夹），也可以下载指定主题（挑战）或音乐下的全部视频。 注意 这是一个练手项目，源码仅作为和大家一起学习的Python使用，你可以免费：拷贝，分发

  3. 所属分类：其它

    • 发布日期：2021-03-04
    • 文件大小：178176
    • 提供者：weixin_42134143

  1. poca：用Python 3编写的快速，多线程和高度可定制的命令行播客客户端-源码

  2. 波卡 是使用Python 3编写的快速，多线程和高度可定制的命令行播客客户端。从1.0开始，已实现所有计划的功能。 产品特点 最大金额。 指定在删除旧剧集为新剧集腾出空间之前，订阅应获得的剧集数。 覆盖ID3 / Vorbis元数据。 如果您希望Savage Love在演出者字段中使用Dan Savage （而不是The Stranger ），则poca将在下载每个新剧集后自动更新元数据。 或将流派设置为默认由播客覆盖。 过滤供稿。 只想要早上或星期三的新闻报道？ 使用文件名和标题或发布的小

  3. 所属分类：其它

    • 发布日期：2021-02-06
    • 文件大小：66560
    • 提供者：weixin_42134097

  1. python 实现多线程下载视频的代码

  2. 代码： def thread(url): r = requests.get(url, headers=None, stream=True, timeout=30) # print(r.status_code, r.headers) headers = {} all_thread = 1 # 获取视频大小 file_size = int(r.headers['content-length']) # 如果获取到文件大小，创建一个和需要下载文件一样大小的文件 if f

  3. 所属分类：其它

    • 发布日期：2021-01-21
    • 文件大小：80896
    • 提供者：weixin_38519387

  1. python 实现多线程下载m3u8格式视频并使用fmmpeg合并

  2. 电影之类的长视频好像都用m3u8格式了，这就导致了多线程下载视频的意义不是很大，都是短视频，线不线程就没什么意义了嘛。 我们知道，m3u8的链接会下载一个文档，相当长，半小时的视频，应该有接近千行ts链接。 这些ts链接下载成ts文件，就是碎片化的视频，加以合并，就成了需要的视频。 那，即便网速很快，下几千行视频，效率也就低了，更何况还要合并。我就琢磨了一下午，怎么样才能多线程下载m3u8格式的视频呢？ 先上代码，再说重难点： import datetime import os import

  3. 所属分类：其它

    • 发布日期：2021-01-20
    • 文件大小：264192
    • 提供者：weixin_38744557

  1. Python实现多线程HTTP下载器示例

  2. 本文将介绍使用Python编写多线程HTTP下载器，并生成.exe可执行文件。 环境：windows/Linux + Python2.7.x 单线程 在介绍多线程之前首先介绍单线程。编写单线程的思路为： 1.解析url； 2.连接web服务器； 3.构造http请求包； 4.下载文件。 接下来通过代码进行说明。 解析url 通过用户输入url进行解析。如果解析的路径为空，则赋值为’/’；如果端口号为空，则赋值为”80”；下载文件的文件名可根据用户的意愿进行更改（输入’y’表示更改，输入

  3. 所属分类：其它

    • 发布日期：2021-01-20
    • 文件大小：100352
    • 提供者：weixin_38708105

  1. 对python多线程与global变量详解

  2. 今天早上起来写爬虫，基本框架已经搭好，添加多线程爬取功能时，发现出错： 比如在下载文件的url列表中加入200个url，开启50个线程。我的爬虫…竟然将50个url爬取并全部命名为0.html，也就是说，最后的下载结果，是有1个0.html（重复的覆盖了），还有1-150。下面是我的代码： x = str(theguardian_globle.g) #x为给下载的文件命的名 filePath = E://wgetWeiBao//+x+.html try: wget.download(

  3. 所属分类：其它

    • 发布日期：2021-01-20
    • 文件大小：44032
    • 提供者：weixin_38623919

  1. GetVideo.7z python，使用python tkiner做界面，多线程下载，FFmpeg的使用

  2. 调用FFmpeg下载m3u8链接文件，tk界面显示下载进度，python多线程下载

  3. 所属分类：Python

    • 发布日期：2021-01-18
    • 文件大小：41943040
    • 提供者：baidu_39105563
« 12 3 4 5 »