点数信息
www.dssz.net
注册会员
|
设为首页
|
加入收藏夹
您好,欢迎光临本网站!
[请登录]
!
[注册会员]
!
首页
移动开发
云计算
大数据
数据库
游戏开发
人工智能
网络技术
区块链
操作系统
模糊查询
热门搜索:
源码
Android
整站
插件
识别
p2p
游戏
算法
更多...
在线客服QQ:632832888
当前位置:
资源下载
搜索资源 - 大文件去重
下载资源分类
移动开发
开发技术
课程资源
网络技术
操作系统
安全技术
数据库
行业
服务器应用
存储
信息化
考试认证
云计算
大数据
跨平台
音视频
游戏开发
人工智能
区块链
在结果中搜索
所属系统
Windows
Linux
FreeBSD
Unix
Dos
PalmOS
WinCE
SymbianOS
MacOS
Android
开发平台
Visual C
Visual.Net
Borland C
CBuilder
Dephi
gcc
VBA
LISP
IDL
VHDL
Matlab
MathCAD
Flash
Xcode
Android STU
LabVIEW
开发语言
C/C++
Pascal
ASM
Java
PHP
Basic/ASP
Perl
Python
VBScript
JavaScript
SQL
FoxBase
SHELL
E语言
OC/Swift
文件类型
源码
程序
CHM
PDF
PPT
WORD
Excel
Access
HTML
Text
资源分类
搜索资源列表
8月19号最新免杀大白鲨2010正式版远控软件,
大白鲨远程控制 2010 正式版 运行平台:Win2K、WinXP、Win03、WinVista、Win07、Win2008 软件简介: 兼容1.4~1.5,2010Beta 版本 单一exe,不带DLL文件(无可没配置前118KB,压缩54KB)! 注入进程兼容win7/win8/vista 功能简介: 1.屏幕监控,可以查看对方屏幕以及鼠标监控、键盘监控、强制关闭显示器等。 2.视频监控、可以查看对方视频,含有MSH263,IndeoVideo5.04,IntelIndeo(R)Video
所属分类:
网络攻防
发布日期:2010-08-13
文件大小:1048576
提供者:
haha1984haha
widows重名文件查找软件
说明 开发目的:本想整理儿子照片,删除一些重复的,去网上下载居然这种软件也需要注册, 无奈之际花了几个小时的时间写了个小工具. 本工具适用情景: 1.清理重复照片 2.清理重复文件 结果展示方式: 1.列表形式 2.缩略图形式-效率稍低,不过可以查看缩略图,较方便 3.查看文件及文件目录 4.删除文件 5.排序重复文件 操作方式: 1.单个文件删除 2.多个文件删除 3.(文件名+修改日期+文件大小) 或者(文件名+文件大小) 或者(文件名) 缺陷: 1.当相同文件数量过大是请分目录查找(大于
所属分类:
其它
发布日期:2010-11-26
文件大小:8388608
提供者:
bluton
大文件排序 超大文件排序
用于超大文件的快速排序,相比比谁的速度更快,占用内存更少,该排序文件经得起你的考验,目前设计的处理能力为40亿行文本的排序。最近更新加入了去重操作。
所属分类:
C
发布日期:2011-08-16
文件大小:14336
提供者:
shuangchen
文件批处理
很不错的工具啦,一直在用,分享一下! 用于有规则的大批量修改文件命名,省去了一个个去重命名的烦恼
所属分类:
其它
发布日期:2012-06-28
文件大小:757760
提供者:
leimc
CISCO 技术大集合
CISCO 技术大集合 {适合你们的技术} 二、命令状态 1. router> 路由器处于用户命令状态,这时用户可以看路由器的连接状态,访问其它网络和主机,但不能看到和更改路由器的设置内容。 2. router# 在router>提示符下键入enable,路由器进入特权命令状态router#,这时不但可以执行所有的用户命令,还可以看到和更改路由器的设置内容。 3. router(config)# 在router#提示符下键入configure terminal,出现提示符route
所属分类:
网络基础
发布日期:2013-05-22
文件大小:276480
提供者:
u010610376
重号检测程序
利用STL,MAP函数类似java的哈希,存取数据速度比较快。 可以执行大批量的重复性检测。 程序下载之后,编译报错,可能需要去学习一下STL.因为MAP函数是额外库的。 不想看代码的可以直接用我的EXE,不过记得要拷贝那几个DLL文件。
所属分类:
C++
发布日期:2013-10-17
文件大小:977920
提供者:
myfzlb
大文件去重 布隆算法
大文件去重 布隆算法
所属分类:
C#
发布日期:2014-08-23
文件大小:39936
提供者:
jgl5987
文件图片大批量重命名
可以去10万数量级以上的文件批量重命名。
所属分类:
C++
发布日期:2015-12-01
文件大小:1048576
提供者:
sisansiy
快捷方式图标去箭头
功能: 执行BAT批处理脚本A,去掉桌面快捷方式图标上的箭头。 执行BAT批处理脚本B, 还原成操作系统桌面图标默认带箭头的状态。 去箭头 或者 还原箭头 两个脚本都能顺带解决其他方法导致的后遗症问题。 其他方法导致的后遗症问题是指下面这两种后遗症。 任务栏被锁定, 快捷方式图标的箭头变黑块 ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~ 特点: 1.无后遗症。 2.实现桌面图标在视觉上毫无污染的
所属分类:
其它
发布日期:2017-02-03
文件大小:2048
提供者:
stpm33t
python3.7.2下多个txt文件合并去重
第一次学习py下的py最新版然而网上相关教程都是老版,各种语法错误(纠错使人印象深刻),也许效率不高,但是基本拿来就能用. 根目录下所有txt一次性合并去重,太大了跑的可慢了。。
所属分类:
Python
发布日期:2019-03-09
文件大小:1024
提供者:
qq_41650481
txt行去重排序(考虑了大数据)
前几天上面有一个小任务是对于大数据txt文件,以行为单位去重排序,刚写完,就放了上来,有图形化界面,注释很全面。 有对于小文件的考虑,也有对于大文件的考虑。
所属分类:
互联网
发布日期:2020-05-05
文件大小:6144
提供者:
qq_29582443
GB和TB级别的大文件去重排序
该案例主要是针对大文件的去重排序项目,目前支持GB乃至TB级别的数据量,项目思路是针对大文件进行分治的项目,大文件分化成多个小文件,然后再进行排序和去重,目前是在linux系统上进行运行
所属分类:
Linux
发布日期:2020-04-17
文件大小:230
提供者:
WuXiaoQuan824212
详解PHP多个进程配合redis的有序集合实现大文件去重
主要介绍了PHP多个进程配合redis的有序集合实现大文件去重,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
所属分类:
其它
发布日期:2020-10-17
文件大小:43008
提供者:
weixin_38737335
详解PHP多个进程配合redis的有序集合实现大文件去重
1.对一个大文件比如我的文件为 -rw-r–r– 1 ubuntu ubuntu 9.1G Mar 1 17:53 2018-12-awk-uniq.txt 2.使用split命令切割成10个小文件 split -b 1000m 2018-12-awk-uniq.txt -b 按照字节切割 , 支持单位m和k 3.使用10个php进程读取文件 , 插入redis的有序集合结构中 , 重复的是插不进去的 ,因此可以起到去重的作用 <?php $file=$argv[1]; //守护进程
所属分类:
其它
发布日期:2021-01-02
文件大小:59392
提供者:
weixin_38569109
MatchModels:2019中国高校计算机大赛-大数据挑战赛第15名WriteUp-源码
2019中国高校计算机大赛-大数据挑战赛WriteUp 赛题: 我们是最终排名第15名的改革春风吹满地队伍,对方法和模型进行了简单的整理。 传统模型 查询和标题去重 训练词向量以及词频统计是query和title需做去重处理 图特征 计划生成无向图以及权重图。无向图规模最大建立一亿三千万数据量的图,生成图的过程把query和title都转换成一个Int32的ID值,减少内存消耗。 技巧:利用Pickle保存,读取图是加速的,文件的体积也是最小的。 无向图特征-最大完全子图max_clique
所属分类:
其它
发布日期:2021-03-10
文件大小:1048576
提供者:
weixin_42171132
广告集主机:集合多个去广告主机并去重-源码
广告集主机 1.简介 本项目集合多个去广告hosts并去重 本项目已实现GitHub Actions自动更新,每一小时更新一次 快速学习交流和自用,请勿商用 如果有,请联系我删除 2.使用方法 下载所需主机来替换系统主机,需要root权限 安卓hosts文件位置: /system/etc/hosts 电脑勿用, hosts文件过大会造成电脑卡顿 加入Github加速主机 Github源地址: 免翻地址: 3.在此致谢以下引用的主机源以及 WQY916提供的帮助 依然的爱: : yhos
所属分类:
其它
发布日期:2021-02-08
文件大小:922624
提供者:
weixin_42109639
pnd::sparkles::sparkles:个人网盘:部署在家庭等个人生活的私人存储空间,支持基本文件管理在线影视观看百度网盘,B站等资源加速下载。-源码
介绍 pnd全称为Personal Network Disk ,为了实现一个部署在家庭,寝室等私人生活中的网络存储空间,是一个具有从远程服务器后台下载到私人网盘,家庭文件共享,在线影视观看等功能的方便,快捷的生活助手。 前端页面: : 演示地址(服务器配置为1核2G内存1M带宽,所以该地址只为预览项目):http: : 功能 文件及文件夹:增/删/重命名/移动/复制 大文件的分块上传,支持文件上传的暂停/恢复 文件下载,部分视频的浏览器简单播放 文件md5校验,实现文件快速上传 视频在线
所属分类:
其它
发布日期:2021-02-04
文件大小:1048576
提供者:
weixin_42172204
paper_checking_system:基于C#和C ++开发的文本查重论文查重系统,一亿字次级论文库秒级查重。关联:查重算法,数据去重,文本去重-源码
简体中文论文查重系统 写在前面 本项目于在2017年完成了第一版并购使用,后经一年多的稳定运行和维护升级,于2018年开源。由于项目架构较老,目前本项目以维护为主进行常规更新和BUG修复,不再进行大的功能性更新。 相关SDK 目前团队开发了一套新的查重SDK(JAVA版)项目链接: ://dreamspark.com.cn/blog/?id 使用示例: : SDK相较于本项目更新频率更高也拥有一些更新更高级的特性。现有的多个商用查重系统和查重网站基于此SDK开发上线。欢迎大家试用,反馈,希
所属分类:
其它
发布日期:2021-01-31
文件大小:5242880
提供者:
weixin_42181693
shell两个文件去重的多种姿势
前言 大家都知道shell在文本处理上确有极大优势,比如多文本合并、去重等,但是最近遇到了一个难搞的问题,即两个大数据量文件去重。下面来看看详细的介绍吧。 要求 有txt文件A.txt和B.txt。 其中A为关键词和搜索量,以逗号分隔,约90万行。 B为关键词,约400万行。 需要从A中找出与B重复的关键词。 我试了N种姿势,但结果都不尽人意,最奇怪的是有些方法对小数据量的测试文件有用,一旦用在A与B上就会失败,真叫人百思不得其解。 姿势一: awk -F, '{print $1}' A &
所属分类:
其它
发布日期:2021-01-20
文件大小:56320
提供者:
weixin_38651286
基于角色对称加密的云数据安全去重
云计算和大数据技术的飞速发展促使人们进入大数据时代,越来越多的企业和个人选择将数据外包至云服务提供商。数据量的爆炸式增长态势、占据大量存储空间以及庞大的管理开销给云存储带来巨大压力。同时,如何有效防止个人隐私泄露、实现授权访问、云数据安全去重以及密钥更新与权限撤销问题也给云服务提供商提出更大挑战。针对上述问题,提出一种角色对称加密算法,利用角色对称加密将用户角色与密钥相关联,构建角色密钥树,不同角色可根据访问控制策略访问对应权限的文件;同时,提出一种基于角色对称加密的云数据安全去重方案,有效保护
所属分类:
其它
发布日期:2021-01-14
文件大小:911360
提供者:
weixin_38614636
«
1
2
3
4
5
6
7
8
9
10
...
19
»