您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. OpenDNS数据统计的实现过程

  2. OpenDNS是世界最大的免费DNS解析服务提供商,每天要处理180亿次解析请求。面对如此的海量数据,OpenDNS是如何给予MySQL数据库开发数据分析统计功能的呢?
  3. 所属分类:DNS

    • 发布日期:2009-12-10
    • 文件大小:16777216
    • 提供者:clyin
  1. BigDump-v0.32b.zip

  2. BigDump 的全称是 BigDump Staggered MySQL Dump Importer,它不是 Joomla! 的标准扩展,而是一个独立运行的 web 界面的工具软件。 在了解 BigDump 的功能之前,请先想像下面一幅景象:你的网站 MySQL 数据库体积大概有 500MB,甚至更大,即使将导出的 SQL 文件用 tar.gz 格式压缩,最终文件体积也超过了 PHP 所允许的 64MB 最大上传值。如果你想用这样一个庞大的 SQL 文件,通过 web 界面访问 phpMyAd
  3. 所属分类:Java

    • 发布日期:2011-12-26
    • 文件大小:12288
    • 提供者:itmaoo
  1. 海量数据处理优化

  2. 课程内容 •数据层架构 •数据同步方案 •图片存储架构和缓存 •分布式缓存Memcached •Mysql性能优化 •Oracel性能优化 •应用层架构
  3. 所属分类:Java

    • 发布日期:2012-10-25
    • 文件大小:2097152
    • 提供者:bleachedcola
  1. 2007数据分析与业务建模

  2. 数据分析与业务建模:随着数据仓库的不断发展和成熟,“大数据”概念的风靡,有越来越多的相关产品出来,最常见的技术解决方案包括hadoop和hive,oracle,mysql的infobright,greenplum及nosql,或者多个结合使用。   其实归纳起来就两类:一是用传统RDBMS为主导的数据库管理数据,oracle、mysql等都是基于传统的关系型数据库,优势就是有更严谨的数据结构,关系型数据库对数据的管理更加规范,数据处理过程中可能出现的非人为误差极小,而且标准的SQL接口使数据获
  3. 所属分类:专业指导

    • 发布日期:2014-07-09
    • 文件大小:13631488
    • 提供者:qq_17451641
  1. mysql优化总结

  2. Mysql处理海量数据的优化可以从以下四个方面入手: 业务优化: 业务逻辑,Sql语句优化 架构优化: 分表分库,读写分离,数据缓存 硬件优化: 硬件配置 数据库优化: 引擎选择,表设计,数据查询,参数配置
  3. 所属分类:MySQL

    • 发布日期:2016-06-24
    • 文件大小:183296
    • 提供者:lzs1212
  1. 基于大数据平台构建数据仓库的研究与实践.pdf

  2. 数据仓库设计文档,帮助大家理解及如何设计数据仓库,很不错的一篇论文。专题 lTo 学习体系,能从海量数据中提炼高价值信息,构建自主 (1)源系统结构化数据:源系统按大数据平合的 训练与反馈、可不断从最新数据中调整演化的智能业务供数规范要求提供表数据文本和标志文件。 模型体系。 (2)文件交换区FSA:文件的交换中枢,含源系 以 Hadoop^ Spark为代表的大规模数据处理技术为统结构化数据和半结构化、非结构化数据(主要是外部 超越传统数据库的处理局限性提供了先进的并行计算和数据)。 资源调度
  3. 所属分类:其它

    • 发布日期:2019-07-16
    • 文件大小:1048576
    • 提供者:bucaixia08
  1. 基于Spark的大数据人员信息智能管理系统.pdf

  2. 公安和情报部门作为维稳和维护社会治安的重要部门,多年积累建设了多个不 同类型数据库,存储了海量数据信息,但是由于大部分为传统关系型数据库,性能 被约束,无法发挥这些数据的价值。其缺点主要体现在:情报信息来源的分散化和 滞后性、维稳信息归档能力薄弱、数据查询和呈现的自动化/可视化程度不高、专属 业务模型应用数量少且数据的关联性没有得到利用等方面。如何挖掘这些海量数据 的关联关系,筛查重点人员并分析其人员关系网络,成为了公安机关急需解决的问 题。本文针对这方面的需求,设计了一个大数据人员信息管理系统
  3. 所属分类:spark

    • 发布日期:2020-04-16
    • 文件大小:5242880
    • 提供者:zxloveycq
  1. MySQL集群解决方案详解Haproxy.pdf

  2. 看完你就懂MySQL的Haproxy的常用集群解决方案,处理高并发在我们的系统架构中,DBserver方面我们只是使用了单节点服务,如果面对大并发,海量数据的存储,显然单节点 的系统架构将存在很严重的问题,所以接下来,我们将实现MySQL的集群,来应对大并发、海量数据存储等问题。
  3. 所属分类:MySQL

    • 发布日期:2020-04-04
    • 文件大小:1048576
    • 提供者:qq_42897427
  1. 新闻日志大数据分析及可视化系统的设计与实现.doc

  2. 每天都有着大量的用户关注各类新闻,特别是随着各种网络通信技术的发展,网络应用的普及使得每时每刻都有着大量的人们通过网络进行各类新闻的搜索,产生海量的日志数据。过去使用单机的方式通过 MySQL数据库对这些数据进行存储,但是积累下来的用户日志数据量达到了一定的级别,当一台电脑无法存储这么庞大的数据时,就产生了海量数据的存储问题。如果使用网络文件系统对数据进行分开存储,那么就无法对大量的实时和离线数据进行分析处理,处理结果也无法以一种更加直观的方式进行展示。 为了解决海量新闻日志数据的存储问题,在新
  3. 所属分类:互联网

    • 发布日期:2020-08-15
    • 文件大小:2097152
    • 提供者:beans9
  1. C#在MySQL大量数据下的高效读取、写入详解

  2. 最近由于工作的原因,经常需要对海量数据进行处理,做的数据爬虫相关,动辄千万级别的数据,单表几十个G 都是都是家常便饭。 那么主要的开发语言是C#,数据库使用的是MySQL。下面通过这篇文章我们来一起学习学习吧。
  3. 所属分类:其它

    • 发布日期:2020-09-01
    • 文件大小:74752
    • 提供者:weixin_38508821
  1. MySQL下海量数据的迁移步骤分享

  2. 一般mysql小数据的情况可以通过直接复制目录,或者通过帝国备份工具,如果是海量数据(6亿)该怎么处理呢,下面看下别人是怎么处理的参考一下
  3. 所属分类:其它

    • 发布日期:2020-09-10
    • 文件大小:76800
    • 提供者:weixin_38556416
  1. mysql处理海量数据时的一些优化查询速度方法

  2. 最近一段时间由于工作需要,开始关注针对Mysql数据库的select查询语句的相关优化方法,需要的朋友可以参考下
  3. 所属分类:其它

    • 发布日期:2020-09-09
    • 文件大小:89088
    • 提供者:weixin_38624437
  1. 一个小时学会MySQL数据库(张果)

  2. 随着移动互联网的结束与人工智能的到来大数据变成越来越重要,下一个成功者应该是拥有海量数据的,数据与数据库你应该知道。 一、数据库概要 数据库(Database)是存储与管理数据的软件系统,就像一个存入数据的物流仓库。 在商业领域,信息就意味着商机,取得信息的一个非常重要的途径就是对数据进行分析处理,这就催生了各种专业的数据管理软件,数据库就是其中的一种。当然,数据库管理系统也不是一下子就建立起来,它也是经过了不断的丰富和发展,才有了今天的模样。 1.1、发展历史 1.1.1、人工处理阶段 在2
  3. 所属分类:其它

    • 发布日期:2020-12-16
    • 文件大小:2097152
    • 提供者:weixin_38636671
  1. C#如何在海量数据下的高效读取写入MySQL

  2. 前提 由于工作的原因,经常需要对海量数据进行处理,做的数据爬虫相关,动辄千万级别的数据,单表几十个G都是都是家常便饭。  主要开发语言是C#,数据库使用的是MySQL。 最常见的操作便是 select 读取数据,然后在C#中对数据进行处理, 完毕后再插入数据库中。  简而言之就 select -> process -> insert三个步骤。 对于数据量小的情况下(百万级别 or 几百兆)可能最多1个小时就处理完了。但是对于千万级数据可能几天,甚至更多。 那么问题来了,如何优化?
  3. 所属分类:其它

    • 发布日期:2020-12-15
    • 文件大小:134144
    • 提供者:weixin_38673812
  1. MySQL性能优化

  2. 在笔试面试中,尤其是像百度,淘宝这些数据量非常大,而且用LAMP架构的公司,数据库优化方面就显得特别重要了。此外,除了数据库索引之外,在LAMP结果如此流行的今天,数据库(尤其是MySQL)性能优化也是海量数据处理的一个热点。下面就结合自己的经验,聊一聊MySQL数据库优化的几个方面。首先,在数据库设计的时候,要能够充分的利用索引带来的性能提升,至于如何建立索引,建立什么样的索引,在哪些字段上建立索引,上面已经讲的很清楚了,这里不在赘述。另外就是设计数据库的原则就是尽可能少的进行数据库写操作(插
  3. 所属分类:其它

    • 发布日期:2021-03-02
    • 文件大小:223232
    • 提供者:weixin_38690095
  1. 一种MySQL到HBase的迁移策略的研究与实现

  2. 随着Web2.0的到来,互联网数据快速增长。大规模数据的采集和处理及应用直接影响着用户体验,决定着企业的发展。比较传统关系型数据库和分布式非关系型数据库两者处理大数据的性能,将本地数据迁移到分布式数据库势在必行。文章分析了现有迁移工具的利弊,基于HBase数据库提出了一种有效的数据迁移策略,并依据提出的策略实现了一种半自动化移工具。以美国城市和方言系统CityDetail数据库数据为例,阐述了该迁移工具的工作原理并对迁移后的数据进行多次查询比较,证明了使用该工具进行数据迁移的高效性。Web2.0
  3. 所属分类:其它

    • 发布日期:2021-02-25
    • 文件大小:184320
    • 提供者:weixin_38675506
  1. 一种MySQL到HBase的迁移策略的研究与实现

  2. 随着Web2.0的到来,互联网数据快速增长。大规模数据的采集和处理及应用直接影响着用户体验,决定着企业的发展。比较传统关系型数据库和分布式非关系型数据库两者处理大数据的性能,将本地数据迁移到分布式数据库势在必行。文章分析了现有迁移工具的利弊,基于HBase数据库提出了一种有效的数据迁移策略,并依据提出的策略实现了一种半自动化移工具。以美国城市和方言系统CityDetail数据库数据为例,阐述了该迁移工具的工作原理并对迁移后的数据进行多次查询比较,证明了使用该工具进行数据迁移的高效性。Web2.0
  3. 所属分类:其它

    • 发布日期:2021-02-20
    • 文件大小:184320
    • 提供者:weixin_38609693
  1. MySQL性能优化

  2. 在笔试面试中,尤其是像百度,淘宝这些数据量非常大,而且用LAMP架构的公司,数据库优化方面就显得特别重要了。此外,除了数据库索引之外,在LAMP结果如此流行的今天,数据库(尤其是MySQL)性能优化也是海量数据处理的一个热点。下面就结合自己的经验,聊一聊MySQL数据库优化的几个方面。 首先,在数据库设计的时候,要能够充分的利用索引带来的性能提升,至于如何建立索引,建立什么样的索引,在哪些字段上建立索引,上面已经讲的很清楚了,这里不在赘述。另外就是设计数据库的原则就是尽可能少的进行数据库写操作(
  3. 所属分类:其它

    • 发布日期:2021-01-31
    • 文件大小:223232
    • 提供者:weixin_38519060
  1. C#在MySQL海量数据下的高效读取、写入

  2. 前提   由于工作的原因,经常需要对海量数据进行处理,做的数据爬虫相关,动辄千万级别的数据,单表几十个G都是都是家常便饭。  主要开发语言是C#,数据库使用的是MySQL。   常见的操作便是 select 读取数据,然后在C#中对数据进行处理, 完毕后再插入数据库中。  简而言之 select -> process -> insert三个步骤。 对于数据量小的情况下(百万级别 or 几百兆)可能   多1个小时处理完了。但是对于千万级数据可能几天,甚至更多。 那么问题来了,如
  3. 所属分类:其它

    • 发布日期:2021-01-20
    • 文件大小:73728
    • 提供者:weixin_38656989
  1. mysql处理海量数据时的一些优化查询速度方法

  2. 由于在参与的实际项目中发现当mysql表的数据量达到百万级时,普通SQL查询效率呈直线下降,而且如果where中的查询条件较多时,其查询速度简直无法容忍。曾经测试对一个包含400多万条记录(有索引)的表执行一条条件查询,其查询时间竟然高达40几秒,相信这么高的查询延时,任何用户都会抓狂。因此如何提高sql语句查询效率,显得十分重要。以下是网上流传比较广泛的30种SQL查询语句优化方法: 1、应尽量避免在 where 子句中使用!=或操作符,否则将引擎放弃使用索引而进行全表扫描。 2、对查询进行优
  3. 所属分类:其它

    • 发布日期:2021-01-19
    • 文件大小:91136
    • 提供者:weixin_38523618
« 12 3 4 »