注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. 大数据分析——RDBMS与MapReduce的竞争与共生

  2. 在科学研究、计算机仿真、互联网应用、电子商务等诸多应用领域,数据量正在以极快的速度增长,为了分析和利用这些庞大的数据资源,必须依赖有效的数据分析技术.传统的关系数据管理技术(并行数据库)经过了将近40 年的发展,在扩展性方面遇到了巨大的障碍,无法胜任大数据分析的任务;而以MapReduce 为代表的非关系数据管理和分析技术异军突起,以其良好的扩展性、容错性和大规模并行处理的优势,从互联网信息搜索领域开始,进而在数据分析的诸多领域和关系数据管理技术展开了竞争.关系数据管理技术阵营在丧失搜索这个阵

  3. 所属分类：专业指导

    • 发布日期：2012-04-08
    • 文件大小：418816
    • 提供者：frogprinceliu

  1. 基于并行的大数据统计分析探讨

  2. 当前 ,企业有着对海量信息奴磊进行统计分析的迫切需求。面对海量 的数据 ,如何高效地得 到统计结果,是分析过程中一个很重要的环节，本文档在分析了当前 出现的大数据量处理方法的基础上 ,进行了比较。得到了并行计算架构的数据库是解决此问题的最佳手段 ,并且进行了性能测试 ,得到 了对比结果 ,相信对从事相关研究的同行有着一定的参考价值。

  3. 所属分类：金融

    • 发布日期：2014-08-27
    • 文件大小：320512
    • 提供者：confessor

  1. 华为大数据

  2. 详细介绍了各行业大数据需求、解决方案，华为大数据架构和具体实践，非常值得学习

  3. 所属分类：咨询

    • 发布日期：2015-10-25
    • 文件大小：13631488
    • 提供者：alite

  1. 大数据测试简述

  2. 什么是大数据？ 3 大数据测试类型 3 大数据测试步骤 3 Step 1：数据阶段验证 3 Step 2："MapReduce"验证 4 Step 3：输出阶段验证 4 架构测试 4 性能测试 4 性能测试方法 4 性能测试参数化 5 大数据测试 VS 传统数据库测试 5 测试环境需求 6 大数据场景使用的工具 6 大数据测试挑战 6 自动化 6 虚拟化 6 大数据集 6 大数据性能测试挑战 6 大数据测试总结 7

  3. 所属分类：群集服务

    • 发布日期：2017-02-07
    • 文件大小：533504
    • 提供者：henni_719

  1. 大数据平台培训.

  2. 采用混搭的架构，构建获取层、计算与存储能力、基础工具能力、统一运维、数据治理、应用组件/产品等能力，形成一个开放、可靠、易维护的大数据平台；以数据为基础，以需求为导向，通过持续的模型、业务研究，构建对内、对外应用，支撑电信运营商/金融等各领域大数据战略的实现。

  3. 所属分类：Hadoop

    • 发布日期：2017-12-27
    • 文件大小：13631488
    • 提供者：ml365252702

  1. 基于大数据的数据服务应用研究

  2. 针对目前各行业信息系统中数据积累规模迅速增长,传统的数据存储、处理以及应用服务难以适应持续增长的数据应用需求,各级部门无法有效跨单位获取重要数据信息,进而不能帮助上级机关做出重要辅助决策。提出一种适用于行业数据应用的大数据架构设计,具有并行、分布、稳定、高效等技术特点,研究大数据存储与处理技术、大数据查询与分析技术以及大数据可视化技术,建立数据分类目录体系标准与信息交换共享机制,确保多数据采集渠道的大规模数据能够有效整合、有序组织,综合运用数据统计、数据分析、数据挖掘等方法,提炼能够保障服务于

  3. 所属分类：算法与数据结构

    • 发布日期：2018-06-20
    • 文件大小：900096
    • 提供者：qq_28339273

  1. NIST 大数据参考架构（草案）

  2. 《NIST大数据互操作性框架草案》主要包括 7卷内容： 第 1卷：定义 第 2卷：分类 第 3卷：案例和总体需求 第 4卷：安全和隐私 第 5卷：架构白皮书调查 第 6卷：参考架构 第 7卷：标准路线图

  3. 所属分类：Hadoop

    • 发布日期：2018-11-02
    • 文件大小：1048576
    • 提供者：boss_ch

  1. 基于大数据平台构建数据仓库的研究与实践.pdf

  2. 数据仓库设计文档，帮助大家理解及如何设计数据仓库，很不错的一篇论文。专题 lTo 学习体系,能从海量数据中提炼高价值信息,构建自主 (1)源系统结构化数据:源系统按大数据平合的 训练与反馈、可不断从最新数据中调整演化的智能业务供数规范要求提供表数据文本和标志文件。 模型体系。 (2)文件交换区FSA:文件的交换中枢,含源系 以 Hadoop^ Spark为代表的大规模数据处理技术为统结构化数据和半结构化、非结构化数据(主要是外部 超越传统数据库的处理局限性提供了先进的并行计算和数据)。 资源调度

  3. 所属分类：其它

    • 发布日期：2019-07-16
    • 文件大小：1048576
    • 提供者：bucaixia08

  1. 煤炭大数据平台建设的关键技术及管理协同架构

  2. 分析了煤炭大数据平台应用的现状及需求;从细粒度、广范围的数据获取、灵活可扩展的数据存储、多模态的数据处理、专业的数据可视化、高质量的数据管理5个方面详细阐述了煤炭大数据平台建设的关键技术,为煤炭大数据的采集、存储、分析、管理提供基础;提出了煤炭大数据管理协同架构,主要从技术和管理2个层面为煤炭大数据平台的建设提供参考,为大数据管理的顶层设计提供了思路。

  3. 所属分类：其它

    • 发布日期：2020-05-16
    • 文件大小：815104
    • 提供者：weixin_38572979

  1. 我国大数据产业前景趋势与投资规划分析简报.pdf

  2. 我国大数据产业前景趋势与投资规划分析简报.pdf●中国大数据产业发展现状与前景预测 1.中国大数据产业发展现状分析 大数据产业链建设情况 大数据产业市场规模分析 目前,「产业在发展过程中已经形成了一些层次分据贵阳大数据交易所发布的《2016年中国大数据交 布,有做服务器和底层系统的,有做软件的,有做易产业白皮书》数据显示,2014年,中国大数据产 应用的,大数据也需要在原有的架构上加以发展。业规模大约为1038亿元,2015年产业整体规模达 原来做基础设施的企业,如联想、华为,也要向大到169

  3. 所属分类：互联网

    • 发布日期：2019-07-03
    • 文件大小：1048576
    • 提供者：qq_34543438

  1. 大数据需求架构

  2. 谭志坚的大数据需求和架构设计（最原始版本）

  3. 所属分类：算法与数据结构

    • 发布日期：2017-08-21
    • 文件大小：809984
    • 提供者：m0_37845836

  1. 水火风光多源发电调度系统大数据平台架构及关键技术_申建建.pdf

  2. 水风光等可再生能源高速发展使得电力调度数据出现 爆发式增长，并呈现出多源、异构、高维等大数据典型特点， 如何应对电力大数据的集成管理及高效应用是我国电网运 行的重大技术挑战之一。为此，围绕水火风光复杂发电调度 系统，解析超大规模电站群调度大数据特征及相互关系，设 计调度管理功能体系，构建发电调度大数据平台架构，提出 满足不同业务场景共性需求的多源数据校验和多平台协同 存储技术、面向发电调度分析场景的大数据融合处理技术以 及面向发电计划编制场景的大数据分析决策技术，实现电力 大数据的采集、存储、分

  3. 所属分类：讲义

    • 发布日期：2020-09-05
    • 文件大小：1048576
    • 提供者：SparkQiang

  1. 经典大数据架构案例：酷狗音乐的大数据平台重构

  2. 本文来自于infoq，讲解了对原来的架构上进行重构的工作内容，总共分为重构的原因、新一代的大数据技术架构、踩过的坑、后续持续改进四个部分.眨眼就新的一年了，时间过的真快，趁这段时间一直在写总结的机会，也总结下上一年的工作经验，避免重复踩坑。酷狗音乐大数据平台重构整整经历了一年时间，大头的行为流水数据迁移到新平台稳定运行，在这过程中填过坑，挖过坑，为后续业务的实时计算需求打下了很好的基础。在此感谢酷狗团队成员的不懈努力，大部分从开始只知道大数据这个概念，到现在成为团队的技术支柱，感到很欣慰。从重构

  3. 所属分类：其它

    • 发布日期：2021-02-25
    • 文件大小：1048576
    • 提供者：weixin_38730840

  1. 美图大数据平台架构实践

  2. 如今大数据在各行业的应用越来越广泛：运营基于数据关注运营效果，产品基于数据分析关注转化率情况，开发基于数据衡量系统优化效果等。美图公司有美拍、美图秀秀、美颜相机等十几个app，每个app都会基于数据做个性化推荐、搜索、报表分析、反作弊、广告等，整体对数据的业务需求比较多、应用也比较广泛。因此美图数据技术团队的业务背景主要体现在：业务线多以及应用比较广泛。这也是促使我们搭建数据平台的一个最主要的原因，由业务驱动。举几个美图的数据应用案例。如图1所示，左起第一张是美图自研的数据可视化平台DataFa

  3. 所属分类：其它

    • 发布日期：2021-02-24
    • 文件大小：914432
    • 提供者：weixin_38631182

  1. 如何做一个好的大数据平台架构

  2. Lambda架构背后的需求是由于MR架构的延迟问题。MR虽然实现了分布式、可扩展数据处理系统的目的，但是在处理数据时延迟比较严重。实际上如果内存和CPU足够强大，MR也可以实现近实时运算，但实际业务环境并非如此，因此我们需要权衡，选择实时处理和批处理所需要数据量和恰当的资源。2012年Storm的作者NathanMarz提出的Lambda数据处理框架。Lambda架构的目标是设计出一个能满足实时大数据系统关键特性的架构，包括有：高容错、低延时和可扩展等。Lambda架构整合离线计算和实时计算，融

  3. 所属分类：其它

    • 发布日期：2021-02-24
    • 文件大小：277504
    • 提供者：weixin_38745859

  1. 经典大数据架构案例：酷狗音乐的大数据平台重构

  2. 本文来自于infoq，讲解了对原来的架构上进行重构的工作内容，总共分为重构的原因、新一代的大数据技术架构、踩过的坑、后续持续改进四个部分.眨眼就新的一年了，时间过的真快，趁这段时间一直在写总结的机会，也总结下上一年的工作经验，避免重复踩坑。酷狗音乐大数据平台重构整整经历了一年时间，大头的行为流水数据迁移到新平台稳定运行，在这过程中填过坑，挖过坑，为后续业务的实时计算需求打下了很好的基础。在此感谢酷狗团队成员的不懈努力，大部分从开始只知道大数据这个概念，到现在成为团队的技术支柱，感到很欣慰。从重构

  3. 所属分类：其它

    • 发布日期：2021-02-20
    • 文件大小：1048576
    • 提供者：weixin_38717143

  1. 美图大数据平台架构实践

  2. 如今大数据在各行业的应用越来越广泛：运营基于数据关注运营效果，产品基于数据分析关注转化率情况，开发基于数据衡量系统优化效果等。美图公司有美拍、美图秀秀、美颜相机等十几个 app，每个app都会基于数据做个性化推荐、搜索、报表分析、反作弊、广告等，整体对数据的业务需求比较多、应用也比较广泛。因此美图数据技术团队的业务背景主要体现在：业务线多以及应用比较广泛。这也是促使我们搭建数据平台的一个最主要的原因，由业务驱动。举几个美图的数据应用案例。如图1所示，左起第一张是美图自研的数据可视化平台

  3. 所属分类：其它

    • 发布日期：2021-01-27
    • 文件大小：914432
    • 提供者：weixin_38554186

  1. 如何做一个好的大数据平台架构

  2. Lambda架构背后的需求是由于MR架构的延迟问题。MR虽然实现了分布式、可扩展数据处理系统的目的，但是在处理数据时延迟比较严重。实际上如果内存和CPU足够强大，MR也可以实现近实时运算，但实际业务环境并非如此，因此我们需要权衡，选择实时处理和批处理所需要数据量和恰当的资源。2012年Storm的作者NathanMarz提出的Lambda数据处理框架。Lambda架构的目标是设计出一个能满足实时大数据系统关键特性的架构，包括有：高容错、低延时和可扩展等。Lambda架构整合离线计算和实时计算，融

  3. 所属分类：其它

    • 发布日期：2021-01-27
    • 文件大小：277504
    • 提供者：weixin_38582685

  1. 面向特定领域大数据平台架构及标准化研究

  2. 分析了与国家民生和安全密切相关的特定领域的大数据发展现状，介绍了大数据标准研究的相关工作。研究了特定领域大数据的特点和现实需求，给出了适合这些领域大数据建设的参考架构，结合大数据主流技术和基础平台，详细分析了特定领域大数据参考架构的不同部件。考虑大数据未来技术发展，梳理了面向特定领域大数据标准体系发展脉络，提出了相应的大数据参考标准体系，为面向特定领域大数据相关体系架构和标准化建设提供技术参考。

  3. 所属分类：其它

    • 发布日期：2021-01-20
    • 文件大小：1048576
    • 提供者：weixin_38625708

  1. 游戏大数据平台研究与实践

  2. 立足于游戏平台数据快速处理需求，构建基于分布式+关系数据混合多元的大数据处理架构，针对高价值密度的结构化数据采用关系数据处理；大量无序的非结构化数据采用分布式机制处理。两种类型数据实现有序化后，统一交予传统关系数据库构建关系化模型并展示，既能实现关键经营分析数据的高效处理，又能满足无序的日志数据规模化处理需求。通过剖析其总体架构、主要功能和关键技术，从而为其他业务平台大数据分析建设和改造提供借鉴和参考。

  3. 所属分类：其它

    • 发布日期：2021-01-19
    • 文件大小：1048576
    • 提供者：weixin_38737630
« 12 3 4 5 6 7 8 9 10 ... 41 »