您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. Hive Sql – Multi Distinct(多个distinct在同一个query中) 优化

  2. 背景 当多个 distinct 操作同时出现在 select 中,数据会分发多次。容易造成Reduce数据倾斜 优化点 1、如果不要求精确值,可以使用 spark-sql approx_count_distinct函数 (基数计数 hyperloglog) 2、修改SQL 基础数据准备如下, 需要计算 不同渠道下的 不同周期 的访问uv presto:bi> desc tmp.multi_distinct_test; Column | Type | Extra | Comment
  3. 所属分类:其它

    • 发布日期:2021-01-07
    • 文件大小:26624
    • 提供者:weixin_38610657