240 发简信
IP属地:上海
  • Hive调优之数据篇

    数据文件的性能优化包含文件格式、压缩方式以及数据存储等三个方面。 文件格式Hive 支持TEXT FILE, SEQUENCE FILE, AV...

  • Hive调优之设计篇

    从设计上来考虑HQL的优化,会涉及到表设计、数据格式以及Job任务优化等。 分区表设计Hive 分区是最有效的优化查询性能的方法之一。使用分区过...

  • Hive调优之工具篇

    HQL提供EXPLAIN和ANALYZE语句,用于检查和确定查询性能。另外Hive日志包含有足够详细的信息用于性能调查和问题确认。 EXPLAI...

  • HQL之抽样篇

    由于数据量本身通常过于浩大,我们需要一部分数据来加速数据分析过程。我们就需要运用抽样技术来发现整个数据集的模式和趋势。HQL中有三种抽样技术:随...

  • Resize,w 360,h 240
    HQL聚集计算之窗口篇

    自Hive 0.11.0之后,窗口函数,作为一组可以以扫描多个输入行作为输入来计算和生成每一个返回值的特殊函数,正式进入HQL大家族。该组函数的...

  • HQL聚集计算之条件篇

    自Hive 0.70之后,HAVING 子句可以用于对聚集结果进行条件过滤。该用法和SQL中类似,这样我们就不需要把聚集语句作为子查询来过滤相关...

  • HQL聚集计算之进阶篇

    HQL聚集函数可以使用GROUPING SETS, CUBE, 和ROLLUP等关键词。 GROUPING SETS该子句等同于GROUP BY...

  • HQL聚集计算之基本篇

    基本内置聚集函数通常需要和GROUP BY子句一起使用。如果没有使用GROUP BY子句,聚集函数会缺省按照整行所有列来进行聚集。 无GROUP...

  • HQL之函数使用

    在HQL中,我们可以使用关系操作符、数学操作符、逻辑操作符、复合类型操作符以及复合类型构建器。其中,关系操作符、数学操作符和逻辑操作符这三个操作...