博客
关于我
Hologres使用记录
阅读量:355 次
发布时间:2019-03-04

本文共 473 字,大约阅读时间需要 1 分钟。

1、Holo直查maxcompute的限制

1)单查询限制200G

2)分区数限制512

解决办法:将maxcompute的数据导入holo作为内表使用

2、Holo在即系查询场景的使用

通过flink将数据实时清洗到holo中,做一张增量更新的实时表,然后使用holo直查(结合报表工具来具体使用)

如果需要维度信息,可以通过建立maxcompute外表的方式,做到同时将maxcompute外表+holo内表的联合查询,也就是对接多数据源的联合查询

3、如何实现将离线数据定时写入到holo

这个目前要结合dateworks的调度功能来使用,在D2中的holo集成模块写SQL,然后将任务做周期性的调度即可

4、Holo因为内存达到限制导致查询失败

可以使用参数来解除限制:set hg_experimental_query_memory_in_MB_limit=0

当然最重要的还是提前对SQL就行优化,减少不必要的数据

5、Holo行转列的实现

SELECT regexp_split_to_table('a,s,d,f,g',','); 

 

转载地址:http://yoke.baihongyu.com/

你可能感兴趣的文章
NLP的不同研究领域和最新发展的概述
查看>>
NLP的神经网络训练的新模式
查看>>
NLP采用Bert进行简单文本情感分类
查看>>
NLP问答系统:使用 Deepset SQUAD 和 SQuAD v2 度量评估
查看>>
NLP项目:维基百科文章爬虫和分类【02】 - 语料库转换管道
查看>>
NLP:从头开始的文本矢量化方法
查看>>
NLP:使用 SciKit Learn 的文本矢量化方法
查看>>
NLTK - 停用词下载
查看>>
nmap 使用总结
查看>>
nmap 使用方法详细介绍
查看>>
nmap使用
查看>>
nmap使用实战(附nmap安装包)
查看>>
Nmap哪些想不到的姿势
查看>>
Nmap扫描教程之Nmap基础知识
查看>>
nmap指纹识别要点以及又快又准之方法
查看>>
Nmap渗透测试指南之指纹识别与探测、伺机而动
查看>>
Nmap端口扫描工具Windows安装和命令大全(非常详细)零基础入门到精通,收藏这篇就够了
查看>>
NMAP网络扫描工具的安装与使用
查看>>
NMF(非负矩阵分解)
查看>>
nmon_x86_64_centos7工具如何使用
查看>>