博客
关于我
Hologres使用记录
阅读量:355 次
发布时间:2019-03-04

本文共 473 字,大约阅读时间需要 1 分钟。

1、Holo直查maxcompute的限制

1)单查询限制200G

2)分区数限制512

解决办法:将maxcompute的数据导入holo作为内表使用

2、Holo在即系查询场景的使用

通过flink将数据实时清洗到holo中,做一张增量更新的实时表,然后使用holo直查(结合报表工具来具体使用)

如果需要维度信息,可以通过建立maxcompute外表的方式,做到同时将maxcompute外表+holo内表的联合查询,也就是对接多数据源的联合查询

3、如何实现将离线数据定时写入到holo

这个目前要结合dateworks的调度功能来使用,在D2中的holo集成模块写SQL,然后将任务做周期性的调度即可

4、Holo因为内存达到限制导致查询失败

可以使用参数来解除限制:set hg_experimental_query_memory_in_MB_limit=0

当然最重要的还是提前对SQL就行优化,减少不必要的数据

5、Holo行转列的实现

SELECT regexp_split_to_table('a,s,d,f,g',','); 

 

转载地址:http://yoke.baihongyu.com/

你可能感兴趣的文章
Nginx 负载均衡详解
查看>>
nginx 配置 单页面应用的解决方案
查看>>
nginx 配置https(一)—— 自签名证书
查看>>
nginx 配置~~~本身就是一个静态资源的服务器
查看>>
Nginx 配置清单(一篇够用)
查看>>
Nginx 配置解析:从基础到高级应用指南
查看>>
nginx+php的搭建
查看>>
nginx+tomcat+memcached
查看>>
nginx+Tomcat性能监控
查看>>
nginx+uwsgi+django
查看>>
Nginx-http-flv-module流媒体服务器搭建+模拟推流+flv.js在前端html和Vue中播放HTTP-FLV视频流
查看>>
nginx-vts + prometheus 监控nginx
查看>>
Nginx下配置codeigniter框架方法
查看>>
Nginx之二:nginx.conf简单配置(参数详解)
查看>>
Nginx代理websocket配置(解决websocket异常断开连接tcp连接不断问题)
查看>>
Nginx代理初探
查看>>
nginx代理地图服务--离线部署地图服务(地图数据篇.4)
查看>>
Nginx代理外网映射
查看>>
Nginx代理模式下 log-format 获取客户端真实IP
查看>>
Nginx代理静态资源(gis瓦片图片)实现非固定ip的url适配网络环境映射ip下的资源请求解决方案
查看>>