技术控

    今日:130| 主题:49225
收藏本版 (1)
最新软件应用技术尽在掌握

[其他] QingStor™ 对象存储最佳实践之初探云端数据仓库

[复制链接]
软妹子 发表于 2016-10-5 18:22:11
351 10

立即注册CoLaBug.com会员,免费获得投稿人的专业资料,享用更多功能,玩转个人品牌!

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
随着移动互联网、物联网的高速发展,我们获取的数据比以往任何时候都要多,大数据在社会、政治和商业等各个领域逐渐显示出威力,没有任何一个个人和企业能够逃过这个数据时代,因此数据的存储、分析、处理、对企业的决策支持变得格外重要。
  QingStor™ 对象存储作为海量数据存储池,将会与 QingCloud 平台上的计算资源紧密整合,从而实现高性能、低成本的数据分析与挖掘,提升企业数据价值。
  本文分享了 QingStor™ 对象存储如何与 HDW 进行集成的实践案例。在这个案例中,我们将把数据从 QingStor™ 对象存储中导入到数据仓库,并将最终的查询结果回导至 QingStor™ 对象存储。
  注:HDW 是一个高性能、完全托管的 PB 级 MPP 数据仓库。源于 PostgreSQL 和 Greenplum Database,HDW 让你能够利用标准 SQL 客户端和 BI 工具轻松分析海量数据。这个服务还包括动态伸缩、监控和警告等功能,帮助您更好地管理数据仓库集群。HDW 由北京酷克数据科技有限公司提供技术支持。
  创建 Bucket (存储空间)

   
QingStor™ 对象存储最佳实践之初探云端数据仓库-1 (初探网,codol初探神秘岛)

  创建一个 Bucket,名为"hdw-hashdata-cn",并在其下创建两个目录"input"和"output"。
  创建 API 访问 QingStor™ 对象存储

QingStor™ 对象存储最佳实践之初探云端数据仓库-2 (初探网,codol初探神秘岛)

  创建输入文件

  在本地创建文件"persons.txt"和"orders.txt",并将其上传至前面创建的 Bucket "hdw-hashdata-cn"的"input"目录里。
  “persons.txt” 内容:

  1,Adams,John,Oxford Street,London
  2,Bush,George,Fifth Avenue,New York
  3,Carter,Thomas,Changan Street,Beijing
   " orders.txt " 内容

  1,77895,3
  2,44678,3
  3,22456,1
  4,24562,1
  5,34674,65
  创建数据表

   连接 HDW 数据仓库进入 Postgres 数据库,执行如下图所示命令创建相应的数据表(请将里面的 access key id 和 secret access key 换成你的 API 密钥)。
  外部表 epersons 对应前面上传的 persons.txt 文件,eorders 对应 orders.txt 文件,eresult 对应 Bucket hdw-hashdata-cn 的 output 目录。
   
1234下一页
友荐云推荐




上一篇:优秀的移动 App 是怎样炼成的?
下一篇:How it actually feels to write JavaScript in 2016
酷辣虫提示酷辣虫禁止发表任何与中华人民共和国法律有抵触的内容!所有内容由用户发布,并不代表酷辣虫的观点,酷辣虫无法对用户发布内容真实性提供任何的保证,请自行验证并承担风险与后果。如您有版权、违规等问题,请通过"联系我们"或"违规举报"告知我们处理。

nnhui2009 发表于 2016-10-5 19:30:23
好好顶贴,天天向上!
回复 支持 反对

使用道具 举报

654qw 发表于 2016-10-5 20:30:18
男女关系处理得好会传出佳话,处理得不好会传出闲话。
回复 支持 反对

使用道具 举报

cvzco 发表于 2016-10-5 21:30:23
房价越来越高,所以,好男人越来越少……
回复 支持 反对

使用道具 举报

香柏 发表于 2016-10-6 01:37:50
有钱就是任性
回复 支持 反对

使用道具 举报

小猪在雨天 发表于 2016-10-6 17:45:05
确实不错,顶先
回复 支持 反对

使用道具 举报

gxdy2744 发表于 2016-10-16 11:16:48
楼猪V5啊
回复 支持 反对

使用道具 举报

夜梦 发表于 2016-10-26 09:54:06
不觉名利。。。。。
回复 支持 反对

使用道具 举报

念瑶 发表于 2016-11-7 18:05:48
滴答滴答,我路过的!
回复 支持 反对

使用道具 举报

duck1082 发表于 2016-11-16 08:53:44
软妹子萌萌哒
回复 支持 反对

使用道具 举报

*滑动验证:
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

我要投稿

推荐阅读

扫码访问 @iTTTTT瑞翔 的微博
回页顶回复上一篇下一篇回列表手机版
手机版/CoLaBug.com ( 粤ICP备05003221号 | 文网文[2010]257号 )|网站地图 酷辣虫

© 2001-2016 Comsenz Inc. Design: Dean. DiscuzFans.

返回顶部 返回列表