目录一、概述二、Hive优点与使用场景1）优点2）使用场景三、Hive架构1）服务端组件1、Driver组件2、Metastore组件3、Thrift服务2）客户端组件1、CLI2、Thrift客户端3、WEBGUI3）Metastore

数据仓库 之 数据建模理论   数据仓库建模理论就像大厦的地基，只有把建模理论理解清楚，在数据建模时才能有理有 […]

经常有朋友问到一个问题：事实表和维度表是不是一定要在一个数据库里面呢？ 为什么会有这样的问题呢？因为我们讲到， […]

开放计算平台——数据仓库（Hive）权限控制 平台数据仓库使用Hive进行构建，通过调研决定使用“SQL St […]

数仓建模的目标 访问性能：能够快速查询所需的数据，减少数据I/O 数据成本：减少不必要的数据冗余，实现计算结果 […]

  1、数仓分层 分层    数据集市与数据仓库的区别    数据集市：狭义ADS层； 广义上指DWD DWS […]

​一、前言 数仓建模的成熟度在金融领域，尤其是银行、保险和证券行业得益于传统数据仓库服务厂商的推动，具有非常好 […]

  数仓分层搭建导入数据 1.ODS层 ① 用户行为数据日志表 创建输入支持lzo压缩、输出是text，支持J […]

ODS层数据不做任何处理，完全仿照业务数据库中的表字段，一模一样的创建ODS层对应表。 8张表建表语句： ①用 […]

ODS（Operational Data Store）：原始数据层，存放原始数据，直接加载原始日志、数据，数据 […]

概述 使用这种方式即可以记录历史，而且最大程度的节省存储。这里简单介绍一下这种历史拉链表的更新方法。此文参考链 […]

关于 sql 语句的执行顺序网上有很多资料，但是大多都没进行验证，并且很多都有点小错误，尤其是对于 selec […]

摘要：数据库智能运维（DMS）是GaussDB(DWS) 为客户数据库快速、稳定运行提供保驾护航的能力，对业务 […]

人们普遍认为，在数据仓库和商业智能中，维度模型事给用户显示信息的首选结构，它更易于理解和使用。又因为大数据和H […]

2020年终总结        尘归尘，土归土；基本功，见分晓。                时间过得的真快 […]

Techo | 大数据专场精彩回顾 2020年12月20日，在腾讯2020 Techo Park开发者大会大数 […]

数据湖初识 近两年，为什么都开始谈论起 Data Lake 这个”新名词”了？ 先说说我的想法，其实还是用户需 […]

数据湖初识 近两年，为什么都开始谈论起 Data Lake 这个”新名词”了？ 先说说我的想法，其实还是用户需 […]

Apache Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供一 […]

微博数仓数据延时优化方案 前言 本文以离线数据仓库为背景，重点介绍因传输链路数据延时的不确定性，可能导致部分延 […]

摘要：什么是数据湖？它有什么作用？今天将由华为云技术专家从理论出发，将问题抽丝剥茧，从技术维度娓娓道来。 什么 […]

关于数据仓库的自问 1、为什么要建设数据仓库？ 为了更快更好的响应业务上的分析需求。 1.1、数据仓库建设方法 […]

一、前言 本文是《***分布式数据仓库最佳实践***》视频课程的学员答疑实录，学员答疑过程中，针对共性问题和具 […]

1.1.1     hive是什么？ Hive是基于 Hadoop 的一个数据仓库工具： 1.       h […]

刚接触数据仓库是在我的第一份实习工作——数据中心数据管理系统开发，它是一个B/S架构的应用，与一般的项目不同的 […]