数据仓库

#数据仓库#

已有11人关注此标签

内容分类

DataWorks向翠

DataWorks:调度依赖解析

自动解析:无需知道该表是从哪个节点产出的,自动解析后我能拿到该表最新的数据。 正确理解运用自动解析可节约大部分开发时间,并能保障数据的完整性和实时性。

DataWorks向翠

DataWorks:任务未运行自助排查

为什么我的任务没有运行

选型宝

选型宝访谈:移动+社交时代,如何治理“大数据洪水”?

写在前面 不管你是否愿意,随着移动互联网和社交工具的普及,一个充满了机遇和挑战的大数据时代悄然来临了。就在大家纷纷谈论数据驱动创新、数据创造价值的时候,仍有许多企业的CIO/CDO在这个新时代面前感到茫然和困惑: 我的企业的数据在哪里?它有什么价值? 数据治理,应该建立怎样的完整框架? 在完整的框架下,应该用怎样的工具武装自己 ? 移动+社交时代,海量非结构化、半机构化数据涌来,如何应对? 智能数据湖是怎么回事儿?它和数据仓库是什么关系? …… 为了找到这些问题的答案,我们特意采访了全球领先的数据管理专家Informatica的中国北方区总经理李晨先生。

选型宝

选型宝分享Informatica中国数据管理5大经典案例

写在前面 5月18日,选型直播曾做过一期题为“移动+社交时代,如何治理大数据洪水?”的节目,在那期节目中,Informatica北方区总经理李晨先生系统地介绍了Informatica公司的背景、大数据治理的完整框架,以及最新的“智能数据湖”解决方案。

程序狗狐狸

SpringCloud----->springboot项目读取mysql的binlog日志

springboot项目读取mysql的binlog日志,在去年的时候,我就遇到一个需求,需要把mysql数据库中的数据的增、删、改的数据准实时做数据清洗,也就是ETL工作,同步到公司的数据仓库greenplum中(数据库数据变化的监听从而同步缓存(如Redis)数据等)。

程序狗狐狸

SpringCloud----->在springboot项目中跑起来控制台项目

在springboot项目中跑起来控制台项目: springboot通常都是用来做restful api的web项目。 但是也有极少情况下,需要跑控制台项目,在去年的时候,我就遇到一个需求,需要把mysql数据库中的数据的增、删、改的数据准实时做数据清洗,也就是ETL工作,同步到公司的数据仓库greenplum中。

选型宝

选型宝访谈:什么是人人可用的BI平台?

前言 无智能,不商业。在智能商业时代,BI正逐渐成为企业的标配。然后,曾几何时,BI还只是数据达人和IT高手的专属工具。传统BI系统给人的印象,往往是沉重、缓慢、不接地气,并导致很多BI项目最终沦为面子工程,无法为企业创造真正的价值。

数懒

全新一代企业级大数据应用模式揭秘

三个问题 1.当下是否还需要一个复杂的EDW(企业级数据仓库)? 2.数据系统的目标用户是谁? 3.让数据适应计算能力还是计算跟着数据走 数据仓库这个概念在二十多年前由Bill Inmon提出后,几乎所有的IT厂商都开始介入这个领域,为企业级数据仓库设计非常复杂的体系结构和数据模型,典型的企业级数据应用架构如下: 这个架构,层次结构非常清晰,但是链路非常长,导致数据冗余非常大,同时数据表结构关系复杂,是一个典型的给技术人员使用的模型,业务的同学要使用数据是非常难的,没法理解底层复杂的表结构和表之间复杂的关联关系。

黄小斜

Hadoop生态系统

Hadoop生态系统 首先我们先了解一下Hadoop的起源。然后介绍一些关于Hadoop生态系统中的具体工具的使用方法。

黄小斜

后端技术杂谈12:捋一捋大数据研发的基本概念

你了解你的数据吗(开篇) 转自http://www.mdjs.info/2018/03/05/data-warehouse/concept-of-dw/0x00 前言你了解你的数据吗? 前几天突然来了点灵感,想梳理一下自己对数据的理解,因此便有了这篇博客或者说这系列博客来聊聊数据。

黄小斜

阿里中间件研发面经

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/a724888/article/details/82702351 阿里中间件研发面经   本文首发于微信公众号:程序员江湖 研发工程师(Java)           我参与了阿里巴巴中间件部门的提前批面试,一共经历了四次面试,拿到了口头offer。

黄小斜

在互联网大厂实习之后,我明白了这些事

壹 在猪场的短暂时光                             刚出学校大门,我的实习之路才刚刚开始。在网易待了3个月不到,百度待了五个月左右,总共8个月左右的实习时间,说长也长,说短也短,但这两段经历确实也是我人生中宝贵的财富,为我后续参加秋招面试也加分不少。

晋恒

阿里云MaxCompute 2019-7月刊

7月MaxCompute最新资讯,技术好文,8月精彩活动预告,尽在7月刊。

dataworks彭敏

DataWorks新手引导

DataWorks新手引导,持续更新。对DataWorks产品有任何疑惑,欢迎文档下方留言,我们会定期处理。

开源大数据EMR

Apache Spark3.0什么样?一文读懂Apache Spark最新技术发展与展望

阿里巴巴高级技术专家李呈祥带来了《Apache Spark 最新技术发展和3.0+ 展望》的全面解析,为大家介绍了Spark在整体IT基础设施上云背景下的新挑战和最新技术进展,同时预测了Spark 3.0即将重磅发布的新功能。

EMR

Apache Spark3.0什么样?一文读懂Apache Spark最新技术发展与展望

阿里巴巴高级技术专家李呈祥带来了《Apache Spark 最新技术发展和3.0+ 展望》的全面解析,为大家介绍了Spark在整体IT基础设施上云背景下的新挑战和最新技术进展,同时预测了Spark 3.0即将重磅发布的新功能。

云攻略小攻

AnalyticDB for MySQL 3.0 技术架构解析

企业数据需求不断变化,近年来变化趋势日益明显,从数据的3V特性看:体积,速度和变化;Big Data强调数据量,PB级以上,是静态数据。而Fast Data在数据量的基础上,意味着速度和和变化,意味着客户可以更加实时化、更加快速地进行数据处理。