热门标签 | HotTags
当前位置:  开发笔记 > 后端 > 正文

华为数据中台_华为云|大数据中台架构设计

本文来源于:数据观公众号导读企业越来越重视数字化运营,核心重点是数据管理、可视以及数据治理。基础大数据产品逐步成熟,数据安全、数据开放以及

a249ee533c6943f4874ba527ebc27045.png

本文来源于:数据观 公众号

导 读

企业越来越重视数字化运营,核心重点是数据管理、可视以及数据治理。基础大数据产品逐步成熟,数据安全、数据开 放以及主数据管理需求 旺盛。预计到2020年,大数据软件市场规模将达 到268.2亿元,年复合增长率38.6%;大数据服务市场规模将达到 165.9亿元,年复合增长率41.4%。初步估算数据管理市场约43亿,核 心发展方向:数据资产管理、 数据可视化以及机器学习。

本文主要内容:

数据中台背景洞察;

华为数据中台顶层设计;

华为云数据中台解决方案DAYU

日益增长的数字化需求、复杂的业务生态系统、数据的分布式 存储趋势,驱动企业需要构建 一个跨越孤立数据、简单、一致 的数字化运营生态系统。数字化运营,需要由传统的烟囱式IT系统向数据中台转型。

挑战: 

1、独:烟囱系统,数据孤岛严重。重复开发、成本浪费; 

2、断:数据理解与数据价值链条的断层;

3、缺:缺标准、缺治理、缺数据;

4、难:知数据难、要数据难、懂数据难;

目标:

从烟囱式多个平台向融合大数据平台,建立统一的数据采集与整合大数据处理、计算及数据服务能力,降低大数据使用成本;

通过集中各领域数据,方便创新,让数据产生更大价值 大中台、小前台,前台特种兵敏捷作战单元+中台航母舰群精 确制导炮火。

数据中台定义与愿景:

定义:全域级可复用的数据资产中心与数据能力中心,提供清洁、透明、智慧的数据资产与高效、易用的数据能力, 使能业务数字化运营;

愿景:让数据成为如水和电一般的资源,随需获取,敏捷自助;让数据极大发挥价值,推动业务创新与变革。

数据中台建设框架:

1)以业务数字化为前提,数据入湖为基础,建设数据资产中心;

2)打造能高效承载数据中台建设的数据运营平台能力中心

……

以下为报告内容:

9e03b26326ae774a76ad78cb248f6f19.png

3d861d643d8a21d57a833d4b0c2cc6ce.png

e75c550205c8e61ca3da0fc0c79026c4.png

bb837dc37039836a2d987b049e7964c3.png

5d36f69fef91b8d5e3643c5026230cc2.png

6886bc10ea8d23ef32f763f5de0e524c.png

38deaa179283cec1ff76e206d34fa565.png

4c85f6fdabcb03d7acae9db3e6c62340.png

da4382db5d87be513ac729465a675e24.png

4ea5e0df0e60a283c2989ccd5de4080a.png

1d228b25727ff6971ff0a30825bf765a.png

98ae1fef12c6296ada53c766b0229132.png

6883cfadccce21092c9794db79a7220b.png

286738b253421cab1a07826a9597e1f1.png

1441087d0d939a61428970a84c58b137.png

a256f0a00737b370bf687d9df76028bd.png

56a9ed6715b7534ac2422a19af179115.png





推荐阅读
  • 老牌医药收割AI红利:先投个15亿美元抢中国人才
    萧箫发自凹非寺量子位报道|公众号QbitAI没想到,一场大会把我的“刻板印象”攻破了。2021世界人工智能大会现场,能看见不少熟悉的身影, ... [详细]
  • 【回顾】聚焦DTCC | 巨杉数据库与您相约DTCC 数据库技术大会
    2018年5月10-12日,第九届中国数据库技术大会(DTCC2018)将以“数领先机•智赢未来”为主题,设定2大主会场及20个技术专场,邀请来自国内外互联网、金融、教育等行业百余 ... [详细]
  • Java工程师书单(初级,中级,高级)
    简介怎样学习才能从一名Java初级程序员成长为一名合格的架构师,或者说一名合格的架构师应该有怎样的技术知识体系,这是不仅一个刚刚踏入职场的初级程序员也是工作一两年之后开始迷茫的程序 ... [详细]
  • 云计算时代下的传统媒体升级之路
    近年来,随着5G、移动互联网、物联网等技术的发展,加速了各行各业的数字化转型,传统媒体也在新技术的驱动下迎来了升级。在传统媒体到新媒体的转 ... [详细]
  • 数字账号安全与数据资产问题的研究及解决方案
    本文研究了数字账号安全与数据资产问题,并提出了解决方案。近期,大量QQ账号被盗事件引起了广泛关注。欺诈者对数字账号的价值认识超过了账号主人,因此他们不断攻击和盗用账号。然而,平台和账号主人对账号安全问题的态度不正确,只有用户自身意识到问题的严重性并采取行动,才能推动平台优先解决这些问题。本文旨在提醒用户关注账号安全,并呼吁平台承担起更多的责任。令牌云团队对此进行了长期深入的研究,并提出了相应的解决方案。 ... [详细]
  • 浏览器中的异常检测算法及其在深度学习中的应用
    本文介绍了在浏览器中进行异常检测的算法,包括统计学方法和机器学习方法,并探讨了异常检测在深度学习中的应用。异常检测在金融领域的信用卡欺诈、企业安全领域的非法入侵、IT运维中的设备维护时间点预测等方面具有广泛的应用。通过使用TensorFlow.js进行异常检测,可以实现对单变量和多变量异常的检测。统计学方法通过估计数据的分布概率来计算数据点的异常概率,而机器学习方法则通过训练数据来建立异常检测模型。 ... [详细]
  • 本文介绍了绕过WAF的XSS检测机制的方法,包括确定payload结构、测试和混淆。同时提出了一种构建XSS payload的方法,该payload与安全机制使用的正则表达式不匹配。通过清理用户输入、转义输出、使用文档对象模型(DOM)接收器和源、实施适当的跨域资源共享(CORS)策略和其他安全策略,可以有效阻止XSS漏洞。但是,WAF或自定义过滤器仍然被广泛使用来增加安全性。本文的方法可以绕过这种安全机制,构建与正则表达式不匹配的XSS payload。 ... [详细]
  • GPT-3发布,动动手指就能自动生成代码的神器来了!
    近日,OpenAI发布了最新的NLP模型GPT-3,该模型在GitHub趋势榜上名列前茅。GPT-3使用的数据集容量达到45TB,参数个数高达1750亿,训练好的模型需要700G的硬盘空间来存储。一位开发者根据GPT-3模型上线了一个名为debuid的网站,用户只需用英语描述需求,前端代码就能自动生成。这个神奇的功能让许多程序员感到惊讶。去年,OpenAI在与世界冠军OG战队的表演赛中展示了他们的强化学习模型,在限定条件下以2:0完胜人类冠军。 ... [详细]
  • SpringBoot整合SpringSecurity+JWT实现单点登录
    SpringBoot整合SpringSecurity+JWT实现单点登录,Go语言社区,Golang程序员人脉社 ... [详细]
  • Java和JavaScript是什么关系?java跟javaScript都是编程语言,只是java跟javaScript没有什么太大关系,一个是脚本语言(前端语言),一个是面向对象 ... [详细]
  • 背景应用安全领域,各类攻击长久以来都危害着互联网上的应用,在web应用安全风险中,各类注入、跨站等攻击仍然占据着较前的位置。WAF(Web应用防火墙)正是为防御和阻断这类攻击而存在 ... [详细]
  • 寻求更强大的身份和访问管理(IAM)平台的企业正在转向云,并接受身份即服务(IDaaS)的灵活性。要为IAM选择正确的场外解决方案,业务管理人员和IT专业人员必须在实施之前评估安全 ... [详细]
  • TiDB | TiDB在5A级物流企业核心系统的应用与实践
    TiDB在5A级物流企业核心系统的应用与实践前言一、业务背景科捷物流概况神州金库简介二、现状与挑战神州金库现有技术体系业务挑战应对方案三、TiDB解决方案测试迁移收益问题四、说在最 ... [详细]
  • 地产科技战:10+
    作者|肖漫出品|雷锋网产业组一场房地产巨头的求变征战,正悄然开启。近年来,在限价限购、“房住不炒”以及三道红线的调控政策下,房地产企业竞相加快转型升级的步伐。一方面,房地产市场增量 ... [详细]
  • 鞭牛士报道9月22日上午,由杭州跨境电商综合试验区与PingPong联合发起的“以数字贸易为引擎外贸韧性看杭州”主题交流活动在杭州举行ping。杭州市商务 ... [详细]
author-avatar
mobiledu2502907117
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有