热门标签 | HotTags
当前位置:  开发笔记 > 后端 > 正文

数据仓库学习笔记如何使用一张表

熟悉业务数据生产数据探查01—熟悉业务我们接触的每一个数据表并非偶然,一定会有带有某种场景需求。比如我们要计算一个APP的订单数据,每日活跃用户数……我们总是带着问题去寻找数
  • 熟悉业务

  • 数据生产

  • 数据探查


 

01

熟悉业务

 

我们接触的每一个数据表并非偶然,一定会有带有某种场景需求。比如我们要计算一个APP的订单数据,每日活跃用户数……我们总是带着问题去寻找数据。

 

反之亦然,我们拿到一张数据表,要搞清楚这个表的数据是怎么生产出来的,比如用户打开APP产生的埋点日志,用户下单产生的业务订单数据……

 

又或是我们已经不需要从最源头去背书一张数据表,而是非常精确的知道一个表的作用和意义,比如A表内是APP内XXX业务的订单数据,B标示XXX业务的商家数据,C表是经过A+B加工而成的商家订单宽表数据……

 

在以上三种情况下,我们首先要了解的是业务,业务的场景是什么,数据是通过业务怎么产生的。埋点日志是用户访问和点击的时候产生的,订单数据是用户创建并支付订单时候产生的,商家信息是商家注册或者合同数据上传产生的……

 

无论是数据工程师还是数据分析师,只要从事业务方面的工作,对业务的了解越深入也会后期发挥更大的意义和作用。

 

02

数据生产

 

以订单数据表为例,我们不仅要熟悉整体的业务场景,还需要更细节的熟悉每个数据在什么情况下产生。

 

订单ID:当用户提交订单的时候,系统生产的唯一值。

订单金额:用户提交订单的商品价格(如果有优惠活动,这里的口径就会变化多端)

支付金额:


推荐阅读
  • 解决vCenter vSphere HA初始化失败的问题
    本文探讨了在集群中遇到的所有vSphere HA主机状态显示‘无法正确安装或配置vSphere HA代理’错误的情况,并详细介绍了排查与解决步骤,包括检查HA初始化错误及安装HA代理的常见故障排除方法。 ... [详细]
  • 在互联网信息爆炸的时代,当用户需求模糊或难以通过精确查询表达时,推荐系统成为解决信息过载的有效手段。美团作为国内领先的O2O平台,通过深入分析用户行为,运用先进的机器学习技术优化推荐算法,提升用户体验。 ... [详细]
  • 全能终端工具推荐:高效、免费、易用
    介绍一款备受好评的全能型终端工具——MobaXterm,它不仅功能强大,而且完全免费,适合各类用户使用。 ... [详细]
  • Netflix利用Druid实现高效实时数据分析
    本文探讨了全球领先的在线娱乐公司Netflix如何通过采用Apache Druid,实现了高效的数据采集、处理和实时分析,从而显著提升了用户体验和业务决策的准确性。文章详细介绍了Netflix在系统架构、数据摄取、管理和查询方面的实践,并展示了Druid在大规模数据处理中的卓越性能。 ... [详细]
  • 本文将详细介绍如何在ThinkPHP6框架中实现多数据库的部署,包括读写分离的策略,以及如何通过负载均衡和MySQL同步技术优化数据库性能。 ... [详细]
  • 随着iTunes界面的更新,用户发现通过该平台安装IPA文件变得不再可能。面对这一变化,除了苹果官方推荐的TestFlight外,还有哪些高效便捷的方法呢?本文将为您详细介绍几种替代方案。 ... [详细]
  • 本文详细列举了软件开发中常见的功能测试要点,涵盖输入框、搜索、添加/修改、删除、文件上传下载等多个方面,旨在帮助测试人员全面覆盖测试需求,确保软件质量。 ... [详细]
  • Redis安全防护深入解析
    本文详细探讨了如何通过指令安全、端口管理和SSL代理等措施有效保护Redis服务的安全性。 ... [详细]
  • CentOS 转向引发争议,联合创始人推出 Rocky Linux
    CentOS 转向 CentOS Stream 引发用户不满,其联合创始人 Gregory Kurtzer 推出新的社区项目 Rocky Linux,旨在延续 CentOS 的精神。 ... [详细]
  • 本文将详细探讨 Linux 系统中的 netstat 命令,该命令用于查看网络状态和连接情况。通过了解 IP 地址和端口的基本概念,我们将更好地理解如何利用 netstat 命令来监控和管理网络服务。 ... [详细]
  • 本文详细介绍了在金蝶财务软件中设置和执行凭证连续打印的具体步骤,帮助用户高效完成会计凭证的批量打印工作。 ... [详细]
  • 在树莓派Ubuntu(ARM64)上安装Node.js
    本文详细介绍了如何在树莓派Ubuntu系统(ARM64架构)上安装Node.js,包括下载、解压、移动文件以及创建软链接等步骤。 ... [详细]
  • 在使用OSChina平台进行Git代码上传时遇到文件夹遗漏的问题,这可能导致项目构建失败或功能不完整。本文将探讨可能的原因及解决方案。 ... [详细]
  • 本文详细介绍了DNU(每日新增用户数)、DAU(每日活跃用户数)以及DOU(每日老用户数)的概念,并探讨了DNU/DAU比率在游戏开发中的重要性及其对游戏留存率的影响。通过具体案例分析,展示了如何利用这一比率来评估游戏的市场表现和用户粘性。 ... [详细]
  • 本文探讨了当前技术发展趋势,特别是大数据和人工智能如何推动工业互联网的发展。文章分析了全球主要国家在工业互联网领域的进展,并展望了未来工业互联网技术的发展方向。 ... [详细]
author-avatar
mobiledu2502886767
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有