软件架构不以实现为目的的架构,都是无意义的。 系统架构的基本判断 1. 无法上线的应用架构,算不上好的软件架构 2. 没人能完成开发的软件架构,算不上具有可行性的软件架构 3. 在现有技术上不可行的架构,算不上合理的软件架构 软件架构参与人员 实施者、维护者:系统可以以预计的方式构建实施规范、原则:系统...
概念类 Hadoop MapReduce 通用并行框架,大数据处理计算引擎Job 中间输出结果可以保存在内存中 Spark 将 Scala 作为应用程序框架Spark 通过 Mesos 第三方集群框架,可以在 Hadoop 文件系统中并行运行 特点 Java、Scala、Python 和 R APIs。 可...
源码中文社区 源码内容config optionMergeStrategies silent: false productionTip: true devtools: true performance: false errorHandler: null warnHandler: null ignoredEleme...
公共业务模块下层:复用共享、连接、服务(双中台:业务中天、数据中台)one data数据加工和深度分析(AI)云原生 发展数据湖阶段 –> 数据工厂阶段 –> 数据中台阶段 数据仓库 恩门模式 整体架构 金博尔模式 维度和事实 数据湖 数据规模和数据类型的限制 完全分布式 弱化数据格...
5.7 特性 初始化完成后,随机 Root 密码 默认安装完成没有 test 数据库,用户自定义创建及权限控制 默认 SSL 加密 密码过期策略 用户锁 支持 JSON 服务端提供操作 JSON 的函数,存储方式:将 JSON 编码成 BLOB 支持两类生成列 虚拟生成列、存储生成列 引...
前世今生[阿里云] Infrastructure as a service[新浪云] platform as a service[office 365] software as a service 分布式资源管理器 MeSoS 伯克利、Twitter、2019-05弃用Docker Swarm 2019-7 ...
核心概念维度 单级维、层级维、变化维 度量 度量是反映企业运行情况或状态的一些数值指标,是业务量化的表示,可以用来监测业务的成效,比如销售额、利润来反应企业业绩 事实表 事务粒度事实表、周期快照粒度事实表、累积快照粒度事实表 原则:一致性维度和一致性事实 分层贴源层,就是将所有涉及业务系统的数据...
序 数据展现获得成功,必须建立在简单性的基础上,以业务用户的需求来驱动维度建模是建立集成化的 DW/BI 系统的主导结构使用维度建模的一致性维度和一致性事实,可以增量式的建立具有可实践性、可预测、分布式的复杂 DW/BI 系统框架 数据获取 VS 数据分析 信息的作用:操作型记录的保存、分析型决策的制定 ...
维度建模设计的4步骤 选择业务过程 解释:由组织完成的微观活动,获得订单、开具发票、接收付款等 公共特征: 通常用行为动词表示,表示业务执行的活动 由某个操作型系统支撑 建立或获取关键性能度量(过滤器和约束的不同组合来审查和评估度量) 由输入激活嘛,产生输出度量(一系列过程产生一系列事实表) ...
前言数据是资产国际数据管理协会(DAMA)能力成熟度模型集成(CMMI) 现状 数据基础薄弱,数据标准混乱、质量层次不齐、数据孤岛化现象严重,阻碍了数据的共享受限数据规模和数据源种类,主要应用:精准营销、风险控制;应用深度不够数据价值很难评估,包括数据的成本和对戏业务的贡献 四部分 概念和特征趋势;实践角...