首页 最新段子

Snowflake放弃传统数据仓库架构,提出DWaaS(Data-Warehouse-as-a-Service)
Snowflake将存储和计算彻底分离,从本质上解决传统架构系统架构易崩溃、高频读写难、数据复制与迁移难等诸多问题
实名吐槽scala 构建工具 sbt ,
真是个 SB tool ,F* 三连 ,
不过这才是学习成长的机会
轻量级bean 容器 =   单例 +  final +  构造注入 + 静态工具类
专注眼前的事情
学习是治愈的良药
要有强大的信念
工作维护着生活和精神的秩序
无论厚薄,都是人生
一个人,应该这样选择自己的人生
找出三个问题的答案
你最擅长的事
你最感兴趣的事
你能获得最大利益的事
这三个问题答案的交集,就是努力的方向
天不生我李淳罡,剑道万古如长夜
我一个修java的,改修scala,
境界跌落,战斗力从90暴跌至0
关键是 这 scala 邪门 ,似魔道
努力吧 修炼吧 
有朝一日 当立天门
键盘 来 !!!
哈哈哈哈哈哈哈
Flink 下一步的发展方向 流式数仓(Streaming Warehouse Streamhouse)
Flink Next, Beyond Stream Processing
Flink 要从 Stream Processing 走向 Streaming Warehouse 去覆盖更大的场景
而要实现流式数仓的目标,就意味着 Flink 社区要拓展适合流批一体的数据存储,
这是 Flink 今年在技术方面的一个创新,社区相关工作已经在 10 月份启动,
接下来这会作为 Flink 社区未来一年的一个重点方向来推进
紧跟大数据时代技术趋势,观远数据采用Spark+ Minio+Delta Lake大数据架构,
使产品得到优秀数据计算性能和水平扩展能力的加持,进而为业务提供强大的数据和算法支撑,演进式策略更能帮助企业数据人员无感过渡
观远数据是一站式智能分析平台,面向企业提供数据分析可视化与智能决策服务,
其打通数据采集-接入-管理-开发-分析-AI建模-AI模型运行-数据应用全流程,
全方位提升企业数据分析的准确性与时效性,并提供可落地的经营预测和智能决策洞察,
助力企业实时掌握经营状况,激发个体价值促进组织创新,让决策更智能
全球数字化浪潮
BI 不仅成为各企业及机构数字化转型的重要方式,
而且还日益成为企业应对不断提升的客户期望、快速变化的竞争格局以及市场不确定性的关键业务引擎
随着BI在各行业不断得到深入运用,数据分析逐渐成为企业的核心发展动力,BI的发展已逐渐步入新的拐点
数据仓库 三层  ODS-DW-DM
ODS Operational Data Store  又称贴源数据层,一般与业务系统具有类似的表结构,用于业务数据的同步拷贝
DW 分三层 DWD DWB DWS
DWD data warehouse detail 细节数据层 
DWB data warehouse base 基础数据层,存储的是客观数据,一般用作中间层,可以认为是大量指标的数据层
DWS data warehouse service 服务数据层,基于DWB上的基础数据,整合汇总成分析某一个主题域的服务数据,一般是宽表
基于DW再构建 DM(Datamart)层
没有一个OLAP引擎能同时在 数据量 灵活性 和 性能 这三个方面做到完美,需要基于自己的需求进行取舍和选型
预计算模式的OLAP引擎在查询响应时间上相较于MPP引擎有一定优势,但相对限制了灵活性
数据湖架构 = 分布式对象存储 + 多模态计算引擎 + 数据管理
Kyligence智能分层存储搭载性能强大的 Clickhouse,帮助用户在未进行预计算的情况下快速冷启动进行查询,可以显著提升超多维度灵活分析和明细查询的性能。
同时,基于 HDFS/对象存储和 Clickhouse 的两级存储设计,可全面覆盖各种分析场景,为用户带来基于海量数据下分析探索的更多可能性
跨越山海,共赴奇伟之观,登临陆地神仙境
JuiceFS 开始于 2017 年,是一款云原生分布式文件系统,旨在帮助企业解决多云、跨云、混合云环境下所面临的诸多挑战
数据安全和保护、大数据架构升级、海量小文件访问、Kubernetes 标准存储等
JuiceFS 完全兼容 POSIX、HDFS、S3 访问协议,并提供 Kubernetes CSI 驱动,在全球公有云上均有全托管服务
我的一个富婆同学,在上海5套房,存款5000万,总身价过亿。
上次来杭州办点事,顺便来看看我,问投资基金的事,让我给她讲讲,投资什么好!
我从2018讲到2021,从中美贸易战到疫情炒作,从新能源讲到大消费,从元宇宙讲到VR,从预制菜到数字经济,各个赛道都讲了一遍!
我同学说:虽然你们这些穷人没什么钱,但是懂得真特么多。
未来的经济形势,将是一个煎熬的时代,只有熬到最后的人,才有资格去谈明天
逼出来的改革、摸出来的市场、放出来的活力、挡不住的国运
数仓分层的优点
清晰数据结构
数据血缘追踪
减少重复开发
把复杂问题简单化
便于处理业务的变化
空间换时间

第一页 上一页 下一页 最后一页