专家视点:数据无处不在的云原生路径 (专家谈数学)

技术教程 2025-05-06 09:01:09 浏览
专家谈数学

专家视点:数据无处不在的云原生路径

2022-03-30 15:31:07在分布式数据云中,企业数据仓库将不仅用于为公司中的数百名业务分析师或数据科学家提供分析,而且最终能够为企业端直接使用的实时分析应用提供支持数以万计的客户。

使用 Kubernetes 进行架构是必不可少的核心部分,它使数据分析异常灵活,可在业务需要的任何地方运行,并以高并发、高性能、效率和可用性大规模运行。

从金融服务和保险到制造和医疗保健等垂直领域的无数企业发现,他们需要公共和私有云、混合和边缘部署来最好地满足他们的数据管理和分析需求。因此,分布式云的概念是云成熟的一部分也就不足为奇了。将数据仓库、数据湖和高级分析引入分布式云架构是市场的发展方向。扩展此架构以包含更高级别的数据管理和分析服务自然会产生分布式数据云的想法。

在分布式数据云中,企业数据仓库将不仅用于为公司中的数百名业务分析师或数据科学家提供分析,而且最终能够为企业端直接使用的实时分析应用提供支持数以万计的客户。这些数据将可以在任何地方立即访问并产生洞察力。

终极目标探索

云原生(Cloud-native)是一个被广泛使用的术语,但当软件架构从头开始设计以利用分布式云的优势时,它具有真正的意义。一个完全实现的云原生数据仓库应该在逻辑上利用分布式数据云架构。从最广泛的意义上讲,这将分析带到数据所在的任何位置,降低集中风险,显着提高效率,并为控制支出和竞争优势带来现代化。

更详细地说,云原生数据管理和分析技术应显示五个关键特征,以与分布式数据云蓝图保持一致:

可在任何需要的地方部署,遵循此模式的完全实现的云原生数据仓库还将从最终用户那里抽象出云、本地和网络边缘基础设施的复杂性。关键是将他们从基础设施细节中解放出来,让他们专注于从分析和管理数据中产生价值,同时仍然赋予云的原生力量。

选择正确的方法

那么,这个终极目标是如何实现的呢?开源容器编排工具 Kubernetes 提供了最流行的云原生操作路径。虽然 Unix 中对工作负载进行分区的想法自 1970 年代就已经存在,但仅在大约十年前,容器才被广泛实施,以使应用程序开发更容易、更便携且资源使用效率更高。但事实证明,在庞大的微服务架构中部署数百或数千个应用程序非常棘手。虽然存在其他选择,但 Google 的开源 Kubernetes 项目(现在由云原生计算基金会维护)在解决微服务应用编排方面声名远扬——使应用能够在通用基础架构上运行,以标准方式进行监控和管理,并通过使用开放标准。

这对应用来说很好。但是数据世界呢?云原生数据仓库需要相同的基础容器编排,以提供跨公共和私有云、网络边缘、混合和完全分布式云的弹性和部署灵活性。

专家视点

横向扩展 Web 应用的云原生重新架构是很常见的,但数据库大多只是被“提升并转移”到云原生世界中。将数据库放入容器中允许它在现代基础设施中运行,但它并不能提供展示云所有好处的体验。该软件在很大程度上不知道它是在容器环境中运行的,并且管理弹性集群等操作必须使用 Operators 和破解 Helm 图表从数据库外部笨拙地处理。允许多个弹性按需计算集群共享对象存储中相同的底层数据等功能通常不可用。寻求从基于云的弹性数据仓库获得业务价值的用户不想了解 Helm 图表、pod、节点或配置文件。他们只想配置数据仓库、管理弹性集群并从数据中获得洞察力。

答案是在 Kubernetes 上提供 SQL 接口来按需配置多个弹性集群,并向 DBA 和最终用户隐藏 Kubernetes 的复杂性。

通过这种方式,可以分配不同的用户在不同的计算集群上运行工作负载,并且可以在运行时通过 SQL 更改正在使用的计算集群,但需要获得许可。集群可以配置为在空闲期后自动挂起,并根据需要重新启动。例如,可以创建一个单独的计算集群来在需要时运行 ETL 流程,一个用于临时商业智能 (BI) 和多个数据科学集群。计算集群可以在使用量大的时候在线扩展,或者在安静的时候关闭以节省资金。可以创建集群来运行仅在这些时间段内活动的每日、每周或每月批量报告任务。

在该模型中,计算集群中节点的大小以及节点的数量都是可控的,并且可以在实例级别建立资源消耗限制以实现可预测性。同样,可以建立一个低成本的副本系统,从主数据仓库实例接收复制流量,然后在需要使用副本时按需扩展。

这种弹性不仅通过与 Kubernetes 的深度集成来实现,还通过使用 SQL 本身作为创建、挂起、恢复和管理集群的“用户界面”而不是开发人员工具来实现。 Kubernetes 是所有集群状态的权威信息来源。显示集群状态的系统视图使用其 API 从 Kubernetes 获取数据。当输入集群管理 SQL 语句时,云原生数据仓库向 Kubernetes 伸出援手,改变实例所需的状态;然后 Kubernetes 实施必要的更改。如果集群中的某个节点变得不健康,Kubernetes 会带一个替代品上线。

这代表了与 Kubernetes 的一种独特的、由内而外的关系:Kubernetes 不再是驱动集群状态的“用户界面”,而是由 Kubernetes 管理的数据库本身成为用户界面。这种架构创建了一种共生关系,可提供独特的、完全实现的云体验。 Kubernetes 的强大功能和跨平台灵活性可用于数据仓库,完全通过 SQL 驱动。

随着更多数据的生成和更多用例的部署,企业很容易进入恶性循环,其生态系统在特定云中越来越根深蒂固。系统性风险可能出现在单一云中,这对金融服务和保险等受到严格监管的行业的关键 IT 基础设施造成了过多的风险。使用 Kubernetes 进行架构并不是将完全实现的云原生数据仓库带入生活的唯一核心概念。它不是唯一符合分布式数据云模式的架构组件。但它是必不可少的核心部件,它使数据分析异常灵活,可在业务需要的任何地方运行,并以高并发、高性能、效率和可用性大规模运行。结果是,任何给定企业中的数千名用户,跨越不同的业务线和地理区域,都可以做出极其快速的决策,并通过近乎实时的动态分析产生价值。


人们常用杜甫的哪一句诗来形容老师对学生默默无文的培育潜移默化的熏陶

人们常用杜甫的“随风潜入夜,润物细无声”,来形容老师对学生默默无文的培育潜移默化的熏陶。 出自唐代杜甫《春夜喜雨》。 原诗:《春夜喜雨》唐代:杜甫好雨知时节,当春乃发生。 随风潜入夜,润物细无声。 野径云俱黑,江船火独明。 晓看红湿处,花重锦官城。 释义:好雨知道下雨的节气,正是在春天植物萌发生长的时侯。 随着春风在夜里悄悄落下,无声的滋润着春天万物。 雨夜中田间小路黑茫茫一片,只有江船上的灯火独自闪烁。 天刚亮时看着那雨水润湿的花丛,娇美红艳,整个锦官城变成了繁花盛开的世界。 扩展资料:这首诗写于上元二年(公元761年)春。 作此诗时,他已在成都草堂定居两年。 杜甫在经过一段时间的流离转徙的生活后,终于来到成都定居。 他亲自耕作,种菜养花,与农民交往,对春雨之情很深,因而写下了这首描写春夜降雨、润泽万物的美景诗作。 既描写了春雨的动态,又传出了它的润物之神。 因为好雨下在夜里,故诗人着重是从“听觉”上去描绘雨景的。 雨细而不能骤,随夜色而逐渐隐没。 它悄悄而来,默默无声,不为人们所觉察,故称为“潜入夜”。 这样不声不响地下的雨,当然是滋润万物的细雨。 “细无声”,正好恰当地表现了它的可贵精神。 这里的“潜”字和“细”字都用得准确、贴切,前者透露出风很微,后者说明了雨极小。 参考资料来源:网络百科——春夜喜雨 (唐代诗人杜甫的诗)

有哪些关于清明节的诗句

1、朝中措·清明时节 【宋】张炎清明时节雨声哗。 潮拥渡头沙。 翻被梨花冷看,人生苦恋天涯。 燕帘莺户,云窗雾阁,酒醒啼鸦。 折得一枝杨柳,归来插向谁家2、清明 【宋】王禹偁无花无酒过清明,兴味萧然似野僧。 昨日邻家乞新火,晓窗分与读书灯。 清明节,又称踏青节、行清节、三月节、祭祖节等,节期在仲春与暮春之交。 清明节源自上古时代的祖先信仰与春祭礼俗,兼具自然与人文两大内涵,既是自然节气点,也是传统节日。 清明节是传统的重大春祭节日,扫墓祭祀、缅怀祖先,是中华民族自古以来的优良传统,不仅有利于弘扬孝道亲情、唤醒家族共同记忆,还可促进家族成员乃至民族的凝聚力和认同感。

好自唯之是什么意思

数据无处不在的云原生路径

好自为之成语: 好自为之 (拼音:hǎo zì wéi zhī)出处: 清·王韬《淞隐漫录·五·四奇人合传》:“此时正大丈夫建功立业之秋,原勿以儿女为念。 行矣李君,好自为之。 ”意思: 劝别人或自勉要好好地活下去或干下去。 还有另一种:成语: 好自为之 (拼音:hào zì wéi zhī)出处: 《淮南子·本经训》:“君人者不任能,而好自为之,则智日困而自负其责也。 ”意思: 为:干,做。 喜欢自己亲手去做。 另外:好自为之 ( hǎo zì wéi zhī )解 释 自己妥善地处理,好好地干出 处 田海燕《吴玉章同志在辛亥革命前后的革命活动》:“至于四川的革命事情,还望四川同志好自为之。 ”用 法 偏正式;作谓语;用于劝诫人示 例 你还是~吧

本文版权声明本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容,请联系本站客服,一经查实,本站将立刻删除。

发表评论

热门推荐