华为云DDM中间件是最佳选择吗-面对海量数据分库分表

在数字经济浪潮下,数据量正以爆炸式速度增长，企业对数据库的性能、容量和可用性提出了前所未有的挑战，传统的单机数据库在面临海量数据和高并发请求时，往往会成为业务发展的瓶颈，为了突破这一限制，分布式数据库中间件应运而生，华为云分布式数据库中间件（DDM）凭借其卓越的性能和易用性，成为众多企业数字化转型的重要选择。

什么是分布式数据库中间件DDM？

华为云分布式数据库中间件（DDM），是一个专注于解决单机数据库性能和容量瓶颈的云服务，它并非一个全新的数据库，而是一个位于应用层和数据库存储层之间的智能“管家”或“交通指挥官”，其核心理念是“逻辑统一，物理分散”。

想象一下,DDM就像一个经验丰富的总调度，您的应用程序只需像往常一样将SQL请求发送给DDM，而无需关心数据具体存储在哪台物理服务器上，DDM内部会智能地解析这个SQL，根据预设的规则，精准地将请求路由到后端一个或多个物理数据库实例（通常是华为云的RDS for MySQL）上执行，最后将所有结果集进行聚合、排序、过滤等处理，并返回给应用程序，这个过程对应用是完全透明的，大大降低了使用分布式数据库的门槛。

DDM的架构主要分为两个层次：

DDM的核心功能与价值

DDM通过一系列强大的核心功能,为企业数据库架构带来了革命性的提升。

DDM如何工作？一条SQL的奇幻漂流

为了更直观地理解DDM的运作机制,我们可以追踪一条SQL查询语句的完整旅程：

整个过程对开发者而言是“黑盒”的，他们感知不到背后复杂的路由和计算逻辑，只需专注于业务开发即可。

应用场景对比

为了更清晰地展示DDM的价值,我们可以通过一个表格来对比传统架构与DDM架构的差异。

典型应用场景

DDM广泛应用于需要处理海量数据和高并发的互联网行业,如：

相关问答FAQs

Q1：DDM是否与标准MySQL 100%兼容？我的应用程序需要做哪些修改？ DDM高度兼容MySQL的协议、语法和常用函数，对于绝大多数标准SQL操作，您的应用程序无需做任何代码修改，只需将数据库连接串指向DDM实例即可，但对于一些特定的MySQL特性或复杂SQL（如存储过程、跨分片复杂JOIN、多表更新等），可能存在一些限制，在迁移前，建议通过华为云提供的数据兼容性评估工具进行检查，并对不兼容的SQL进行少量调整。

Q2：如何将现有单机MySQL数据库的数据迁移到DDM中？过程复杂吗？ 华为云提供了简便的数据迁移方案，您可以使用华为云数据复制服务（DRS），它支持从单机MySQL到DDM的在线数据迁移，整个过程包括结构迁移、全量数据迁移和增量数据同步，您可以在DRS控制台创建迁移任务，配置源端和目标端信息后，DRS会自动完成数据迁移，并在迁移过程中保持数据持续同步，从而可以在业务低峰期进行一次短暂的切换，即可完成平滑迁移，整个过程对业务影响非常小。

memcached和redis的区别

medis与Memcached的区别传统MySQL+ Memcached架构遇到的问题　实际MySQL是适合进行海量数据存储的，通过Memcached将热点数据加载到cache，加速访问，很多公司都曾经使用过这样的架构，但随着业务数据量的不断增加，和访问量的持续增长，我们遇到了很多问题：　需要不断进行拆库拆表，Memcached也需不断跟着扩容，扩容和维护工作占据大量开发时间。 与MySQL数据库数据一致性问题。 数据命中率低或down机，大量访问直接穿透到DB，MySQL无法支撑。 4.跨机房cache同步问题。 众多NoSQL百花齐放，如何选择　最近几年，业界不断涌现出很多各种各样的NoSQL产品，那么如何才能正确地使用好这些产品，最大化地发挥其长处，是我们需要深入研究和思考的问题，实际归根结底最重要的是了解这些产品的定位，并且了解到每款产品的tradeoffs，在实际应用中做到扬长避短，总体上这些NoSQL主要用于解决以下几种问题　1.少量数据存储，高速读写访问。 此类产品通过数据全部in-momery 的方式来保证高速访问，同时提供数据落地的功能，实际这正是Redis最主要的适用场景。 2.海量数据存储，分布式系统支持，数据一致性保证，方便的集群节点添加/删除。 3.这方面最具代表性的是dynamo和bigtable 2篇论文所阐述的思路。 前者是一个完全无中心的设计，节点之间通过gossip方式传递集群信息，数据保证最终一致性，后者是一个中心化的方案设计，通过类似一个分布式锁服务来保证强一致性,数据写入先写内存和redo log，然后定期compat归并到磁盘上，将随机写优化为顺序写，提高写入性能。 free，auto-sharding等。 比如目前常见的一些文档数据库都是支持schema-free的，直接存储json格式数据，并且支持auto-sharding等功能，比如mongodb。 面对这些不同类型的NoSQL产品,我们需要根据我们的业务场景选择最合适的产品。 Redis适用场景，如何正确的使用　前面已经分析过，Redis最适合所有数据in-momory的场景，虽然Redis也提供持久化功能，但实际更多的是一个disk-backed的功能，跟传统意义上的持久化有比较大的差别，那么可能大家就会有疑问，似乎Redis更像一个加强版的Memcached，那么何时使用Memcached,何时使用Redis呢?如果简单地比较Redis与Memcached的区别，大多数都会得到以下观点：　1Redis不仅仅支持简单的k/v类型的数据，同时还提供list，set，zset，hash等数据结构的存储。 2Redis支持数据的备份，即master-slave模式的数据备份。 3Redis支持数据的持久化，可以将内存中的数据保持在磁盘中，重启的时候可以再次加载进行使用。 抛开这些，可以深入到Redis内部构造去观察更加本质的区别，理解Redis的设计。 在Redis中，并不是所有的数据都一直存储在内存中的。 这是和Memcached相比一个最大的区别。 Redis只会缓存所有的 key的信息，如果Redis发现内存的使用量超过了某一个阀值，将触发swap的操作，Redis根据“swappability = age*log(size_in_memory)”计 算出哪些key对应的value需要swap到磁盘。 然后再将这些key对应的value持久化到磁盘中，同时在内存中清除。 这种特性使得Redis可以 保持超过其机器本身内存大小的数据。 当然，机器本身的内存必须要能够保持所有的key，毕竟这些数据是不会进行swap操作的。 同时由于Redis将内存 中的数据swap到磁盘中的时候，提供服务的主线程和进行swap操作的子线程会共享这部分内存，所以如果更新需要swap的数据，Redis将阻塞这个 操作，直到子线程完成swap操作后才可以进行修改。 使用Redis特有内存模型前后的情况对比：　VM off: 300k keys, 4096 bytes values: 1.3G used　VM on:300k keys, 4096 bytes values: 73M used　VM off: 1 million keys, 256 bytes values: 430.12M used　VM on:1 million keys, 256 bytes values: 160.09M used　VM on:1 million keys, values as large as you want, still: 160.09M used当 从Redis中读取数据的时候，如果读取的key对应的value不在内存中，那么Redis就需要从swap文件中加载相应数据，然后再返回给请求方。 这里就存在一个I/O线程池的问题。 在默认的情况下，Redis会出现阻塞，即完成所有的swap文件加载后才会相应。 这种策略在客户端的数量较小，进行 批量操作的时候比较合适。 但是如果将Redis应用在一个大型的网站应用程序中，这显然是无法满足大并发的情况的。 所以Redis运行我们设置I/O线程 池的大小，对需要从swap文件中加载相应数据的读取请求进行并发操作，减少阻塞的时间。 如果希望在海量数据的环境中使用好Redis，我相信理解Redis的内存设计和阻塞的情况是不可缺少的。

电脑播放VCD用什么播放器最好？

当然是《暴风影音》播放器 最好了

GOOGLe是什么时候创办的

Google创办人、现年30岁的布兰及31岁的佩奇，1995年在斯坦福大学校园相遇。 当时，他们一同报读了该大学的研究生课程，彼此发现两人背景相同(同样出自书香世家，父亲均为大学教授)，且性格一样固执。 100万美元起家1996年，他们二人在佩奇的宿舍房间渐渐构思出Google的概念。 1998年，他们从亲友间筹得100万美元，在加州租了间小屋及车房作为办公室，正式成立Google。 此后，Google业务迅速扩展，由1999年营业额只有22万美元，至去年的近10亿美元。 昔日只有他们二人、乒乓球桌充当会议桌的小公司，今日已发展至总部占地50万平方英尺、员工近2000的互联网巨擘。 Google创办人、现年30岁的布兰(右)及31岁的佩奇。 搜索引擎市场龙头Google的出现，实在改变了网友搜寻资料的模式。 在Google面世前，互联网搜寻器大多列举大堆没用的互联网连结。 布兰及佩奇则透过复杂的数学程式及庞大电脑资料库，将搜寻结果重新排序，让用家在短时间获取所需的资料。 现在，它占有35%的搜索引擎市场，雅虎占30%，微软屈居第三，市场份额为15%。 作为目前互联网上功能最强大的免费 搜索引擎，Google的索引目录中储存有30亿个网页及网页快照，用户可以使用86种语言文字进行搜索。 现在，Google平均每天接受的搜索次数为1．5亿人次，全球大约80％的搜索目标是通过Google来完成的。 在著名品牌经纪公司Interband今年发布的“全球年度最佳品牌排行榜”上，Google高居榜首，紧随其后的是苹果电脑、可口可乐以及星巴克咖啡。 作为一家刚刚在9月7日迎来五周岁生日的年轻公司，Google取得的成就令人瞩目。 美国加利福尼亚，山景路，Google的总部就像一个大学实验室与“兄弟会”会所的混合体。 在总部大楼二层的高台上矗立着一台巨大的显示器，屏幕上不断地滚动出现的是来自全球的查询信息。 Google的程序员穿着短裤和汗衫，在走廊上来回溜达。 他们甚至还经常推着自行车或者牵着一条狗。 走廊的尽头是一个球状的红色门廊。 这个大型显示器已经安装两年了，在它的四周摆满了各种各样的小玩意儿：飞机上的索环、戴着假发的日本小鸡、万圣节的蜘蛛等等，让人眼花缭乱。 体积庞大的电脑屏幕被分成上下两个部分。 上半部是一幅能显示黑夜与白天的世界地图，地图上遍布各大洲的是一个个闪烁着各种颜色的亮点，每一个亮点都代表着一种不同的语言和几千个要查询的问题；下半部显示用户通过Google查询的问题，一次只出现10个问题，不停地向上滚动，5秒种后就消失了。 所显示的每一个查询问题前面有用户所在的地址，精确到城市。 当你第一次研究用户所输入的这些要求时，它们可能显得杂乱无章，不可解释。 但几个小时之后，在你的眼球被这些守夜者的亮点锁定时，图案就出现了。 这些图案不仅仅是Google用户的分布图，还是现代技术的分布图，甚至是新经济繁荣的格局图。 每时每秒，全世界有42％的搜索引擎用户会向山景路这幢大楼所管理的服务器展示自己内心深处的冲动和渴望。 激情创业　Google今日的辉煌当然要归功于两位创始人：拉里·佩奇和谢尔盖·布林。 拉里·佩奇毕业于密歇根州安娜堡大学，拥有理学学士学位。 受其担任计算机系教授的父亲启蒙，佩奇早在1979年就开始使用计算机了。 目前他暂时从斯坦福大学计算机研究所博士班休学与好友布林共同经营Google公司。 谢尔盖·布林则出生于莫斯科，是马里兰大学校本部的荣誉毕业生，拥有数学和计算机专业的理学学士学位。 随后他考入斯坦福大学计算机专业就读。 他目前也从计算机研究所博士班休学，转而全力发展Google公司。 1998年9月，25岁的佩奇和24岁的布林决定合伙开个公司，公司提供的惟一服务就是搜索引擎。 两人在对商业计划一无所知的情况下就从斯坦福校友、思科公司的现任副总裁贝托尔斯海姆那里顺利地拿到了第一笔投资：10万美元。 他们的搜索引擎Google脱胎于1996年1月诞生的BackRub，后者最初只是佩奇和布林的一个课题实验。 有一天，他们惊异地发现：每天有成千上万的人在使用原本只有数位导师知道的BackRub系统。 两人兴致勃勃地准备出售BackRub，但当时各大门户网站对这项技术非常冷漠，佩奇和布林决定自己干。 于是，1998年9月，Google就在一个车库中诞生了。 Google是由英文单词“Googol”变化而来。 “Googol”是美国数学家Edward Kasner的侄子MiltonSirotta创造的一个词，表示后边带有100个零的巨大数目。 佩奇和布林使用这个词代表公司想征服网上无穷无尽资料的雄心。 在创立之初，公司除了佩奇和布林之外，就只有一个雇员——克雷格·希尔维斯通——Google现在的技术总监。 他们的努力工作不久就得到了回报：1999年年中，风险投资家Kleiner Perkins和Sequoiacapital向Google注入了2500万美元的资金，帮助Google进入了一个崭新的发展阶段。 Google取得的成功源于其创建者的想象力，同样也源于他们的天赋。 在佩奇和布林创建Google之时，业界对互联网搜索功能的理解是：某个关键词在一个文档中出现的频率越高，该文档在搜索结果中的排列位置就要越显著。 而佩奇和布林则另有高见，他们认为，决定文档在搜索结果中排列位置的因素是一个文档在其它网页中出现的频率和这些网页的可信度，网页在受众中的知名度和质量是决定性因素。 事实证明，这一判断是正确的，Google的使用率越来越高，每天的搜索量由四年前的100万次增至目前的1．5亿次。 当Google的竞争对手致力于成为门户网址、投入搜索服务的比重不大之时，佩奇和布林却反其道而行之，尽力完善其搜索引擎。 Google的页面非常干净，只有一个简洁朴素的关键词输入框，没有一条广告的干扰。 佩奇指出：“我们的首页这么干净并不是因为我和布林有洁癖。 这是个商业决策。 ”据说，最初的原因是Google成立之时还没有来得及设计首页。 但他们随后就发现：对于搜索引擎用户而言，这就足够了。 美国WebTop统计公司的调查报告证实了这一点：人们如果在12秒种内找不到自己所需的内容，就会超出忍耐的限度，选择离开。 所以Google页面的空白部分包含着巨大的商业价值：每月至少会吸引5000万忠实用户，并且用户满意率高达97％。 在某种程度上，Google“净化视野”策略的实施并不仅仅是基于Google凭此战略蒸蒸日上和竞争对手的纷纷饮弹，还缘于佩奇和布林推行信仰的才能。 两人先后吸引来了大约50位计算机科学博士，他们都欣赏Google擅于攻克技术难题的作风。 Google拥有一个开放性数据库，内含100多个未来需要实施的项目，这些项目都由这50位工程师负责推进，他们保证不仅仅是工作援手，而且要为Google的前途和命运而战，这些工程师甘作足智多谋的幕后英雄，他们是Google最大的财富。 用于支持Google海量信息传输的服务器安放于美国的5个数据中心，这些服务器性能强大，安全性能极好，可经受炸弹爆炸和地震等自然灾害的考验。 赢利模式　那么，Google究竟靠什么来赚钱呢？Google的收益来源有二：其一为搜索技术授权。 雅虎、AOL、思科、宝洁、美国能源部等许多大公司和政府机构正在使用的就是Google的搜索技术。 Google按照搜索的次数来收取授权使用费。 比如雅虎的门户搜索引擎服务由Google提供，每个季度就能给Google带来数百万美元的收入；其二为关键词广告。 Google的广告形式不采用横幅广告，也没有Flash动画广告，所有的广告都是按照客户购买的关键词，以纯文本的方式把广告安置在相关搜索页面的右侧空白处，把所有的文字广告单独列出来，并用特别的颜色标示“赞助商链接”。 比如有人在Google上输入“婚礼”，那么在搜索结果网页上就会出现婚礼网站的文字广告，每次搜索Google向商家收取0．8美分到1．5美分的广告费。 用户在使用关键词进行搜索时，相应关键词的广告出现在搜索结果中，并保证出现在搜索结果较前的位置，这种广告效果比那些一进去便强行出现在网站窗口的广告形式好得多。 据统计，Google网络广告点击率是行业平均水平的4－5倍。 佩奇曾经表示：“要集中精力于搜索业务。 一些网络搜索公司总是试图在同一时间做很多事情，他们几乎把自己的本行都忘记了。 不过，正是由于这些公司的‘不务正业’，Google才会有今天的成绩。 ”