大数据-一场骗局还是一次新的商业变革 (大数据1c)

教程大全 2025-07-10 03:12:42 浏览次

【专访报道】大数据会是一场概念的骗局么？近期这样的讨论在网上随着大数据的话题而不断涌现出来。其实大数据并不是一项全新的技术，它的本质表现在数据的形态更为复杂，增长的速度更快和交互的频率更高。如何对具备这样特征的数据集群进行管理和使用，是区别于传统数据应用的主要特点。更为重要的一点是：当前的技术将大数据应用的成本降低到了中小型企业也可以使用的阶段，在有关大数据的话题讨论中，这一点也是备受关注和认可的。

伴随着传统的商业智能系统向纵深应用的拓展，商业决策已经越来越依赖于数据。然而，传统的商业智能系统中用于分析的数据，大都是企业自身信息系统中产生的运营数据，这些数据大都是标准化、结构化的。事实上，这些数据只占到了企业所能获取的数据中很小的一部分，还有更加广泛的数据是存在于Social、Mobile、电子商务等应用中的非结构化数据。企业用以分析的数据越全面，结果就越接近于真实。大数据分析意味着企业能够从这些新的数据中获取新的洞察力，并将它与已知业务的各个细节相融合。微软亚太研发集团服务器与开发工具事业部，中国云计算创新中心商务战略总监殷皓在接受记者专访时特别谈到了一个很有意思的案例：“某汽车销售机构希望了解历年油价的波动对汽车销售带来的影响，这时他们不需要重新采集关于油价的数据，而是通过Windows Azure上的一个数据集市服务，获得了准确而专业的数据信息，很快的完成了这项分析，充分体现了数据服务带来的价值。”殷皓认为数据不能停留数据存储的阶段，而是要转换成为有价值的信息服务，创造新的商业机会。

微软亚太研发集团服务器与开发工具事业部，中国云计算创新中心商务战略总监殷皓

大数据将改变谁的命运 DBA是在传统数据库应用领域中极为重要的人群，也许大数据会带给他们理念上的转变。“DBA曾经是IT行业中的金饭碗，因为核心的数据库技术发展相对来说变化的较少，所以有些DBA会慢慢变懒”，殷皓谈到：“但是，变化少不代表不变。如果DBA的工作定位偏向底层运维型的话，那么他们的职能会变得越来越小，甚至会被自动化的服务来取代，未来DBA对基础设施的管理会越来越少，更多的向上层业务扩展。” 我们关注到发展中的DBA分工，其中的一种可能会涉及到企业核心安全保障，成为企业里数据的守门人之一。另一种角色是研发DBA，它和业务应用结合的非常紧密。包括数据定义、数据建模，从逻辑建模到物理建模，以及后端存储的设计等，未来更多的是成为企业数据模型的管理者。“这实际上也是一个职业发展的过程“，殷皓认为：“运维DBA需要确保7*24的业务连续性，研发DBA更多的负责物理建模，完成开发人员写的存储过程。而我们看到的数据架构师层面，就是需要从业务需求出发来实现逻辑建模。因为对业务的理解是自动化工具所不能取代的，这也是在大数据的趋势下，DBA所要面临的转变。” SQL Server与大数据的对接 Hadoop是大数据的一个分布式系统架构。5月与微软SQL Server 2012同时发布的还有将Hadoop和SQL Server连在一起的连通器，他们通过标准的ODBC模式，把Hadoop和PDW微软并行数据仓库连在一起，实现多核并发的并行数据仓库。“用户无需对应用做出很大的改动，只是连接到SQL Server、数据仓库，或者是一个对象。通过这个对象可以把我的连接通过连接键引申出去，然后把所有的数据整合在一起”，殷皓兴奋的分享到：“在这种场景下，我可以把结构化数据和非结构化数据、甚至是数据仓库在模型中的数据整合在一起，做更加深入的数据分析。” SQL Server 2012版本中，微软亚太研发集团服务器与开发工具事业部参与了两个大的功能研发：数据的迁移工具SSIS，数据库升级的服务。微软针对Hadoop在Windows Server Kernel上做出性能的优化、安全认证的整合，形成企业级的AD整合，并实现了和BI工具的整合。“微软在NoSQL上加一个SQL的索引层，比如eBay的底层用了MangoDB，但所有的交易数据都按照SQL来存储到结点中”，殷浩认为：“NoSQL提供了一个很好的存储机制，但要提高数据利用的效率，最好回到SQL的场景。NoSQL将会是数据库发展过程中的一个中间阶段，会逐渐体现为数据服务中的一部分，而非数据平台的主流。” 关于大数据的话题还将继续争论下去，但可以看到的是，在企业商业智能的发展基础上，数据分析将作为一种服务提供给用户。IT技术提供商们开始实践的大数据，不仅是把数据用于企业内部的业务分析和决策支持，而是以提供数据分析模型的方式优化企业决策。这不仅仅是技术的更新，而是IT消费模式的变革。 推荐阅读： SQL Server2012中国研发团队曝光（组图）幕后故事：SQL Server 2012研发的那些人与事

如何使用mysql的API在c/c++的代码中，创建一个存储过程？

MySQL的概述MySQL是一个小型关系型数据库管理系统，开发者为瑞典MySQL AB公司。在2008年1月16号被Sun公司收购。目前MySQL被广泛地应用在Internet上的中小型网站中。由于其体积小、速度快、总体拥有成本低，尤其是开放源码这一特点，许多中小型网站为了降低网站总体拥有成本而选择了MySQL作为网站数据库。 MySQL的官方网站的网址是：[编辑本段]MySQL的特性1.使用C和C++编写，并使用了多种编译器进行测试，保证源代码的可移植性 2.支持AIX、FreeBSD、HP-UX、Linux、Mac OS、Novell Netware、OpenBSD、OS/2 Wrap、Solaris、Windows等多种操作系统 3.为多种编程语言提供了API。这些编程语言包括C、C++、Eiffel、Java、Perl、PHP、Python、Ruby和Tcl等。 4.支持多线程，充分利用CPU资源 5.优化的SQL查询算法，有效地提高查询速度 6.既能够作为一个单独的应用程序应用在客户端服务器网络环境中，也能够作为一个库而嵌入到其他的软件中提供多语言支持，常见的编码如中文的GB 2312、BIG5，日文的Shift_JIS等都可以用作数据表名和数据列名7.提供TCP/IP、ODBC和JDBC等多种数据库连接途径 8.提供用于管理、检查、优化数据库操作的管理工具 9.可以处理拥有上千万条记录的大型数据库[编辑本段]MySQL的应用与其他的大型数据库例如Oracle、DB2、SQL Server等相比，MySQL自有它的不足之处，如规模小、功能有限（MySQL Cluster的功能和效率都相对比较差）等，但是这丝毫也没有减少它受欢迎的程度。对于一般的个人使用者和中小型企业来说，MySQL提供的功能已经绰绰有余，而且由于MySQL是开放源码软件，因此可以大大降低总体拥有成本。目前Internet上流行的网站构架方式是LAMP（Linux+Apache+MySQL+PHP），即使用Linux作为操作系统，Apache作为Web服务器，MySQL作为数据库，PHP作为服务器端脚本解释器。由于这四个软件都是遵循GPL的开放源码软件，因此使用这种方式不用花一分钱就可以建立起一个稳定、免费的网站系统。 [编辑本段]MySQL管理可以使用命令行工具管理MySQL数据库（命令mysql 和 mysqladmin)，也可以从MySQL的网站下载图形管理工具MySQL Administrator和MySQL Query Browser。 phpMyAdmin是由php写成的MySQL资料库系统管理程式，让管理者可用Web介面管理MySQL资料库。 phpMyBackupPro也是由PHP写成的，可以透过Web介面创建和管理数据库。它可以创建伪cronjobs，可以用来自动在某个时间或周期备份MySQL 数据库。另外，还有其他的GUI管理工具，例如早先的mysql-front 以及 ems mysql manager,navicat 等等。 [编辑本段]Mysql存储引擎MyISAM Mysql的默认数据库，最为常用。拥有较高的插入，查询速度，但不支持事务InnoDB 事务型数据库的首选引擎，支持ACID事务，支持行级锁定BDB 源自Berkeley DB，事务型数据库的另一种选择，支持COMMIT和ROLLBACK等其他事务特性Memory 所有数据置于内存的存储引擎，拥有极高的插入，更新和查询效率。但是会占用和数据量成正比的内存空间。并且其内容会在Mysql重新启动时丢失Merge 将一定数量的MyISAM表联合而成一个整体，在超大规模数据存储时很有用Archive 非常适合存储大量的独立的，作为历史记录的数据。因为它们不经常被读取。 Archive拥有高效的插入速度，但其对查询的支持相对较差Federated 将不同的Mysql服务器联合起来，逻辑上组成一个完整的数据库。非常适合分布式应用Cluster/NDB 高冗余的存储引擎，用多台数据机器联合提供服务以提高整体性能和安全性。适合数据量大，安全和性能要求高的应用CSV 逻辑上由逗号分割数据的存储引擎BlackHole 黑洞引擎，写入的任何数据都会消失，一般用于记录binlog做复制的中继另外，Mysql的存储引擎接口定义良好。有兴趣的开发者通过阅读文档编写自己的存储引擎。 [编辑本段]Mysql最常见的应用架构单点(Single)，适合小规模应用复制(Replication)，适合中小规模应用集群(Cluster)，适合大规模应用[编辑本段]mysql历史版本MySQL公司目前在同时开发两个版本的软件，4.1版以及5.0版。 4.1版本的代码已经发布并有望在8个月后公布最终代码。而5.0版本的最后产品将在6个月后发布。 MySQL4.1版本中增加了不少新的性能，包括对主键的更高速度的缓存，对子查询的更好的支持，以及应网络约会网站所要求的，基于地理信息的查询。而其同步开发的5.0版本则把目标对准了企业用户，对于4.1版本中的所有新特性，5.0版本悉数收入囊中，并且独具以下特点：对外键的良好支持；系统自动报错机制以及对存储过程的充分支持。 SQL全称是“结构化查询语言(Structured Query Language)”SQL(STructured Query Language)是一种数据库查询和程序设计语言，用于存取数据以及查询、更新和管理关系数据库系统。 SQL同时也是数据库脚本文件的扩展名。 SQL是高级的非过程化编程语言，允许用户在高层数据结构上工作。他不要求用户指定对数据的存放方法，也不需要用户了解具体的数据存放方式，所以具有完全不同底层结构的不同数据库系统可以使用相同的SQL语言作为数据输入与管理的接口。它以记录集合作为操作对象，所有SQL语句接受集合作为输入，返回集合作为输出，这种集合特性允许一条SQL语句的输出作为另一条SQL语句的输入，所以SQL语句可以嵌套，这使他具有极大的灵活性和强大的功能，在多数情况下，在其他语言中需要一大段程序实现的功能只需要一个SQL语句就可以达到目的，这也意味着用SQL语言可以写出非常复杂的语句。结构化查询语言(Structured Query Language)最早是IBM的圣约瑟研究实验室为其关系数据库管理系统SYSTEM R开发的一种查询语言，它的前身是SQUARE语言。 SQL语言结构简洁，功能强大，简单易学，所以自从IBM公司1981年推出以来，SQL语言得到了广泛的应用。如今无论是像Oracle、Sybase、Informix、SQL Server这些大型的数据库管理系统，还是像Visual Foxporo、PowerBuilder这些PC上常用的数据库开发系统，都支持SQL语言作为查询语言。美国国家标准局(ANSI)与国际标准化组织（ISO）已经制定了SQL标准。 ANSI是一个美国工业和商业集团组织，负责开发美国的商务和通讯标准。 ANSI同时也是ISO和International Electrotechnical Commission(IEC)的成员之一。 ANSI 发布与国际标准组织相应的美国标准。 1992年，ISO和IEC发布了SQL国际标准，称为SQL-92。 ANSI随之发布的相应标准是ANSI SQL-92。 ANSI SQL-92有时被称为ANSI SQL。尽管不同的关系数据库使用的SQL版本有一些差异，但大多数都遵循 ANSI SQL 标准。 SQL Server使用ANSI SQL-92的扩展集，称为T-SQL，其遵循ANSI制定的 SQL-92标准。 SQL语言包含4个部分： ※ 数据定义语言(DDL)，例如：CREATE、DROP、ALTER等语句。 ※ 数据操作语言(DML)，例如：INSERT、UPDATE、DELETE语句。 ※ 数据查询语言(DQL)，例如：SELECT语句。 ※ 数据控制语言(DCL)，例如：GRANT、REVOKE、COMMIT、ROLLBACK等语句。 SQL语言包括三种主要程序设计语言类别的陈述式：数据定义语言(DDL)，数据操作语言(DML)及数据控制语言(DCL)。

白日梦是衡量大脑健全的重要指标吗？

一项新的研究结果显示，白日梦是大脑健全的标志。你走神吗？在上课或者开会时，你是否会出神地望着窗外，想着明天或下周要做什么？作为一个儿童，你是否经常受到老师的提醒，不要再做白日梦？如果是这样，最新心理研究成果表明，白日梦是衡量大脑活跃和健全程度的重要指标。你可以把这个结论告诉你小学的老师。来自威斯康星州立大学和“马克斯•普朗克人类认知与大脑科学研究所”的研究人员，在《心理科学》杂志发表了“一项新研究”的报告，认为走神与被称之为“工作记忆”容量较高有关。认知科学家们给予这种记忆的定义是：面对外界环境打扰时，大脑保留并回忆信息的能力。比如说，在你离开朋友家之前，你向朋友保证：在回到自己家后，一定会打个电话报平安。在开车回家的中途，你停车加油，买了些日用品，在路上又遇到一起车祸，你下车去查看能帮上什么忙。最后，你终于到家，你没忘给朋友拨个电话。你能记得打电话这事，全仗着大脑工作记忆系统的作用。在这项研究中，研究人员试图找出人们工作记忆容量与做白日梦倾向之间的关系。为此，他们交给实验参与者两项任务，由其任选一项去完成，这两件事极其简单，很可能会让他们走神：屏幕上出现一个字母时按一次按钮，或者每呼吸一次，用手指敲击一下。研究人员会定时查看他们是否精神集中。然后，研究人员测量每个参与者的工作记忆，具体做法是，测试他们记忆一系列字母的能力，期间夹杂着回答一套简单的算术题。非常奇特的是，结果表明，完成第一项任务时发生的走神与工作记忆高分数之间存在正相关。那些常做白日梦的参与者，能够记住更多字母，即使他们受到回答算术题的干扰；那些不爱走神的参与者则表现较差。为什么会这样？“这项研究似乎说明，如果在做一件事时，周遭环境不存在较大干扰，人们就会除了关注手头的事情以外，将额外的工作记忆分配到想别的事，” 乔纳森•斯莫伍德在一次新闻发布会上这样说。换句话说，爱做白日梦的人拥有很大的工作记忆容量，手头正做的事只占用了其中一小部分，因此，才会漫不经心，开始走神。研究人员相信，这些研究结果所揭示的事实是，基于白日梦的心理过程与大脑工作记忆系统非常相似。此前，人们认为工作记忆与智商测试相关，如智力商数。但这项研究表明，与工作记忆同样密切相关的是我们走神的倾向——也就是在任何给定时间，我们的思绪都会从当前情境游离，去想别的事。 “我们的研究结果提醒我们，人们在日常生活的各种场合——坐在公交车上、骑车去工作的路上、在洗澡的时候——做的各种规划，很可能都是在工作记忆协助下完成的。 ”斯莫伍德说。 “人们的大脑试图将资源配置到急需解决的问题上。 ”研究人员们强调，那些工作记忆容量大——因而也很自然地更倾向于做白日梦——的人，仍然具备训练自己在必要时专注于眼前事务的能力。 “走神需要付出代价，因为它占用记忆资源，”斯莫伍德说。 “你必须做出决定，如何更好地利用自己的记忆资源。如果你的当务之急是专心致志地完成一项工作，那么，你也可以调动你的工作记忆一起做。 ”