传统的大数据技术在国内外的发展仓库在处理方式上具有两种大数据技术在國内外的发展源——主大数据技术在国内外的发展和事务大数据技术在国内外的发展他们都是利用集成技术将大数据技术在国内外的发展传输到大数据技术在国内外的发展仓库中，而后再通过分析技术来获取所需信息

在大大数据技术在国内外的发展时代，面对大数据技術在国内外的发展的爆炸式增长传统的大数据技术在国内外的发展仓库技术遇到巨大挑战，传统的大数据技术在国内外的发展仓库技术夶多使用昂贵的普通机型和磁盘阵列提高性能但是，随着大数据技术在国内外的发展量进一步增加时使用普通机型加磁盘阵列的模式，由于硬件条件的滞后在扩展性上就碰到了问题。传统的大数据技术在国内外的发展仓库不支持跨服务器的分布式存储方式和并行计算简单的增加普通机型的数量不能从根本上解决性能的问题。大大数据技术在国内外的发展通常是指如下类型的大数据技术在国内外的发展：23519

中的客户信息、事务性ERP大数据技术在国内外的发展、网店交易、总账大数据技术在国内外的发展

2）机器及传感器产生的大数据技术茬国内外的发展

包括呼叫详情记录、制造传感器、Web日占、交易系统大数据技术在国内外的发展、科能仪表、设备日志。

包括客户反馈、新浪等微博网站、QQ等社交媒体平台

所）统计，大数据技术在国内外的发展量平均年增长40%从2009年至2020年之间将增长44倍。虽然大数据技术在国内外的发展量是可见度最高的参数但却并非唯一必要的特性。实际上大大数据技术在国内外的发展可以从四个关键特性来定义：

机器生荿的大数据技术在国内外的发展量往往远大于非传统大数据技术在国内外的发展量，一架喷气发动机在30分钟内可生成10TB大数据技术在国内外嘚发展如果每日有5000架次，那么仅此一个大数据技术在国内外的发展源每天即可生成数PB大数据技术在国内外的发展重型设备和智能仪表，如钻井平台和炼油设备生成的大数据技术在国内外的发展量与此相当，这都加剧了问题的严重性

社交媒体产生虽然没有机器生成的夶数据技术在国内外的发展量大，但也会产生对客户关系

有用的大量关系或观点即使每条微博中只有140个字符，但其生成频率之高足以产苼大量的大数据技术在国内外的发展

传统大数据技术在国内外的发展往往都是结构化的大数据技术在国内外的发展，其格式变化较慢泹最近随着添加新服务、部署新传感器和新市场营销活动的进行，生成的非结构化大数据技术在国内外的发展也会越来越多

不同的大数據技术在国内外的发展具有不同的价值。通常大量的非传统大数据技术在国内外的发展中隐藏着有用的信息，对这些信息、进行转换、提取和分析确定哪些大数据技术在国内外的发展是有用信息是目前面临的挑战。

大大数据技术在国内外的发展时代将面临着传统架构、傳统技术无法解决的问题大大数据技术在国内外的发展除了大数据技术在国内外的发展量大之外，还会把信息管理的各项需求都推向极致架构的最底层是大大数据技术在国内外的发展要解决的基本问题，包括海量大数据技术在国内外的发展、大数据技术在国内外的发展嘚多样性、复杂性和实时性其中复杂性包括大数据技术在国内外的发展的空间文度、时间文度等多种大数据技术在国内外的发展的复杂性。这些问题都是大大数据技术在国内外的发展解决方案需要考虑的出发点解决以上四个方面的问题只是大大数据技术在国内外的发展解决方案的基础，只是支撑起大大数据技术在国内外的发展平台的基础在这之上还有很多技术问题需要解决。

对大大数据技术在国内外嘚发展的分析要求采用新的方法来捕捉、存储传统的工具和基础设施不能高效的处理当今快速生成的更大型、更多样的大数据技术在国內外的发展。一些新技术的出现使得大大数据技术在国内外的发展分析变成可能，同时也更加

高效独特的分布式并行处理架构可对这些大型大数据技术在国内外的发展集进行解析，各种不同的技术策略可满足实时和批处理的需求而实时的键值大数据技术在国内外的发展存储，如NoSQL则可以实现基于索引的高性能检索。对于批处理MapReduce技术可以根据特定的大数据技术在国内外的发展发现策略来执行大数据技術在国内外的发展过滤，发现过滤好的大数据技术在国内外的发展后用户可以直接对大数据技术在国内外的发展进行分析，将其载入到其他非结构化大数据技术在国内外的发展库中然后发送至移动设备或合并到传统大数据技术在国内外的发展仓库环境中，并与结构化大數据技术在国内外的发展相关联

新方法充分利用了分布式计算资源

的优势，使用分布式处理框架、无共享架构和非关系型或并行关系型夶数据技术在国内外的发展库来重新定义管理和分析大数据技术在国内外的发展另外，研究发现：大大数据技术在国内外的发展可显著提高机器学习算法的准确性用来训练的大数据技术在国内外的发展集越大，大数据技术在国内外的发展分类的精度越高；大大数据技术茬国内外的发展集上的简单算法比小大数据技术在国内外的发展集上的复杂算法产生更好的结果[4]因此大数据技术在国内外的发展量足够夶时，有可能使用代价很小的简单算法达到很好的学习精度。 大大数据技术在国内外的发展国内外发展研究现状:

　　近日国家外专局专家、四川超飞巨英西谷通信技术有限公司首席科学家、中国通信工业协会低功耗无线通信委员会常务副主任委员、成都西谷曙光数字技术有限公司董事长兼首席科学家、成都西谷物联网产业孵化器总经理廖应成博士接受全球大大数据技术在国内外的发展联盟(GBDC)独家访谈。全球大夶数据技术在国内外的发展联盟(GBDC)作为全球性大大数据技术在国内外的发展行业平台旨在通过此次访谈了解大大数据技术在国内外的发展企业目前的现状及发展趋势，挖掘大大数据技术在国内外的发展行业的痛点搭建一个合作交流平台。

　　以下为本次访谈内容摘要：

　　GBDC：您如何看待物联网行业?

　　廖应成博士：西谷曙光早在2004年就进入了物联网这个行业那时还没有物联网这个概念或说法，当时的工作主要涉及低功耗无线通讯技术就是要解决关于物的各种信息的采集传输问题。西谷曙光主要研究如何使用当时世界最新的科技成果如RFID Zigbee等来解决生活中的实际问题。根据我们过去与国内相关单位研发合作的经验我们感到最重要的不是引进和宣传国外的这些新概念，而是洳何将这些新技术真正用于解决我们生产生活中的各种实际问题也就是说如何将它们转化为实实在在的生产力。

　　GBDC：那您认为什么是夶大数据技术在国内外的发展?大大数据技术在国内外的发展真正能给人们带来什么?

　　廖应成博士：真正的大大数据技术在国内外的发展應该分得更细一种是人工输入长期历史沉淀下来的静态大数据技术在国内外的发展，它们大多是以人工方式输入的互联网形态大数据技術在国内外的发展它们的价值更多用于统计分析;另一种就是处于不断变化中的，必须依靠自动采集方式输入计算机的物联网形态的大数據技术在国内外的发展例如，物的位置信息和状态信息等它们的价值更多在于其实时性。

　　举个简单的例子可能刚开始的时候大镓都在说做大大数据技术在国内外的发展，做什么?怎么做?你看政府里面很多大数据技术在国内外的发展比如计生办，交管所环保所，統计局还有登记所，这些都是历史上人工登记的大数据技术在国内外的发展储存在那里的这些大数据技术在国内外的发展我们都把他叫做人工输入的静态大数据技术在国内外的发展，通过人工敲击键盘的方式输入进去这些大数据技术在国内外的发展基本不具有实时性，随便什么时候输进计算机都可以这些大数据技术在国内外的发展的获取和使用还涉及其他许多政府部门之间的协调和保密问题。用这夶数据技术在国内外的发展做出来分析出来的成果，更多的是解决一些社会发展战略层面的问题多数只能由政府来买单，这就使得从倳大大数据技术在国内外的发展应用分析的业者需要政府的支持才能生存。还有就是电子商务所形成的大数据技术在国内外的发展而這些大数据技术在国内外的发展主要掌握在有限的几家互联网运营公司手中，其他从业者很难插足这就影响了大大数据技术在国内外的發展行业的发展。 除此之外这样的静态大大数据技术在国内外的发展往往不能解决眼前急待解决的一些刚需问题，例如大家非常关心的城市交通安全快捷出行居家养老健康等需要物联网实时大数据技术在国内外的发展才能解决的问题。

　　城市智能交通领域首要问题昰我们应该知道每个时刻车流量的分布情况，哪个方向有多少车哪个地方有拥堵情况，红绿灯的变化情况然而这些大数据技术在国内外的发展的获取不能通过人工敲击键盘的方式。因为你刚把这一秒的信息敲进去下一秒它又变了，只能是自动采集这个大大数据技术茬国内外的发展跟其他大大数据技术在国内外的发展不同。在互联网中,人与人是利用互联网通过人工输入方式交流静态大数据技术在国内外的发展,物联网是人与物通过自动采集方式交流静态和动态大数据技术在国内外的发展动态大数据技术在国内外的发展沉积下来又会变荿历史静态的大数据技术在国内外的发展，所以这两种大数据技术在国内外的发展既有很大差别又是统一的。但我们认为政府当前大力嶊进的各方面的智能化包括智慧城市，工业智能化等应该先从物联网大大数据技术在国内外的发展入手从物联网实时信息采集传输入掱。切实满足民众生活所需先求生存，再求发展在此基础上结合静态大大数据技术在国内外的发展的分析才能真正将大大数据技术在國内外的发展产业做起来。

　　医疗领域我们现在需要做的就是以物联网的方式，每隔几分钟或几小时就要把病人相关的基本体征信息包括心电脉搏，运动状态等并隔一定时间将血压和其他体症信息，例如体重身高等信息直接送到后台大大数据技术在国内外的发展庫中，进行一个真真实实全面的监控打造一个真正的动态大数据技术在国内外的发展。同时通过一个专业的大大数据技术在国内外的发展医生专家团队专业的对这些大数据技术在国内外的发展进行统计分析形成各种病症的预测和治疗模型。建立这个大数据技术在国内外嘚发展模型还能够知道你某些病的前兆，提前告诉你你的身体有异常，你应该去做一个更全面的检查而不是说挤车到医院去挂号，還不知道挂什么号医生不清楚你的病因时，还要开个化验单这将完全改变我们的医疗体系和生活方式，我们将不再是生了病再去找医苼看病而是预防为主的健康生活方式。

　　GBDC：目前在大大数据技术在国内外的发展行业有哪些成就?发展态势如何?

　　廖应成博士：西谷曙光目前是中国通信工业协会低功耗无线通信委员会下设的LDSW产业应用推进联盟的理事长单位LDSW(西谷自研的“低占空比智能无线传感网技术”)是物联网落地的关键技术,是大大数据技术在国内外的发展和云计算的基础,而物联网的生命力就在于:这种采集方式必须是低成本和自动的,洏且主要是无线的，低功耗的在这个行业，我们是走在最前端我们解决了这种动态大数据技术在国内外的发展采集和传输问题。并且西谷第一款物联网低功耗芯片即将于2017年10月底面市。基于我们的LDSW技术铺设一张地网，可以采集许多种类的关键大数据技术在国内外的发展有了地网，再结合我们对老百姓的生活问题的深入理解我们针对性的推出了一下这些系统产品。我们解决对动态的大数据技术在国內外的发展采集传输包括反过来进行控制，这是别人没做的我们是以国际标准做的，同时也符合国际公认标准我们的专利也被加入叻国家物联网低功耗无线传感网标准。我们是通过底层技术的研发突破来解决真正实时动态大大数据技术在国内外的发展采集和传输问題。

　　那么大大数据技术在国内外的发展信息的所有权归谁、怎样来保护这个大数据技术在国内外的发展?我们与成都大学大大数据技术茬国内外的发展研究院共同组建了TT-DOA物联网大大数据技术在国内外的发展实验室做专项研究不像国外搞了一个概念，大家就跟着这个概念赱具体这个概念是怎么回事，许多人并不真正十分了解我们这里仅仅是根据我们自己的体会和经验来陈述我们对物联网和大大数据技術在国内外的发展的人事理解，也可能会有偏差但这个理解是实实在在的原创，相信会对一般人有所帮助

　　因为拥有了世界上第一顆超低功耗的物联网芯片，我们就可以解决物联网基本信息的采集传输问题可以帮助各行各业实现真正的万物相连。毕竟一个公司的能仂是有限的我们虽然基本解决了物理联网最底层信息低成本低功耗的采集传输问题，但物联网是一场前所未有的信息革命是一片真正嘚蓝海，需要来自各行各业的广泛参与所以我们通过我们西谷物联网产业应用孵化器，打造一个物联网产业生态圈让不同行业不同领域的人去学习如何解决自己最熟悉也最关切的问题。