大数据无疑是目前人们探讨最多的话题，但是大数据并不意味着大价值，如何让数据产生价值是人们一直非常关注的问题。近日，Splunk公司在北京举办了一场“大数据如何落地研讨会”，将对中国用户目前比较关心的大数据技术、实施路径以及解决方案进行讲解和演示。
如今，每时每刻都在产生着大量的数据，例如网站上的每一次单机、设备间的通信和社交媒体互动都会产生这种数据，这些机械数据中可以说蕴藏着巨大的价值。Splunk是一个的实时解决方案，能够处理机器生成的端到端的大型数据集成，将机器生成的大型数据变成实时的洞察。
Splunk产品营销副总裁SanjayMehta在演讲中表示：“Splunk实时解决方案主要是处理大的数据，并且对这些大的数据进行分析，给我们的客户、组织带来价值。”
大家知道，目前大数据在以几何数的速度在增长。其中最复杂的也是最有价值的数据市场的细分是机器数据。例如像服务器、安全装置、传感器等装备产生的数据，这些机器数据记录着所有人的行为。Splunk用实时的方式收集数据，并且对数据进行收集、监控、分析，而且进行可视化。Splunk把它叫做运营智能，也就是说来自这些运营数据所获得的智能。
目前，使用Splunk公司技术的用户来自各行各业，包括保险（放心保）公司、政府、媒体各行各业。那么如何使用大数据方面以及它面临的挑战呢？Splunk拥有着有丰富的经验，利用Hadoop架构，进行低成本的方式来存储他们的数据。
第2页：Hunk让用户从原始数据中获得有价值
但利用Hadoop架构仍有诸多问题，例如在Hadoop这个框架上进行部署并获得价值，是一个具有挑战性的工作；而且Hadoop的部署方面跟软件相比，20倍的服务才能做到这一点；同时对于Hadoop的数据进行分析需要特殊的技能和人才。所有跟Hadoop有关的大概有13个项目都是需要集成的。这种开源的发展需要社区的支持和分享，但是社区不一定能跟上需求的发展。很多客户反映，Hadoop上的数据太大而无法随意、比较容易的迁移。
针对这些问题，Splunk公司在去年10月份推出Splunk Hadoop Connect产品，相当于是把Hadoop和Splunk进行集成，打通了Hadoop和Splunk的集成通道。用实时的方式，把数据从Splunk传输到Hadoop上进行长期的存储。或者是，Hadoop上的数据可以实时地传输到Splunk上，进行分析和可视化。
同时，很多客户认为数据太大，无法随意迁移，那么如何能在Hadoop上直接使用Splunk的功能和能力？其实到现在为止，有很多用户使用Splunk在这方面取得很大的成功。
在六月份，Spunlk公司还推出Hunk的测试版，它提供互动数据探索分析和可视化，针对Hadoop平台的能力。通过这个产品用户可以实现这三个重要的功能：探索、分析和可视化。 而且通过提供互动式数据探索、发现和分析，Hunk让用户能够在Hadoop中从原始数据中获得有价值的信息。
Splunk公司还一直对产品进行创新，来不断适应市场的需求。目前在新产品上主要有三大主要创新。首先是虚拟的索引的技术，可以让用户直接地自动化地使用MapReduce。第二个技术叫scheme on the fly，通过 "Schema on the fly"，在查询的时候就能够对数据分析提供了最大的灵活性。这种高度灵活的数据分析能力对庞大的非结构数据来说非常重要。最后，单有灵活性是不够的，还需要性能，所以我们还有加速器。这三个技术使得Hunk的分析能力威力巨大，帮助用户分析数据。
文章总结：讲到大数据，人们首先就会问到如何发现价值，Splunk公司的产品能够帮助用户灵活、快速、准确的发现价值所在，让IT和企业用户能够探索、可视化和分析存储中的数据。通过这次研讨会，让我们对大数据落地及未来发展更充满了信心。
TAG: 解决方案 智能
