大数据时代_大数据分析将走向何方_数据分析师

现阶段关于大数据的未来，下一步是什么，我们如何利用数据在更深的层面提取有意义的消费者信息来超越我们现在的程度?最标准的答案是从比以往更 多的设备上实时获取数据和分析的能力。的确，通过家庭，穿着，汽车我们可以收集海量的数据，但是这仅仅只是目前方法的延伸。
 
数字vs情绪
 
现在大部分的数据收集都是数值或二进制。数据告诉我们如果有人进入到一个网站，浏览到什么程度，多长时间，关注点在哪，但数据没有告诉我们为什么。我相信大数据时代，大数据2.0——不是关于二进制和数值，而是提出更深层次的问题。大数据2.0 应该不仅是关注于在哪和什么，而且也关注回答为什么。大数据2.0应该关注于更好的理解消费者的情绪状态和决策逻辑，从而提供更深入的理解消费者的选择。
  
假设我们是一家消费品公司，我们想引入一个新的尿布产品进入市场。我们决定看看亚马逊为了更好地理解哪些产品是市场领袖（销售排名和销售数量），消费者喜 欢产品本身的程度（评论）。如果我们在所有尿布产品中分析这些指标，我们有一个大数据1.0图片，告诉我们到底是谁卖的最多，消费者最喜欢的是什么。然而，在大数据2.0中这是不够的，大数据2.0需要知道原因：为什么这个产品卖的最多?为什么它有5星评价?
 
解决方案
 
对我们来说， 开始创建大数据2.0最容易的方法是每天收集非结构化数据。这可以是评论、客户反馈电子邮件、社区论坛，甚至是自己的CRM系统。着眼于这个数据最简单的方法是通过文本分析。
 
文本分析是一个相当简单的过程：
 
1、收集：收集要分析的原始数据；
 
2、转换和预处理：转换数据的格式，让它更容易阅读；
 
3、改进：通过添加额外的数据点优化数据；
 
4、加工：进行具体分析和数据分类；
 
5、频数分析：评估结果并转化成数值指标；
 
6、获取：实际提取信息。
 
为了在下一层里采用这些，我们将开始从评论中提取词汇和短语。这会告诉我们一些重复出现的信息及评论的频数分析。实际上执行这个分析通过评估成千上万的评论并且发现四个可行的见解。没有文本分析，我们不会得到这些。
 
1、为什么销售得那么好
 
当看着最畅销产品的评论，发现在大多数有用的评论中提到最多的关键词是“价格”“特点”和“价值”。这告诉我们，除了产品的定价，人们不买它也因为它的质量和功能特点。所以当我们推出我们的产品，我们会注意价格/价值导向，而不仅仅是功能特点。
 
2、为什么人们不喜欢它
 
这是一个很有启迪作用的问题。最多负面评论的品牌有极高频率的关键词“胶带”，“粘贴”，“保持关闭，”和“打开”。
 
3、智能过滤
 
这里有一个有趣的问题，很多负面评论并不是关于实际的产品，而是关于物流、库存和包装的问题。通过标记和删除这些设置，可以在纯粹的产品层面做出评价为了 相关产品的关注点。如果我们在亚马逊展示我们的尿布，我们建议在页面显著位置上增加物流和库存水平保证——这是一个竞争优势，直接消除消费者的担忧。
 
4、他们想要什么
 
从研发的角度来看，这是一个黄金观点。通过评估审查一些关键词像“我希望”，“希望”或“他们应该”，我们能够发觉消费者的共同特点当他们寻找尿布的时 候。这些都是伟大的见解，解决消费者不断变化的需要。我们可以将这些产品特性提供给研发团队以及广告文案。
正如你所看到的，仅仅只是在亚马逊分析尿布的种类，大数据分析就超过了二进制性能指标。
 
开始着眼于现有的数据，导出CRM，检查评论，网站或在主题论坛提到的产品，甚至是销售部门的电子邮件收件箱。这是个大数据时代。