大数据的成功案例,大数据的成功案例分析

大家好，今天小编关注到一个比较有意思的话题，就是关于大数据的成功案例的问题，于是小编就整理了2个相关介绍大数据的成功案例的解答，让我们一起看看吧。

1. kettle处理大数据实例？
2. 举出一个大数据思维的典型例子？

kettle处理大数据实例？

Pentaho Data Integration（PDI）是一个以工作流为核心的数据集成平台，它允许通过图形化界面，以拖拽的形式来设计数据的 ETL 过程，而 kettle 是 PDI 的开源版本。

Kettle 可以从各种数据源抽取数据，转换数据，然后将数据加载到各种目标，如关系型数据库、文件、数据仓库等。以下是使用 Kettle 处理大数据的一个实例：

1. 数据源：从 HDFS 上的一个文本文件中抽取数据。

2. 转换：使用 Kettle 中的“Text file input”转换组件读取文本文件中的数据，并使用“Excel output”转换组件将数据写入到 Excel 文件中。

3. 目标：将数据加载到 Hive 数据仓库中。

总job，分三步，第一：先清空目标表；

第二，根据源表总的数据行，结合服务器配置 kettle每次能抽取插入多少行，算出需要分n次抽取，并生成1到n的序列值列表。

ps:生成1、2、3...n 的数据列，然后把每个值赋值给变量var_p***e, 根据var_p***e的值分页查询。

第三，根据第二步 生成的1、2、3...n的数据列，为每行都执行一次表插入，即实现分n次抽取数据插入。

在每次的执行中都根据变量，select 出对应的数据，进行表插入

eg: select * from table

where rownum > (${var_p***e}-1) * 2000

and rownum < ${var_p***e} * 2000

举出一个大数据思维的典型例子？

1. 梅西百货的实时定价机制。根据需求和库存的情况，该公司基于SAS的系统对多达7300万种货品进行实时调价。

　　2. Tipp24 ***针对欧洲***业构建的***和预测平台。该公司用KXEN软件来分析数十亿计的交易以及客户的特性，然后通过预测模型对特定用户进行动态的营销活动。这项举措减少了90%的预测模型构建时间。SAP公司正在试图收购KXEN。

　　3. 沃尔玛的搜索。这家零售业寡头为其网站Walmart***自行设计了最新的搜索引擎Polaris，利用语义数据进行文本分析、机器学习和同义词挖掘等。根据沃尔玛的说法，语义搜索技术的运用使得在线购物的完成率提升了10%到15%。“对沃尔玛来说，这就意味着数十亿美元的金额。”Laney说。

　　4. 快餐业的***分析。该公司通过***分析等候队列的长度，然后自动变化电子菜单显示的内容。如果队列较长，则显示可以快速供给的食物;如果队列较短，则显示那些利润较高但准备时间相对长的食品。

　　5. Morton牛排店的品牌认知。当一位顾客开玩笑地通过推特向这家位于芝加哥的牛排连锁店订餐送到纽约Newark机场（他将在一天工作之后抵达该处）时，Morton就开始了自己的社交秀。首先，分析推特数据，发现该顾客是本店的常客，也是推特的常用者。根据客户以往的订单，推测出其所乘的航班，然后派出一位身着燕尾服的侍者为客户提供晚餐。

　　6. PredPol Inc.。PredPol公司通过与洛杉矶和圣克鲁斯的警方以及一群研究人员合作，基于***算法的变体和犯罪数据来预测犯罪发生的几率，可以精确到500平方英尺的范围内。在洛杉矶运用该算法的地区，***罪和暴力犯罪分布下降了33%和21%。

到此，以上就是小编对于大数据的成功案例的问题就介绍到这了，希望介绍关于大数据的成功案例的2点解答对大家有用。