使用 Pig 脚本获取特定行的数据

Question

我有一个包含以下数据的 csv 文件

characteristic, total/Percent 
Kids below 18, 24
mental problem, 30.7
physical problem 69.3
kids above 18, 40
mental problem, 41.20
physical problem, 59.80

现在使用猪脚本我需要找出 18 岁以上儿童的心理问题百分比。

任何人都可以帮助我吗？

此致，

阿迪提亚

Answer 1

实际上有两种方式——简单和困难

1。更改您的 csv 文件的结构 - 目前您的数据中有数据特征

   characteristic, Percent, Age group 
   mental problem, 30.7, under18 
   physical problem 69.3, under18 
   mental problem, 41.20, above18 
   physical problem, 59.80, above18

在这种情况下，您可以只过滤所需的行

编写自定义加载程序，对数据进行一些预处理。这是一个困难的方法，但如果你不能改变输入结构，它可以是你的选择

使用 Pig 脚本获取特定行的数据

Fetching data for a specific row using Pig script

apache-pig