我是Pig脚本的新手，正在尝试修改一些现有的pig脚本，以便从日志文件中提取一些数据。bag2:(name11),(name22),}result bag:(uid1, (name11, name13)),}
我想我需要在这两个包上做一些连接/过滤，但不知道怎么做。
浏览 1提问于2017-08-17得票数 0
1回答
在我的pig脚本中，我从5个以上的数据源(Hive表)读取数据，其中一个是主要的源数据，其余的是一种维度数据表。我正在尝试过滤主数据源关系(或别名) w.r.t其中一个维度关系中的一些值。我也尝试过使用"
浏览 1提问于2014-06-20得票数 0
我有一个pig脚本，输入如下：我有这样的关系，按不同的列分组：Y=B列|总列D|总列E|然后，我需要将X、Y、Z存储到不同的文件夹中，因此会多次调用store。Pig知道如何只加载和处理一次数据，
浏览 0提问于2013-06-22得票数 1
回答已采纳
2回答
我有两张表，格式如下#cc bb毫米42 24 3562#名称cid索曼. 42-47-2562当尝试连接由'-‘分隔的三列时，我使用的代码是下面的错误
a = LOAD 'default.com_data' USING org.
浏览 3提问于2014-10-10得票数 2
回答已采纳
我应该从2个连接表中获得多个值。我会将过滤后的值传递给输出表。NAME 'ANIMAL' 'CAT'我用过TOracleInput和TOracleOutput。我的输出表上只有一头猪……
我应该如何在我
浏览 3提问于2014-09-23得票数 0
我有一个表，其中包含一个简单的度量，如SUM(TableAmount)或COUNTROWS(表)，并向该度量添加一个数字，如SUM(TableAmount)+0。如果我试图通过一个关系过滤这个表，PowerBI中的表可视化将遵循过滤器，但如果选择了“显示没有数据的项”，则会交叉连接其余表项的所有列。如果我取消选择“显示没有数据的项目”，过滤器将不会被使用，表中的所有项目都会显示出来，但这次没有交叉连接</em
浏览 1提问于2018-01-30得票数 1
1回答
我有许多具有关系结构的表。例如：tblSite、tblSiteImage、tblSiteAdvertisement、tblGenericCategory、tblEntityType等。我想将过滤器应用于所有这些表，即tblSite的过滤器。
这意味着，应该有tblSite数据的下拉列表(DDL)。在更改DDL中的数据选择之后，它应该从这些表中筛选数据。请注意，SiteId列存在于一些表中，如tblGenericCategory，但不存在于表tblEnt
浏览 5提问于2013-11-10得票数 0
1回答
我需要一些关于我应该如何在Java中使用hadoop而不是Pig来处理基础架构日志的建议，因为我认为Pig在读取日志文件时不支持正则表达式过滤器。例如，我有cisco日志和web服务器日志，我希望按行过滤特定值并将其提供给hadoop。我需要一些建议，最好的方式
浏览 3提问于2013-12-04得票数 1
2回答
我有一个猪关系，如下所示：我正在尝试将input_md5关系的所有列存储到一个hive表。input_md5::type: chararray,input_md5::name: chararray,input_md5::id: l
浏览 12提问于2016-08-12得票数 2
回答已采纳
现在，我想把它转换成像这样的代码行：a\tb2\tc2a\tbn\tcn
是否可以使用pig拉丁语，或者必须使用UDF？
浏览 1提问于2013-05-23得票数 0
1回答
我需要一些技巧，指导和/或你的经验，在巨大的数据集上执行猪脚本的性能提高。
我使用Pig (版本0.12)和Hive (版本0.11)来分析客户事务。在我的例子中，pig脚本将按天调度；主数据包含大约500K到800K条记录(甚至多达100万条)，并且将有4个额外的数据集来帮助分析主交易数据集，每个数据集大约有50K条记录。我听说在大数据处理中，我们应该避免连接，但在我的例子中，我不能；我必须将我的主数据集与这4个额外的数据
浏览 2提问于2014-07-02得票数 0
我的关系中的一列包含分隔值(如csv)，我想将它们分开，以便在关系中为每个值都有一个条目(与具有原子值的其他列相结合)。例如，如果我有以下数据：1 |23 |Steve,Joe,Bob我希望得到的关系包含|23 |Steve1 |23 |Bob2 |26
浏览 0提问于2011-08-25得票数 4
回答已采纳
我是Apache Pig的新手，并试图了解它的体系结构。有人能解释优化器在Apache体系结构中的作用吗？上面写着：
我不清楚projection和pushdown是什么意思。
浏览 0提问于2018-11-15得票数 1
以下是我的数据Cow 5 100Pig 4 85 Sheep 3 65数据按动物分类，然后按动物群中的年龄分类，然后按体重(增加)进行排序。是否有一种方法可以对这些数据进行子集，使我只剩下最轻的动物群和年龄组？这就是产出将变成的样子：Cow 5 100She
浏览 3提问于2017-11-06得票数 0
回答已采纳
1回答
我想把我的行数据转换成列。我有这样的状态和访问数据：AZ 1023 06OH 9821 06
NY在我看来，我可以按州过滤数据，然后将新列附加到新表中。我可以在Pig中使用少量的列就可以做到这一点，但我认为这样做50次是愚蠢的，我宁愿使用循环。显然，这些都是同一列族中的列限定
浏览 1提问于2014-10-11得票数 0
我有两个包含列的表，如下所示。user STRING,tag STRINGuser1 help, piguser1 hive, hiveql, help
hadoophiveql
如果我只想过滤出Posts表中包含标签表中列出的标签的行，如下面的结果所示
浏览 5提问于2014-01-28得票数 6
Pig和Hive的确切区别是什么？我发现两者具有相同的功能含义，因为它们用于做相同的工作。唯一的事情是实现，这对两者都是不同的。那么什么时候该使用哪种技术呢？有没有明确说明两者在适用性和性能方面的区别的规范？
浏览 3提问于2012-04-23得票数 18
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
