是否有任何python或scala工具连接火花/鲨鱼？
是否有任何python或scala工具连接火花/鲨鱼？
提问于 2013-10-12 08:10:46
我想使用python或scala连接鲨鱼服务器。但我没有找到任何工具来做这个。有什么库(python或scala/java)吗？谢谢你提前了。
回答 2
Stack Overflow用户
回答已采纳
发布于 2013-10-12 09:42:09
还不清楚您所说的连接是什么意思，但是鲨鱼和火花都说scala：
$./bin/shark-shell
scala> val youngUsers = sql2rdd("SELECT * FROM users WHERE age < 20")
scala> println(youngUsers.count)
...
scala> val featureMatrix = youngUsers.map(extractFeatures(_))
scala> kmeans(featureMatrix)此外，火花也讲python。
Stack Overflow用户
发布于 2013-10-12 19:04:45
如果您想使用Shark运行SQL查询，Shark的sharkserver的行为就像一个普通的Hive服务器，因此您应该能够重用现有的连接到Hive的Python方法，例如
Server还支持Hive的JDBC接口，因此您可以使用它来运行Scala或Java的查询；只需使用Server的地址来代替Hive地址。
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/19332034
复制相关文章
相似问题
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号