从图的RDD创建边的RDD
是指在图计算中，通过已有的图的RDD（Resilient Distributed Datasets）来创建边的RDD（Edge Resilient Distributed Datasets）。图的RDD是一种分布式的数据结构，用于表示图结构数据，其中包含了图的顶点和边的信息。
创建边的RDD可以通过以下步骤实现：
- 首先，需要将图的RDD转换为边的RDD。可以使用图的RDD中的顶点信息和边的信息来创建边的RDD。边的RDD包含了连接图中不同顶点的边的信息。
- 创建边的RDD时，需要指定边的源顶点和目标顶点。边的RDD可以通过指定源顶点和目标顶点的方式来表示图中的边。
- 创建边的RDD后，可以对其进行各种图计算操作，如遍历、聚合、过滤等。这些操作可以基于边的RDD中的边信息进行计算。
图的RDD和边的RDD在图计算中起着重要的作用。它们可以用于表示和处理各种复杂的图结构数据，如社交网络、网络拓扑等。通过创建边的RDD，可以方便地对图进行各种图计算操作，如图搜索、图分析、图挖掘等。
腾讯云提供了一系列与图计算相关的产品和服务，如腾讯云图数据库TGraph、腾讯云图计算引擎TGraph Engine等。这些产品和服务可以帮助用户在云环境中高效地进行图计算和图分析任务。
更多关于腾讯云图数据库TGraph的信息，请访问：腾讯云图数据库TGraph
更多关于腾讯云图计算引擎TGraph Engine的信息，请访问：腾讯云图计算引擎TGraph Engine
相关·内容
嗨，我已经构建了多个多个图(总共11个)图2- SongWriter - SongVertex (Id，SongName) WriterVertex(Id，ArtistName)边缘(歌曲，作者，"WrittenBy一些图具有由case类定义的边属性和顶点属性。下面展示了Gr
浏览 0提问于2018-06-07得票数 0
1回答
考虑一组图。在我目前的情况下，它是一个RDD[Graph[VD, Double]]，但如果它可以使答案更容易的话，它可以经过一定的努力重新编写成Seq[Graph[VD, Double]]，但我更喜欢前者。我的问题是，如何有效地创建包含集合中每个图的边的RDD[Edge[Double]]？
例如，假设图形集合包含三个图形G1、G2和G3。对于包含G1、G2和G3的图</em
浏览 1提问于2018-08-02得票数 0
1回答
我有一对RDD，并希望使用它构造一个GraphX图。我想有加权边，即，如果一个边出现3次在对RDD，我希望边的权重是3。RDD中的take(1)如下所示：
res2: Array[(String, String)] = Array((905067378709,905458844980))
浏览 1提问于2016-09-05得票数 3
回答已采纳
我有一个有数百万条边的图，其中边由org.apache.spark.rdd.RDD[org.apache.spark.graphx.Edge[String]] = MappedRDD[4]表示。我有两个问题：2)是否可以在RDD或RDD的特定列上创建索引以加快查找速度？
请原谅我这个问题的琐碎之处，我对这门语言是新的，我需要
浏览 1提问于2014-10-15得票数 0
1回答
我很难理解如何在Apache中用GraphX创建下面的内容。我获告知以下各点：
我需要以某种方式将这些数据存储在EdgeRDD中，这样我就可以在GraphX中创建我的图形了，但是我不知道我将如何做。
浏览 2提问于2016-12-16得票数 0
回答已采纳
我是Spark和Scala的新手，我正在尝试从一个JSON文件中读取一堆tweeter数据，并将其转换为一个图，其中顶点表示tweet，边连接到tweet，这是原始发布项目的重新tweet。到目前为止，我已经成功地读取了JSON文件并弄清楚了我的RDD的模式。现在我认为我需要以某种方式从SchemaRDD对象中获取数据，并为顶点创建一个RDD，为边创建一个RDD。这是解决这个问题<
浏览 8提问于2015-09-01得票数 1
我有一个加权图，大约有340k个顶点和772k条边。我从HDFS上的一个文件构建边和顶点RDD。val verticesRDD : RDD[(VertexId, Long)]从这些RDDs中，我使用.apply方法创建了一个图。val my_graph: Graph[(Long),Double] = Graph.apply(verticesRDD,
浏览 0提问于2016-12-09得票数 3
我有一个星火图，我是这样创建的我的顶点是RDD[(Long, (String, Option[String], List[String], Option[String])]，我的边是RDD[Edge[Long]]
如何将此图/边/顶点保存到Hive/Text /任
浏览 9提问于2015-01-29得票数 1
1回答
例如，如果有两个顶点和边的图，如下所示：import org.apache.spark.rdd.RDD
(1L, ("a", 28)), Edge(1L, 2L,
浏览 3提问于2015-07-21得票数 1
回答已采纳
我在星火GraphX中创建一个简单的图形有很大的问题。我真的什么都不懂，所以我试着所有我找到的东西，但都没有用。例如，我尝试从复制这些步骤。以下两项是可以的：
val airportCodes = df_1.select($"Origin$"Dest").flatMap(x => Iterable(x(0).t
浏览 0提问于2018-04-18得票数 1
回答已采纳
1回答
Apache替换
、、、、
既然是(1 -> 2)和(2 -> 7)，我想把set (2, 7)替换为(1, 7)，(3 -> 7)和(7 -> 4)也替换(7,4)作为(3, 4)(1, 3)
(1, 4
浏览 1提问于2016-10-25得票数 0
回答已采纳
我正在尝试使用创建一个图表，这些数据可以在这里找到：
import org.apache.spark.graphx._不幸的是，我得到了这个错误：
<console>:27: error: ty
浏览 3提问于2015-07-02得票数 5
回答已采纳
2回答
在Hadoop生态系统中，我一直在不同的上下文中获得DAG这个术语，比如
DAG模型是MapReduce模型的严格推广它是如何在Hadoop或Spark中实现的？
浏览 3提问于2017-06-22得票数 3
我正在学习Apache，并试图获得RDDs的谱线图。但是我找不到一个特定的血统是什么时候创建的？此外，在哪里可以找到RDD的谱系？
浏览 2提问于2017-12-07得票数 1
回答已采纳
我有一个要加载到Spark中的Dataframe的表，它有以下模式： verticesDf.printSchema
|-- id: integer (nullable = true)Dataset[(VertexId, SRow)] = verticesDf.as[(VertexId, SRow)]
val vertVX=VertexRDD(sourceDS) 但是这个和许多其他的都没有给出结果--我总是得到一些类型不匹配的结果。正确的方式是什么？
浏览 18提问于2020-10-18得票数 0
回答已采纳
我想把图中的边变成子图。然后，我想加入这些子图基于一个准则和形成的集团。基本上，我想知道如何创建Graph对象的列表。import org.apache.spark.rdd.RDD
val e
浏览 3提问于2015-08-10得票数 1
回答已采纳
1回答
此外，还有一个REST，它有端点来获取具有边和边的图节点。
这个二次图可能包含多达70000个节点。目前使用Cassandra作为数据库，但是按键从Cassandra提取大量数据需要花费大量的时间和资源。在API服务中持久化RDD (或者可能是GrapgX对象)，并在API调用过滤器中筛选来自持久化RDD的必要数据。我猜当RDD适合内存时，它会工作得很快，但是在它缓存到磁盘的情况下，它将像一个全扫描
浏览 0提问于2017-01-19得票数 2
2回答
如果我从HDFS中在我的RDD外壳中创建了10个pySpark，这是否意味着所有这10个RDD的数据都将驻留在Spark内存中？
如果我不删除RDD，它会永远存在于记忆中吗？如果我的数据集(文件)大小超过可用RAM大小，数据将存储在哪里？
浏览 5提问于2016-11-22得票数 21
回答已采纳
我有一个字符串的ArrayBuffer，它包含了我想要创建的图的所有顶点的标签。我需要创建一个RDD对象[(VertexId, String)]，它将成为我未来图形的节点，其中每个节点的VertexId = ArrayBuffer中节点标签的索引。我只找到了有关使用SparkContext.textFile(String fname)创建RDD的
浏览 3提问于2015-10-18得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
