来自多列数据帧的具有值的单列计数
是指在一个数据框中，根据多个列的值来计算单个列的计数。这个过程可以帮助我们了解数据的分布情况，发现异常值或者进行数据分析。
在云计算领域，可以使用云原生技术来处理这个问题。云原生是一种构建和运行应用程序的方法，它利用云计算的优势，如弹性扩展、高可用性和自动化管理。在这种环境下，可以使用云原生数据库来存储和处理数据，如腾讯云的TDSQL、TBase等产品。
具体步骤如下：
- 将多个数据帧合并成一个数据框，可以使用编程语言如Python的pandas库来实现。
- 根据需要选择要计数的列，可以使用pandas的groupby函数来按照列的值进行分组。
- 对每个分组进行计数，可以使用pandas的count函数来实现。
- 将计数结果保存到一个新的单列中。
这种方法适用于各种场景，例如统计用户行为、分析销售数据、监控系统日志等。通过计数可以更好地理解数据的特征和趋势，为后续的数据处理和分析提供基础。
腾讯云相关产品推荐：
相关·内容
我正在尝试创建一个包含每日订单的新列(每天的OrderNumber计数)。因为我有来自多个来源的数据，所以我使用SSIS。我的最后一张桌子应该是这样的：
Date | Product Number | Quantity Sold | Number of Orders (for that date)
我试过使用聚合，但由于其他列的原因，它无法工作。我正在考虑创建一个并行源(相同的暂存表)，在这个源上，我将使用聚合来查找每日订单的数量，然后找到一种方法将其带回到最终的表，但一定有更简单的方法吗？
浏览 2提问于2016-12-10得票数 0
回答已采纳
4回答
我想将一个列的数据帧与另一个多列的数据帧进行比较，并返回具有最大匹配百分比的列的标题。 我在pandas中找不到任何匹配函数。第一个数据帧第一列： cars
----
swift
maruti
wagonor
hyundai
jeep 第一个数据帧第二列： bikes
-----
RE
Ninja
Bajaj
pulsar 单列数据帧： words
---------
swift
RE
maruti
waganor
hyundai
jeep
bajaj 所需输出： 100% match header - cars
浏览 41提问于2019-06-17得票数 5
1回答
我注意到了几次单列数据帧(下面的例子)；但在其他大多数情况下，单列数据框架只是一个系列。对于为什么返回一列DF，有什么押韵或理由吗？
示例：
1)当用布尔掩码索引列时，掩码只有一个真值
df = pd.DataFrame([list('abc'), list('def')], columns = ['foo', 'bar', 'tar'])
mask = [False, True, False]
type(df.ix[:,mask])
2)当对只有两列的DataFrame设置索引时，首先：
df = pd.Data
浏览 5提问于2014-09-18得票数 5
回答已采纳
每次text_y列中的值发生变化时，我需要遍历我的数据帧行，并将单列bounding_box_y旋转为8列。 原始数据帧 ? 所需数据帧 ? 有没有人可以帮助编写一些不将值硬编码到代码中的代码？整个数据帧超过6000行。每次另一列中的值发生变化时，我都需要将这一列转换为8。 谢谢!
浏览 19提问于2020-08-30得票数 2
我有两组数据，我的目标是根据它们制作一个比较直方图。然而，一个是两列的数据，x及其频率，第二个是一个单列的未排序数据，gnuplot应该导出频率。我想要一个连续的直方图，但我在网上找到的东西都有差距。
我该怎么做呢？
我尝试使用以下脚本
binwidth=5
bin(x,width)=width*floor(x/width)
plot'data1.txt' with boxes, 'data2.txt' using (bin($1,binwidth)):(1.0) smooth freq with boxes
使用数据文件data1.txt
1 3
浏览 3提问于2014-04-20得票数 1
我编写的代码可以在高吞吐量的生产环境中运行，以处理来自多个用户的各种输入。在这种环境中，我经常需要连接(使用dplyr)两个多列数据帧，这些数据帧具有不匹配类型的连接列，这会产生此错误。“由于类型不兼容，无法联接到...”
生产代码预计将处理输入csvs，这些csvs是0-1000行的150+列，具有12-20个联接列。我使用read.table来提高速度，因为这150列的内容可能不同，所以允许根据数据内容推断类型。
如果有一个通用函数能够以编程方式匹配join列类型，而不需要对列名或位置进行任何假设，那就太好了。
浏览 0提问于2018-03-11得票数 14
回答已采纳
我将R中的FASTA文件导入到如下所示的单列数据框架中：
dna.sequences <- data.frame(c(">ID1", "sequence1", ">ID2" , "sequence2", ...))
我希望将这个数据帧分割成两列，并删除每个ID之前的'>‘，这样我终于得到了这样的结果
new_dna <- data.frame(
ID = c("ID1", "ID2" ... ),
sequen
浏览 12提问于2020-10-23得票数 1
回答已采纳
我测试jarque_bera的代码如下： for x in data.columns.values:
print(x, "-", stats.jarque_bera(data[x])) 结果就是 ? 这是否意味着我的数据帧的所有列都没有标准化？
浏览 24提问于2020-01-08得票数 0
回答已采纳
1回答
我无法从pyspark数据帧列表创建RDD，如下所示：
l = [('Alice', 1)]
df = sqlContext.createDataFrame(l)
m = [('bob', 2)]
df2 = sqlContext.createDataFrame(m)
df_list = [df, df2]
sc.parallelize(df_list)
我得到的错误是：Py4JError: An error occurred while calling o85.__getnewargs__. Trace: py4j.Py4JException: Method
浏览 4提问于2017-04-10得票数 1
我需要制作一个包含多个列的数据帧的单个高斯核密度图，其中包括数据帧的所有列。有人知道怎么做吗？
到目前为止，我只知道如何使用seaborn绘制单列的高斯核图。ax = sns.kdeplot(df['shop1'])但是，ax = sns.kdeplot(df)和ax = sns.kdeplot(df['shop1','shop2])都不能工作。
否则，有没有变通的办法，我可以通过将每一列都添加到另一列来转换具有形状df.shape(544，33)到(17952，2)的数据帧？
数据框包括一种产品的标准化价格，而每列表示不同的卖家，行表示价格的日期和时间
浏览 0提问于2017-04-25得票数 0
1回答
我有一个数据帧，它有一个索引(单词)和一些歌词的单列(计数)。我正在尝试创建一个基于单词计数的热图。
Cuenta
Que 179
La 145
Y 142
Me 113
No 108
我正在尝试像这样生成热图：
df1 = pd.DataFrame.from_dict([top50]).T
df1.columns = ['Cuenta']
df1.sort_values(['Cuenta'], ascending = False, inplace=True)
result = df1.pivot(index=df1.index, colum
浏览 2提问于2017-12-01得票数 4
1回答
我有一个矢量，它包含50个重新采样数据的数据帧。因此，每个数据框中的所有列名都是一致的，但数值不同。每个数据帧由12行组成。如何找到50个数据帧之间特定列中每行的平均值，并将12个平均值放入一个新的单列数据帧中？
浏览 2提问于2017-10-25得票数 0
1回答
非常感谢你的阅读。
我有一个熊猫数据帧，这是多个较小的数据帧连接的结果。我想要做的是在我的最终数据框架中添加多个指示符列，这样我就可以看到每一行来自什么更小的数据帧。
这将是我想要的结果：
Forename Surname Ind_1 Ind_2 Ind_3 Ind_4
jon smith 0 0 0 1
charlie jim 1 0 0 1
ian james 0 1 0
浏览 1提问于2018-01-03得票数 1
回答已采纳
我的第一个问题是... 我有两个数据帧，它们的行数都不同。第一个有3列，第二个有1列。 我希望将第一个数据帧的第一列的值与第二个数据帧的第一(且唯一)列的值进行所有组合，并将第一个数据帧的第二列的值与第二个数据帧的第一(且仅)列的值进行组合，依此类推……我假设结果将是一个单列dataframe (?)。 如下所示： ? 尝试使用combn还没有帮助我... 谢谢!
浏览 24提问于2020-12-03得票数 0
1回答
我正在尝试使用PySpark编写一个查询来计算大型数据帧中的所有null值。在读取数据集后，我执行以下操作： import pyspark.sql.functions as F
df_agg = df.agg(*[F.count(F.when(F.isnull(c), c)).alias(c) for c in df.columns])
df_countnull_agg.coalesce(1).write.option("header", "true").mode("overwrite").csv(path) 这很好用，df_agg数据帧给
浏览 17提问于2020-03-28得票数 0
回答已采纳
将数据帧从m行x n列重塑为m x n行单列。 Year Jan Feb Mar Apr May Jun Jul Aug Sep Oct Nov Dec
2000 12.7 13.8 13.3 12.6 12.8 12.3 13.4 14 13 12.8 13 13.2
2001 13.8 13.7 13.8 13.9 13.4 14.2 14.4 15.6 15.2 16 15.9 17
2002 16.5 16 16.6 16.7 16.6 16.7 16
浏览 16提问于2020-04-05得票数 0
回答已采纳
假设我们有一个数值向量。实际上，假设我们有一个由单列组成的数据帧。
example = data.frame("column" = rnorm(10000, 10, 3))
为了使用dplyr包的过滤功能，我们将把它当作一个数据帧来处理。
另外，假设我们有另一个长度较小的向量。这个特定的向量只是为了示例的目的。它不一定是一个序列。
numbers = 8:100
我想做的是保留那些较大向量的值，这些值等于较小向量的任何值，而丢弃那些不等于较小向量的值。
当然可以。filter函数可以做到这一点。除了我必须写下以下内容：
filtered = dplyr::filter(exam
浏览 3提问于2020-01-30得票数 0
我会有CSV文件。我想读取整个行(作为单个字符串)和解析字符串，并创建列的数据帧，然后保存CSV文件。原因是CSV文件中存在编码问题，无法正确读取。如何将CSV作为单列读取？如何根据管道和冒号进行解析并形成数据帧？
Shape123|"MULTIPOLYGON ( 496000 6908000,495000 6908000,495000 6909000,496000 6909000,496000 6908000))“|”红色“|”Long“|”208336“|”5“|”-1“
浏览 4提问于2021-01-23得票数 0
我有来自多个TSdist函数的输出来测试多个时间序列之间的差异。得到的矩阵被转换成数据帧，使用我使用melt转换成单个数据帧。第一列将行ID表示为列，第二列表示冒号。我试图计算整个时期之间的平均相似性。
我试图按前两列分组，在第三列上执行和操作。下面是一个数据框架示例。
df <- data.frame(A = factor(x = c("A", "B", "A", "A"), levels = c("A", "B")),
B = factor(x = c("
浏览 1提问于2018-04-27得票数 1
回答已采纳
1回答
我正在为我的一个客户开发一个数据集市。
我想知道在为数据集市中的列定义和选择数据类型和长度方面是否有任何最佳实践。我有点担心这一点，因为数据将来自多个来源，而最大长度(根据sql数据分析器)不是其他来源的最大长度。
提前谢谢。
浏览 2提问于2011-05-27得票数 0
回答已采纳
2回答
我需要找出pyspark dataframe中所有列中0的百分比。如何在数据帧中找到每一列的零计数？
附言:我尝试过将数据帧转换为pandas数据帧，并使用了value_counts。但是，对于大型数据集来说，推断它的观察值是不可能的。
浏览 0提问于2018-08-20得票数 4
我想从次要数据帧中删除主数据帧中的单词。
这是主要的数据框架：
+----------+--------------------+
| event_dt| cust_text|
+----------+--------------------+
|2020-09-02|hi fine i want to go|
|2020-09-02|i need a line hold |
|2020-09-02|i have the 60 packs|
|2020-09-02|hello want you teach|
下面是单列辅助数据帧.在第二数据帧中的单词需要从列cust_
浏览 0提问于2020-10-28得票数 0
回答已采纳
1回答
我有两个数据帧。其中一个包含一列多边形，取自多边形形状的图像。每个多边形都有一组坐标。这个数据帧也有一个"segment-id“列。我还有另一个dataframe，它包含一列点，也有坐标。这些点表示来自多边形形状的同一图像的像素，因此具有相同的坐标系。我想给每个点包含它的多边形的“段id”。每个多边形至少包含一个点。
目前，我使用嵌套的for循环来实现这一点：
<code>A0</code>
这是非常慢的。对于100分，大约需要10秒。我需要一种更快的方法来做这件事。我试过使用apply，但它仍然非常慢。
希望有人能帮帮我，非常感谢。
浏览 6提问于2019-08-21得票数 0
2回答
我有一个包含所有可能ID的单列数据帧： ID
a1
a2
b1
b11
c1 我从我的数据库中获得了具有相同列"ID“的数据帧。但在该数据帧中，并不是所有的ID都是。下面是该表示例： ID value
a1 18
a2 10
b1 10 我想以这种方式绑定这些tw表，以便不在我的表中的ID的值为零。那么，如何绑定这两个表来获得以下结果： ID value
a1 18
a2 10
b1 10
b11 0
c1 0
浏览 7提问于2020-12-11得票数 0
回答已采纳
不幸的是，我无法生成一个可复制的示例，但这是我遇到的问题-使用一个数据帧，我能够循环列并保存每列的唯一值计数。对于另一个数据帧，它与第一个数据帧具有完全相同的列和数据-唯一的区别是第二个数据帧都是对象数据类型，而第一个数据帧具有一些整数和浮点数-我遇到了一个'unhashable type：'dict'‘错误。 这是可行的： for col in olddf.columns:
unique = len(olddf[col].unique())
print(col, unique) 我得到一个不可散列的类型：'dict‘错误，如下所示： for
浏览 28提问于2020-05-01得票数 0
我想根据列的子集找出两个数据帧( df1中的元素，而不是df2中的元素)之间的区别。这两个数据帧具有相同的模式。
假设df1包含
col1 col2 col3 col4
A B C D
A C D D
和df2包含
col1 col2 col3 col4
A D D D
A B D D
我想要df1中的项，在df2中没有col1和col2匹配的项。因此，在本例中，预期输出将仅为df1的第2行。
A C D D
我尝试过isin的不同变体，但我正在努力寻找任何有效的变体。我尝试过，但它只适用于单列。
浏览 0提问于2014-04-11得票数 1
我有这个数据帧，我可以使用向量器得到每行每一项的计数。但这对于单行来说是正确的(例如col1)。如何将其应用于整个数据帧(所有3列)？ import pandas as pd
import numpy as np
from sklearn.feature_extraction.text import CountVectorizer
shopping_list = [
["Apple", "Bread", "Fridge"],
["Rice", "Bread", "Milk"],
浏览 28提问于2019-12-18得票数 1
回答已采纳
我有一个熊猫数据帧，它看起来如下所示：
df.head()
categorized.Hashtags
0 icietmaintenant supyoga standuppaddleportugal ...
1 instapaysage bretagne labellebretagne bretagne...
2 bretagne lescrepescestlavie quimper bzh labret...
3 bretagne mer paysdiroise magnifique phare
浏览 0提问于2020-03-02得票数 0
2回答
我希望按从大多数到最少的顺序检索表值。例如，如果我们有如下所示的单列表，
selected_val
2
3
3
2
1
3
1
1
1
4
我需要一个SQL，它将按1、3、2、4的顺序返回值，因为表中有4个1，3个3，2个2和1个4。我只需要不同的值，这意味着我不需要1,1,1,1,3,3,3,2,2,4，这可能吗？
浏览 2提问于2016-01-10得票数 1
回答已采纳
如果我想找出一个至少有一个零值的pandas数据帧中的所有特性，那么我可以使用以下命令。
df.isin([0]).sum()
这是简单而优雅的。找到具有负值的特征的等价物是什么？
似乎没有简单的方法来找出pandas数据帧中至少有一个负值的所有列。你能帮帮忙吗？在此之前，非常感谢您。
浏览 0提问于2020-10-01得票数 0
我有一个数据帧列表，我想要循环所有的数据帧，并通过使用提供的列表过滤列来追加列来创建数据帧。下面是代码
#df_ls contains list of dataframes
df_ls = [A, B, C, D]
for j in df_ls:
match_ls = ['card', 'brave', 'wellness']
for i in text:
if i in j.columns:
print(i)
df1 = j[i]
df2 = df1
浏览 11提问于2019-07-17得票数 2
回答已采纳
1回答
我有一些有1050列的数据帧，如何在单列视图中显示列名。
list(df) # will give all column name in list, but i need to see in column
['FIPST', 'SECTOR', 'N07_EMPLOYER', 'RG', 'TABWGT', 'EMPLOYMENT_NOISY', 'PAYROLL_NOISY', 'RECEIPTS_NOISY', 'PCT1', 'PCT2&
浏览 1提问于2017-09-23得票数 0
回答已采纳
我有一个名为ff的单行数据帧。
A B C D E F
2 5 9 1 7 6
当a列等于7时，如何创建单列数据帧(ColContribs)
E
7
就像这样..？我用的是
ColContribs <- ff[,ff[1,]==7]
但是我得到了这个错误
Error in Ops.data.frame(ff[1, ], ColContribs) :
‘==’ only defined for equally-sized data frames
保罗
浏览 0提问于2018-03-08得票数 0
1回答
我有一个文本文件，其中每个记录的长度都是不同的。我不关心有多少列和列分隔符。我只想让它们的长度相等，使用SSIS，可能是一个固定宽度的单列文件。我想为这些记录添加空间，这些记录与其他记录相比具有较少的字符强度。我不知道文件的最大长度是多少。
请与我分享一些知识。
谢谢!
浏览 0提问于2016-07-21得票数 1
我用R编写了以下非常简单的while循环。
i=1
while (i <= 5) {
print(10*i)
i = i+1
}
我希望将结果保存到一个数据帧中，该数据帧将是单列数据。如何做到这一点？
浏览 0提问于2021-11-05得票数 0
我有两个数据帧，如下: data frame df1 (单列)：
names
alpha beta
test1 test2
abc def
和数据帧df2 (也有一列)：
names
alpha beta (abc)
abc def d
abc def (xyz)
test1 test2
test1 test2 (a)
alpha beta d
alpha beta (1)
alpha beta (2)
我想要这样的输出，即代码将在df2中搜索df1值，并计算这些值的出现次数，以显示如下输出。
所需的输出数据帧(两列)：
names occurrence
alpha beta
浏览 0提问于2017-12-05得票数 0
回答已采纳
2回答
我有一个看起来很简单的问题，我还没能解决。我有一个由单列数据点组成的R数据帧，如下所示。我想将其子集成一个新的数据帧，其中包含基于先前数据点的值的数据点。
下面，举个例子，我想对前一个值大于.04的所有行进行子集。任何想法都将不胜感激。谢谢。
Price
[1,] -0.006666667
[2,] 0.040268456
[3,] 0.051612903
[4,] -0.006134969
[5,] 0.006172840
[6,] 0.006134969
[7,] 0.030487805
浏览 1提问于2013-04-03得票数 1
我有33个单列，每个列都作为一个数据帧工作： col1_df、col2_df、col3_df....col33_df 如何将它们连接到一个数据帧中？ 我的代码是 df = [col1_df, col2_df....col33_df], but the return is not a dataframe 有没有一个熊猫路线可以解决这个问题？
浏览 12提问于2021-01-12得票数 1
1回答
我在一个数据帧上使用df''.isnull()，我当前正在使用从CSV中拉出的数据帧。实践数据故意有很多缺失值和错误，然而，熊猫无法识别“道布”列中的缺失值，通过打开CSV并看到“道布”列下的空单元格来验证是否存在缺失值。 df['DOB'].isnull().sum()
Output: 0
浏览 85提问于2020-10-25得票数 2
回答已采纳
所以，我有一个这样的数据框架，
1 2 110 10 NA NA
2 3 101 100 NA NA
3 4 10 NA NA NA
3 2 110 100 101 NA
.................
现在，我想将此数据帧划分为110、10、101、100、10、101等单个文件。并且每个文件都包含出现在其中的前两列。例如，文件110将包含，
1 2
3 2
而文件，10将包含，
1 2
3 4
就像这样，我想把它分开。我知道如何根据列值对其进行划分，但由于文件包含多列，我不知道如何进行划分？任何帮助都将不胜感激。
我能够为单列创建的代码是，然后创建文本文件是，
X <
浏览 0提问于2014-09-24得票数 0
1回答
我有两个具有两个不同名称的数据集。 第一个数据帧'X_order‘有400行，有4列:订单号、订单号、订单量、订单权重。此数据框是一周内发生的订单列表。 第二个数据帧'X_SKU_weight‘有2列:SKU号，SKU权重。这大约有66行。这是SKU相对于其SKU编号的权重数据。 我需要用来自第二个数据帧的相应权重填充第一个数据帧的SKU权重列。请注意，第一个数据帧有时会重复相同的SKU，因为多个订单可能会订购相同的SKU。我已经尝试了不同的方法，比如fillna()，但不能根据确切的权重执行此操作。请指点一下。 PFA ?
浏览 15提问于2021-10-17得票数 0
假设我有一个数据帧，其中一列表示颜色，另一列表示形状。我想创建第三列，它是具有该颜色/形状组合的dataframe中的总行数。
浏览 0提问于2020-04-22得票数 0
我有一个包含列TS的单列dataframe df，其中
In [1]: type(df.TS.values[0])
Out[1]: pandas.tslib.Timestamp
我将列转换为datetime.datetime()类型
In [2]: import datetime
In [3]: df['TS'] = df['TS'].astype(datetime.datetime)
我想使用pd.to_sql()将此数据帧写入MSSQL2008数据库中的一个表中。因此，我运行以下命令。
In [4]: coltype = {'TS': sql
浏览 2提问于2015-10-09得票数 5
我有两个问题。Q1:如何通过从主数据帧中提取一些列来子集数据。例如，我使用dfac作为数据格式。
ac<-c("a","b","c","d")
dc<-c(1,4,4,3)
bc<-c(1,1,0,0)
dfac<-data.frame(ac,dc,bc)
我需要一个名为subdf的子集df，方法是从主dataframe "dfac"中提取列"ac", and "bc"。我怎么能在R里做到这一点？输出应
subdf ac bc
a 1
浏览 0提问于2020-04-17得票数 1
回答已采纳
1回答
我有两个表格的列向量:a= 650；854；956和B= 756；890；1057。
所需的输出是表格的单列向量:C= 650 756 854 890 956 1057
获得所需输出(没有任何for循环)的适当方法是什么？
我感谢你抽出时间。
诚挚的问候!
浏览 2提问于2018-11-27得票数 1
回答已采纳
2回答
副标题:让熊猫哑口无言，别再试图变得聪明了。
我有一个单列熊猫数据帧的列表(res)，每个都包含相同类型的数字数据，但每个都有不同的列名。行索引没有任何意义。我想把它们放在一个单一的，非常长的，单列数据框架中。
当我执行pd.concat(res)时，每个输入文件都会得到一列(以及加载和加载NaN单元格)。我尝试过参数(*)的各种值，但没有一个能达到我想要的效果。
编辑:样本数据：
res = [
pd.DataFrame({'A':[1,2,3]}),
pd.DataFrame({'B':[9,8,7,6,5,4]}),
pd.Data
浏览 5提问于2016-12-19得票数 7
回答已采纳
我正在使用condformat包对数据帧的每一列进行着色。我可以做单列，但不知道如何在不使用冒号的情况下申请所有列(因为它们动态变化)。
我使用了以下代码来实现单列的条件列着色
data(iris)
library(condformat)
dat<-iris[c(1:5,70:75, 120:125),]
condformat(dat) %>%
rule_fill_discrete(Sepal.Width,
expression = Sepal.Width > Petal.Length)
以上代码成功地更改了列(sepal.wid
浏览 1提问于2019-06-27得票数 2
回答已采纳
2回答
我有一个熊猫数据框架。有些条目等于-1。如何在数据帧中的每一列中找到-1的次数.基于这一数字，我打算删除这一栏。
浏览 3提问于2015-09-23得票数 0
回答已采纳
1回答
我有一个大约30000行的大数据帧和一个包含json字符串的单列。每个json字符串包含许多变量和它的值我想把这个json字符串分解成数据列
两行看起来像
0 {"a":"1","b":"2","c":"3"}
1 {"a" ;"4","b":"5","c":"6"}
我想把它转换成像这样的数据帧
a b c
1 2 3
4 5 6
请帮帮忙
浏览 244提问于2018-06-02得票数 2
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
