1回答
从数值特征中去除异常值
、、、
您好，我正在尝试从具有数字特征的列中删除异常值，但是当我执行代码时，整个数据集都被删除了。any1可以告诉我我做错了什么吗？ numerical_columns = data.select_dtypes(include=['int64','float64']).columns.tolist()
print('Number of rows before discarding outlier = %d' % (data.shape[0]))
for i in numerical_columns:
q1 = data[i].quantile(0
浏览 28提问于2021-01-29得票数 1
回答已采纳
1回答
我正在对电信流失数据集进行分析。我有4617个观测结果和17个变量。我正在使用Python。我有以下问题，
1)在正态检验的偏度和峰度检验中，两个变量不服从正态分布(值大于1)。我应该对这两个变量进行日志转换，还是对整个数据集进行日志转换？
2)用IQR方法对异常值进行检验时，近700个观测值为离群值。我不想删除离群点。我是否也应该应用日志转换来处理异常值？这是正确的方式吗？
3)我查过谷歌，他们说你可以用百分位数来限制异常值。处理离群点是一种好做法吗？
4)我的最终目标是应用所有的分类算法。我可以在日志转换后进行缩放吗？我们需要在日志转换之后进行缩放吗？没有异常值的树模型是可以的，但是想要为
浏览 0提问于2019-07-03得票数 3
1回答
我有包含三维点云的xyz文件。我想通过使用jupyter笔记本来可视化3d图像和消除空白。虽然我尝试了许多不同的方法来可视化和消除噪音，但我不知道如何可视化它。我使用numpy和matplotlib作为我的库。由于我在网上找不到足够的关于python中的点云的信息，我真诚地需要帮助来解决这个问题。
浏览 120提问于2020-11-02得票数 1
我在ggplot2中有以下框图，我将用geom_jitter绘制的点添加到该框图中
p <- ggplot(mtcars, aes(factor(cyl), mpg)) + geom_boxplot(aes(colour=factor(cyl))) + geom_jitter(aes(color=factor(cyl)))
我根据factor(cyl)对各个点进行了着色，效果非常好。但是，有些点仍然显示为黑色。这些是什么？这些是箱线图的异常值吗？如果是这样的话，这就很奇怪了，因为其中一些距离中值的距离就像彩色点(不是异常值)一样远，但这可能是由于geom_jitter的随机性造成的
有人
浏览 1提问于2013-07-10得票数 2
回答已采纳
2回答
我是R的新手，我尝试使用一个函数来测试包含600多个变量的大型数据帧中的异常值，除了最后两列之外，所有变量都是数字。我尝试了outliers包中的离群值函数，一次测试一列，最后得到了一个我无法使用的数值向量。有没有更好的方法来识别数据帧中的所有异常值。
myout <- c()
for (i in 1:dim(training)[2]){
if (is.numeric(training[,i])) {
myout <- c(myout,outlier(training[,i])) }
}
浏览 2提问于2013-03-05得票数 1
select tick_time, nano_secs,
concat( to_char(tick_time, 'MMDD HH24:MI:SS.US'),
to_char(nano_secs, '000') )
from ticks
order by tick_time, nano_secs limit 100;
我想像上面那样连接两个字符串，但是它总是在两个字符串之间添加一个空格字符。
如何防止它这样做？
谢谢!
浏览 0提问于2022-09-16得票数 0
回答已采纳
从numpy 1.13.3更新到1.14.2后，我在scipy内部遇到了一个异常
scipy.optimize.minimize调用
scipy.optimize.minimize(minimization_function, weigths,
method="SLSQP",
args=(...),
constraints=OPTIMIZER_CONSTRAINTS,
bounds=(bo
浏览 0提问于2018-03-20得票数 0
我试图使用ArcMap中的python字段计算器来做一个简单的计算，其中：
有两个输入变量，分子和分母。
如果分子为零，则返回零。
否则，分子除以分母，乘以100。
我试过的密码：
def getScore(num, den):
if num == 0:
return 0
else:
return (num/den) * 100
当我运行这个脚本时，我没有收到任何错误，但是“errors”语句没有被返回。
分母中没有零，所以div/0不是问题。输入字段都是‘长’整数，目标字段是‘双’。
我附上了几张图片，显示了在python中
浏览 3提问于2017-05-17得票数 2
回答已采纳
在尝试社交应用-django (2.1.0)时出错，引发的错误是：
'AsgiRequest‘对象没有属性’会话‘
运行通道1.1.8，Django 2.0.3，asgi-redis 1.2.0，python 3.6
通过python (开发环境)运行，而不是uwgsi或nginx。
当试图访问/social/login/google-oauth2/ (使用google帐户进行身份验证)时会发生这种情况。
我读过关于将MIDDLEWARE_CLASSES更改为中间件的文章，但是我们使用Django >=1.9已经有一段时间了，所以它已经被更改了。
回溯如下
浏览 0提问于2018-04-25得票数 2
回答已采纳
1回答
我有一个线程模块，它将调用设备上的ssh函数
ssh_conenction.py模块
import paramiko
import os.path
import time
import sys
import re
# ask the user to input the path of the credential file
user_file = input("\n* Enter user file path and name (e.g. D:\\MyFiles\\file.txt): ")
# check if the file is exist or not
if os.
浏览 6提问于2021-03-06得票数 0
2回答
我有这两个数组：(创建了两个随机示例数组)
x = [5,12,24,44,22,32,22]
y = [8,14,26,47,44,35,23]
这两列是相关的，x4和y4是这些数据的异常值。
如何通过数据帧返回列或列号，其中包含异常值？
编辑: Aplogoies。以下是数据框架：
df = pd.DataFrame({'x':x, 'y':y})
浏览 1提问于2021-10-01得票数 1
回答已采纳
4回答
时间序列:离群点检测
、、、、
我有时间序列数据，看上去像下面提到的图表。
我熟悉根据标准差和中值消除异常值的方法。这些方法的缺点是它们不考虑相邻的数据点。
例如，在下面显示的数据中，我不想删除那些与平均值相差最大或标准差的值。我想移除在红色中圈起来的点。其他极端值在该地区是常见的，不应被检测为孤立点，因为这些数据点附近有相似的数据点。
是否有任何方法来移除这些点，或者是否有任何python库可以用来删除这些点。正常的标准偏差和中值滤波器不能很好地解决这些问题，因为它们也消除了没有被圈住的点。
📷
浏览 0提问于2019-06-07得票数 3
我有一些极端的异常值抛弃了我的回归模型，我使用If-Then-Else语句删除了它们。然而，SAS完全消除了这些数据点，并在剩余的数据点中发现了新的异常值。有没有一种方法可以从分析中删除异常值，而不会在混合中投入更多？
我计算了Q3 + 1.5 * IQR，并按如下方式使用该值：
Data lungcancer; input trt surv age sex @@;
/* create a new variable diff */
diff = surv - 365;
/* create a new categorical variable resp */
If diff > 0 th
浏览 3提问于2016-12-03得票数 0
1回答
我正在努力清除这个captcha中的线噪声，这样我就可以实现一个读取它们的算法。然而，我发现使用一些技术，例如开放CV阈值和来自pil.Image的一些资源，使AI能够读到它是有一些困难的。我还尝试了一种算法“分割”图像，这给了我一个更好的结果，但仍然远远超出预期。我想知道是否有一种办法可以有效地消除像这样的帽子发出的噪音。(我在用python)
最初，Captcha看起来如下所示：
使用OpenCV +枕头进行处理后，我得到了以下内容：
稍后，使用"chop方法“，这就是我们所拥有的：
然而，我需要一个更好的最终形象，但我认为这种方法组合是不合适的。还有更好的选择吗
浏览 8提问于2022-04-04得票数 0
我试图在python中求解下面的多项式。其中一些常量(2.11和.125567481)是动态的，并将在程序中更改。我需要一种方法来计算这个方程在python中的解。我试过使用Sympy，但它一直在执行，但始终没有想出解决方案。Wolfram给出了4种解决方案，其中3种是复杂的，1种是真实的。我只需要真正的那个。在python中有什么方法可以有效地求解这个方程吗？在mathematica中很容易做到，但我无法找到一种在python3中高效地实现它的方法。
(要将它与symPy的函数结合使用，我必须操纵方程，使其等于零。它仍然没有找到孤子。)
浏览 4提问于2017-10-23得票数 2
回答已采纳
我在windows 10上使用带有Debian发行版的wsl2。我使用pyenv添加python。每次我运行python脚本时，终端都会打印python解释器路径和工作目录，这一直让我很烦。有什么要移除的吗？如果没有，有人知道如何隐藏这个吗？
浏览 2提问于2021-04-02得票数 0
回答已采纳
1回答
3d点的局部曲面拟合
、、、、
我有一组三维点，但它包含一些异常值。我的目标是将原始的3d点集映射到“平滑”的3d点集，并去除异常值。我选择的方法是局部曲面拟合。我在我的应用程序中使用C++，所以我想知道这个算法是否已经在某个库中实现了(理想情况下是在opencv中)？
浏览 0提问于2016-02-16得票数 1
我不能把它翻译成Python/OpenCV。….请帮帮…
cvClose(mask, mask, se21);
cvOpen(mask, mask, se11);
浏览 2提问于2012-12-11得票数 0
回答已采纳
single_true_false = digits // 10**single % 10给了我一个
unsupported operand type(s) for //: 'str' and 'int'
异常。有人知道怎么解决这个问题吗？
另外，是否有一种更有效的方式来编写我的代码呢？我对python很陌生，所以我非常感谢您的帮助。
with open("test.txt", "r") as file:
open_file = file.read()
satisfied = 0
not_satisfied
浏览 9提问于2022-02-14得票数 1
回答已采纳
在我的图中，x轴是日期时间格式，y是相应的观测值。有一些异常的集群，我可以在视觉上识别出来。我试图用图中的‘`Brush/Select data’工具点击异常，但当我试图复制剪贴板上的数据并粘贴到记事本时，数据不是datetime格式，我无法解释它。
我想从plot中选择数据，并从数据集中删除索引。我提供了一个样本，我从画笔工具复制的数据。
56.5868518518519 463.32834344035
56.6596759259259 463.337
56.6603240740741 463.335
56.6608217592593 463.326
谢谢
浏览 6提问于2019-09-21得票数 0
1回答
当我使用matlab时，我使用的是filloutliers方法。我想知道在C++中是否有类似的东西。 换句话说，我想知道在某个库中是否有任何类型的内置方法可以检测数据集中的异常值并替换它们。
浏览 50提问于2019-09-26得票数 0
回答已采纳
正如我在标题中所说，导入line_profiler会导致分段错误。我是运行python3.9.7/conda-锻造在macbook m1最大。有人建议我怎么解决这个问题吗？
% python
Python 3.9.7 | packaged by conda-forge | (default, Sep 29 2021, 19:24:02)
[Clang 11.1.0 ] on darwin
Type "help", "copyright", "credits" or "license" for more information.
浏览 6提问于2021-11-15得票数 0
回答已采纳
1回答
我想知道是否有任何python实现的阴影删除图像。我在网上搜索过，没有与python相关的现有资源。或者有人能给我任何建议。
如果你反对这个问题，请给我一些理由，这样我就可以改进我的问题了。
感激不尽！
浏览 5提问于2016-02-13得票数 0
回答已采纳
取此代码：
import itertools as it
import numpy as np
data = ['a','b','c','d']
dw = np.array([1, 3], dtype=np.int64)
print(list(it.islice(data,dw[0],dw[1],1)))
在Python2.7上，它按预期打印['b', 'c',]。
在Python3.6上，它抛出一个异常：
ValueError: Stop argument for islice() must be
浏览 5提问于2017-06-01得票数 14
回答已采纳
1回答
我正在寻找一个python代码，需要一系列的BMP文件，并合并成Avi文件(并从用户获得每秒的参数帧)
有没有人知道从哪里开始？
Ariel
浏览 0提问于2010-02-15得票数 0
1回答
上下文
我使用OData和Model验证来生成错误消息。当试图获取验证错误的实际原因时，我将提取异常消息。
我有以下代码：
foreach (var field in modelState)
{
details.AddRange(field.Value.Errors.Select(error => new Error
{
Target = field.Key.ToCamelCase(),
Message = error.ErrorMessage,
浏览 5提问于2017-06-21得票数 0
2回答
我有一个正在使用FFT的数据数组(大小为128)。我试图通过FFT频谱找到数据的频率。问题是公式freq = i * Fs / N似乎不起作用。我的数据非常嘈杂，我不知道这是因为我的数据嘈杂还是因为我做了其他错误的事情。以下是我的原始数据：
这是从变换中得到的光谱：
在输出数组中，我在索引4和128处得到了两个大小相等的最大峰值。数据的频率应该在1.1333 Hz左右，但当我使用公式时，我得到了5-6或完全错误的值：
freq = i * Fs / N;
其中i是最大幅度峰值的数组索引，Fs是以Hz为单位的采样率，N是数据大小。
使用我的数据，您得到的freq = (4 *
浏览 2提问于2015-11-06得票数 0
2回答
下面的示例来自OpenCv documentation1。
Mat H(100, 100, CV_64F);
for(int i = 0; i < H.rows; i++)
for(int j = 0; j < H.cols; j++)
H.at<double>(i,j)=1./(i+j);
这可以很好地工作。但是在最后一行中，什么是./ operator？如果我把它替换成/，它会给我一个浮点异常。
所以，在这两种情况下，当i和j为0时，我们都有无穷大；那么为什么我们在第二种情况下会得到浮点异常？
浏览 0提问于2017-10-01得票数 2
我正在使用scipy.optimize.minimize进行优化，并尝试使用以下方法：“牛顿-CG”、“狗腿”和“信任-ncg”。据我所知，对于这些方法，需要目标函数的雅可比矩阵。但是，建议，如果jac设置为False，则将以数字方式计算梯度。
所以我试着像这样调用函数：
scipy.optimize.minimize(fun,x0,method='Newton-CG',jac=False,options={'disp':True}
当我调用它时，我得到以下错误消息：
File "/usr/lib/python2.7/dist-packages/sc
浏览 0提问于2015-11-26得票数 5
我采访街上的人，用录音机录下谈话。通常情况下，当我稍后回放时，街上的噪音会使我很难弄清楚他们在说什么？
是否有一个理想的插件为Ableton，Audacity，或Foobar，或一个独立的应用程序，以帮助清理音频？
浏览 0提问于2015-08-02得票数 0
1回答
对于一个uni任务，我已经给出了在python中制作自己的旋转算法的任务。到目前为止这是我的密码。
import cv2
import math
import numpy as np
class rotator:
angle = 20.0
x = 330
y = 330
radians = float(angle*(math.pi/180))
img = cv2.imread('FNAF.png',0)
width,height = img.shape
def showImg(name, self):
浏览 0提问于2018-11-21得票数 6
回答已采纳
我试图在我的Linux上释放空间。在寻找占用磁盘空间的内容时，我注意到Matlab2020b和matlab2021a占用了大量的磁盘空间(约60 GB)。我在编程时根本不使用Matlab。我通过VScode与使用fortran程序的som模块一起使用Python。卸载Matlab会影响我的Python编程吗？如果没有，我如何卸载两个matlab版本？
浏览 0提问于2022-03-31得票数 0
我在Linux中使用python2.7。来自。我发现python在str中每个字母表使用一个字节，而在Unicode字符串中使用4个字节。那么为什么我在输入'1' == u'1'之后会得到True。
在python2中也有类似的事实：
In [1]: a = {}
In [2]: a['1'] = 1
In [3]: a[u'1']
Out[3]: 1
浏览 0提问于2020-11-12得票数 2
2回答
我无法摆脱在我的页面顶部的主体标签上的白色空白。我将添加必要的.body格式，但它仍然存在，并且由于某种原因，我的检查器仍然显示默认的8px填充。为什么身体不会捡起来？
@import "bootstrap";
@import url(http://fonts.googleapis.com/css?family=Lato|Open+Sans+Condensed:300);
.body {
margin:0px;
}
.container-top {
text-align: center;
font-family: 'Open Sans Co
浏览 0提问于2014-04-22得票数 0
回答已采纳
1回答
从不同类型的熊猫中移除野值
、、、、
目前我正在研究一个回归问题，我在模型的性能方面面临一些问题。为了有一个更好的表现，我有一些离群点，我想删除。
问题:从包含不同类型数据的数据中删除异常值。
DF看起来像：
df.dtypes
CONTRACT_TYPE object
CONTRACT_COC object
ORIGINATION_DATE datetime64[ns]
MATURITY_DATE datetime64[ns]
ORIGINAL_TERM
浏览 0提问于2019-07-10得票数 1
回答已采纳
我正在运行我的，作为我的GitHub操作CI的一部分，它工作了相当一段时间。但今天，它不再抱怨这个错误：
Input Notebook: 03_Pcap.ipynb
Output Notebook: /tmp/ipynb/03_Pcap.ipynb
Traceback (most recent call last):
File "/opt/hostedtoolcache/Python/3.10.2/x64/lib/python3.10/site-packages/ipython_genutils/ipstruct.py", line 132, in __getattr__
浏览 19提问于2022-01-30得票数 2
回答已采纳
我正在从变量构建struts2参数值，在一种情况下，它可以工作，在另一种情况下，它不能工作。
<result name="WidgetList" type="redirectAction">
<param name="actionName">actList</param>
<param name="object">Widget</param>
</result>
和Action映射：
<action name=&
浏览 2提问于2015-08-21得票数 0
2回答
我有一个电子表格，其中包含以下格式的数据：
Col1 Col2
ROW1: 21211 Customer 3873721
ROW2: 101111 Customer 2321422
ROW3: 91214 Customer 2834712
ROW4: 231014 Customer 3729123
我需要能够创建一个宏，该宏遍历每一行并确定组成row1数据的字符数。
例如：
如果包含在第一个单元格或ROW1中的数据总共由6个字符组成，那么这将保持不变。如果它由5个字符组成，那么需要在它的前面添加一个零
浏览 1提问于2015-01-20得票数 0
回答已采纳
我是机器学习方面的新手。我试图使用python StandardScaler类对我的输入、培训和测试数据使用特性缩放。但是，当我看到缩放值时，有些值是负值，即使输入值没有负值。这是正常还是我在代码中遗漏了什么。下面给出了用于特性缩放的相关代码。
from sklearn.preprocessing import StandardScaler
sc = StandardScaler()
train = sc.fit_transform(train) //train contains training feature matrix
test = sc.transform(test) //tes
浏览 2提问于2017-12-25得票数 3
回答已采纳
3回答
孤立点检测的自动化
、、、
我正在研究一个问题，即异常值检测的自动化。为此，我需要一种算法来检测异常值。
我读过关于z分数和分位数范围的文章。但z score只适用于正态分布的数据。并且不确定分位数之间的范围是否适用于所有类型的数据(即使它遵循高斯分布、泊松分布)。我也读过关于DBSCAN的文章，但不知道这种方法的可靠性。
有没有人能推荐一些我可以用来自动化异常值检测的Python算法或包？
我正在寻找一些算法，或者甚至一篇研究论文就可以了，稍后我可以用Python编写代码。
作为参考，下面是我必须找到异常值的数据示例之一。
month Units Sold
1 23178.78
2 23547.41
3
浏览 0提问于2019-04-26得票数 1
我搜索了表达和陈述之间的区别，然后提出了一个问题。
在C或java中，我可以像这样在if语句中赋值变量。
int a;
// someFunc returns an integer value
if ((a=someFunc()) == 1) {
// do something
}
相反，python不允许这样做。
if (a = someFunc() is 1):
# do something
当然，遵循PEP 572，在python3.8之后我可以使用它，但是应该使用:=符号。
但是，a=someFunc()不是表达式，而是语句，在执行后不返回任何内容。对吗？
因此，pyt
浏览 1提问于2020-09-24得票数 1
回答已采纳
1回答
我有一个关于python图像处理的问题，有没有什么方法可以检测到水印并删除或删除水印？
对于ex。就像这张图片
谢谢,
浏览 0提问于2017-04-18得票数 1
为了将一个文件从我的android设备的文件系统发送到一个服务器，我使用cordova 3.5和以下代码(因为您可以读取该代码，该文件位于我的下载目录中)：
receivedEvent: function(id) {
window.requestFileSystem(LocalFileSystem.PERSISTENT, 0, fsSuccess, fail);
}
function fsSuccess(fs){
fs.root.getDirectory("Download", {create: false, exclusive: false}, doDirector
浏览 1提问于2014-08-11得票数 0
回答已采纳
def check_isnull(self):
df = pd.read_csv(self.table_name)
for j in df.values:
for k in j[0:]:
try:
k = float(k)
Flag=1
except ValueError:
Flag = 0
break
if Flag==1:
QMessageBox.information(self, "Information",
浏览 8提问于2022-04-26得票数 1
我已经在Ubuntu16.04LTS上安装了软件包python-numpy。不幸的是，这个包坏了：
>>> import numpy
Traceback (most recent call last):
File "<stdin>", line 1, in <module>
File "/usr/lib/python2.7/dist-packages/numpy/__init__.py", line 180, in <module>
from . import add_newdocs
File
浏览 0提问于2016-06-23得票数 3
我正在尝试将KMeans(Scikit-learn)应用于下面提到的数据。
。
我已经看到了集群中显示Float64值的足够多的例子。我想知道的是，在df[Description ]列上是否可以进行聚类，其x和y轴为经度和纬度。
我的代码看起来是这样的。
from sklearn.cluster import KMeans
import matplotlib.pyplot as plt
import numpy as np
import matplotlib
from sklearn.preprocessing import LabelEncoder
import pandas as pd
浏览 0提问于2016-12-17得票数 2
我试图执行中如下所示的查询，但是我得到了这个错误
将数据类型nvarchar转换为数值异常
查询：
SELECT TOP 100
CASE WHEN ISNUMERIC(SUM(CAST([dbo].[Orders].[CustomerID] AS DECIMAL (38, 4)))) = 1
THEN CAST(SUM(CAST ([dbo].[Orders].[CustomerID] AS DECIMAL (38, 4))) AS INT)
ELSE NULL
END AS [Column1]
FROM
浏览 1提问于2018-03-03得票数 3
回答已采纳
我正在用75个样本构建一个RandomForestRegressor。Y(在train_test_split之后)的分布如下。(蓝色列车和红色测试)
📷
保持test_size=0.3 (稍等)，并在训练集上执行GridSearchCV，并使用生成的best_params_初始化一个新模型，我将得到一个0.83的测试分数。
📷
但是当我第二次运行这个测试(另一次随机测试，火车分裂)时，准确度甚至会下降到与0.35一样低。对于这个模型，我重复了分数检查(R^2) 100次，下面是它的分布。
sco =[]
for i in range(0,100):
X_train, X_test, y
浏览 0提问于2023-01-13得票数 1
1回答
我很难获得由sqlalchemy调用的存储过程返回的结果，我看到即使存储过程返回的是一个整数sql alcehmy。结果集设置为无，这导致了一些问题，有人能告诉我发生了什么事吗？
CREATE PROCEDURE [SYSDATA].[getCertificateInstallStatus]
@DVSystemName [varchar](max)
AS
BEGIN
declare @system_state int = (SELECT state FROM SYSDATA.certificate where DVSystemName = @DVSystemName)
if @system_
浏览 2提问于2020-03-26得票数 0
我有一个用于静态S3托管站点的api端点。S3站点的域名为: www.mysite.com
我的应用程序接口(django)运行在域名为: api.mysite.com的站点上
当我在我的站点上使用我的登录按钮并使用正确的用户名/密码登录时，django会返回一个带有Set-Cookie的响应，但是浏览器没有设置任何Cookie。你可以在下面看到完整的回复，
Request URL:http://api.mysite.com:8000/api/form/login/
Request Method:POST
Status Code:200 OK
Request Headersview sourc
浏览 3提问于2013-05-14得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
