Python从导入csv列表中获取url的标题状态代码并打印

文章/答案/技术大牛

发布

1回答

python、python-requests

我是Python的新手，正在尝试从csv导入urls列表并检查每个urls的报头状态。到目前为止，我得到了以下输出urls列表的命令： import csvfrom bs4 import BeautifulSoupurl = " ".join(row)

浏览 12提问于2020-03-18得票数 0

回答已采纳

1回答

用BeautifulSoup或Pandas抓取表数据

python-3.x、pandas、web-scraping、beautifulsoup

我对使用python有点陌生，我被赋予了一项需要从表中抓取数据的任务。我也不太懂html。我以前从来没有这样做过，并且花了几天的时间研究了各种刮表的方法。url = from bs4 import BeautifulSoupsoup = BeautifulSoup(html

浏览 1提问于2020-11-17得票数 1

回答已采纳

1回答

(Python、BeautifulSoup)创建或修改不带锚点标记的锚点文本列表

python、list、web-scraping、beautifulsoup、python-requests

我是Python的新手，我正在尝试构建一个从网站提取一些文本并将其粘贴到Google电子表格中的脚本。文本是用标签包装在网站上的标题。我使用BeautifulSoup (也导入了pygspread )来提取标题，如下所示： target_url = 'WEBSITE URL' r = requests.get(target_url)soup.findAll(&

浏览 16提问于2019-12-24得票数 0

回答已采纳

1回答

年降水量总额

python、csv、pathlib、import-csv

如何编写一个读取PRCP列并对其中的所有值进行求和的程序？我们使用的是从路径库导入路径的导入csv。使用蟒蛇。

浏览 12提问于2022-06-18得票数 0

2回答

如何使用不同的ITEM_ID发送多个PUT请求

python、curl、python-requests

我试图更改项目的状态，但需要更改ITEM_ID，我已经暂停了一个产品，但是我有一个带有所有ITEMS_ID的csv，这是一个示例：这会更改特定项的状态，但我有一个带有所有item_id的csv。

浏览 7提问于2020-05-11得票数 1

回答已采纳

1回答

Python-3尝试遍历csv并获取http响应代码

python、python-3.x

我正在尝试读取包含长urls列表的csv文件。我需要遍历列表并获得抛出301、302或404响应的urls。在尝试测试脚本时，我得到了一个带有代码0的退出，所以我知道它是没有错误的，但它并没有按照我需要的方式运行。我是python的新手，并且使用文件，我的经验主要是ui自动化。如有任何建议，我们将不胜感激。下面是代码。read mode

浏览 10提问于2020-11-11得票数 0

4回答

使用Python获取SharePoint列表

python、sql、sharepoint、office365-restapi

我正在尝试用Python语言获取SharePoint列表的任何可能方法。我能够通过以下视频连接到SharePoint并使用Rest API获取XML数据：...但是不确定如何将列表数据导入python。最终目标是获得SharePoint数据并每天导入SSMS。这是我到目前为止所拥有的..from requests_ntlm import HttpNtlmAuth <

浏览 29提问于2017-03-20得票数 8

2回答

如何在csv文件中找到头的索引？

python、pandas、csv

假设我有一个csv列表，如下所示：我想知道B属于哪一列？换句话说，对于标题为B的列，我可以使用什么命令给我编号2？

浏览 3提问于2019-07-14得票数 1

3回答

如何在for循环中将数据附加到空列表中？

python-3.x、for-loop、python-requests

我有100个URL在我的csv文件中，我想知道这些URL是否有效，为此我导入了请求库。当我执行以下代码时，我可以看到“状态代码200”为每个网站打印。在这里，当我试图将URL附加到空列表时，代码会打印“这个网站不工作”。如何将这些URL分配给空列表？import requests import pand

浏览 8提问于2020-04-13得票数 2

1回答

不能添加认知:用户的组

amazon-cognito

目前，我正与科尼图合作开发AWS，用于用户管理，我认为不应该允许这个属性出现在标题中，如果没有，我能做些什么来解决这个问题？提前谢谢你的回答。下面是我使用的CSV文件<em

浏览 5提问于2020-12-23得票数 3

1回答

使用topicmodels (R)的LDA，如何在保留文档标题的情况下查看不同文档属于哪些主题？

r、topicmodels

我很欣赏Ben在这里的回答: LDA使用topicmodel，我如何才能看到不同文档属于哪些主题？手动在单独的文本文件中创建三个.txt文档，并将它们存储在~桌面/自然语料库目录中第一篇文件内容:名词自然界、自然母亲、地球母亲、环境；野生动植物、乡村第三个文档标题: bird.txt 第三个文件文本:喂鸟的

浏览 12提问于2018-01-30得票数 0

2回答

如何创建制造MLA引用的脚本？

python

我有一个文件夹，里面全是微软的.URL文件。我想把它们翻译成我论文的MLA引用列表。这是一个很好的Python应用吗？如何获取页面标题？我使用的是装有Python 3.1.1的Windows XP。

浏览 0提问于2009-11-28得票数 1

回答已采纳

3回答

过滤包含整数列表的python输出

python、csv、pycharm

我已经将csv文件导入到PyCharm中，并尝试打印各行中的特定列表，到目前为止已经成功。我有整数列表形式的输出。我试图过滤列表并仅打印大于特定数字(在本例中为500)的整数，但不知道如何以及在何处使用"if“条件。下面是我的代码： f =

浏览 11提问于2017-02-16得票数 1

回答已采纳

1回答

获取web文章信息(内容、标题...)来自多个web页面-python代码

python、python-3.x、web-scraping、newspaper3k

有一个python库- Newspaper3k，它使得获取网页内容变得更容易。[newspaper](https://github.com/codelucas/newspaper) 对于标题检索： import newspaperprint(a.title= Article(url) article.text 我想获取有关网页的信息(有时是标题，有时是实际内容)我的</

浏览 12提问于2021-01-11得票数 1

回答已采纳

1回答

Python:以字典形式读取.csv数据，并将数据作为字典打印到.csv文件中？

python-2.7、csv、dictionary、input、output

我正在编写一个python可执行脚本，它执行以下操作：我希望从.csv文件中收集信息，并将其作为字典读入python。这个.csv文件包含几列带有标题的信息，我只想提取特定的列(那些列有我想要的特定标题)，然后将这些列打印到另一个.csv文件中。我使用的是函数DictReader和DictWriter。我以字典的</e

浏览 1提问于2016-04-08得票数 0

回答已采纳

7回答

获取urls列表的HTTP状态代码的脚本？

bash、curl、http-status-codes

我有一个需要检查的URLS列表，看看它们是否仍然有效。我想写一个bash脚本来帮我做到这一点。有关这方面的更多信息，请参阅

浏览 38提问于2011-05-26得票数 93

回答已采纳

1回答

如何从谷歌阅读器中检索数据？

rss、feed、google-reader

从直接提要，我可以下载大约20个条目，但从谷歌阅读器，我可以得到5000最后的帖子。1.)身份验证(使用此post：)3.)使用python和python解析器获取内容。导入反馈解析器D= feedparser.parse(url) 打印d&

浏览 0提问于2012-01-30得票数 1

2回答

cURL跟踪重定向并获取所有URL

curl

我编写了一个简单的bash脚本，它获取一个url列表，并输出一个CSV，并为每个脚本提供一些数据: url、状态代码和目标url：do echo "$url , $urlstatus" >> &

浏览 0提问于2021-03-04得票数 3

回答已采纳

1回答

将列表或数组从.csv追加到模板.csv

python、pandas、csv、numpy、xlsxwriter

这看起来相对简单，但作为Python的新手，我可能需要一些指导。我希望导入一个.csv文件，并使用该.csv文件中列的numpy创建列表或数组。然后，我想获取这些列表或数组，并将它们附加到模板.csv文件的列中。一旦追加，我想将其另存为.xlsx。我想我将需要同时使用pandas和numpy (如果使用数组)。示例导入

浏览 0提问于2018-04-18得票数 0

1回答

在python3而不是python2上导入模块

python、python-2.7、import、module、package

我有一个具有以下文件结构的项目： test.py stuff.pytest.py的代码很简单：sys.path.append("/path/to/test")它使用python3 test.py愉快地运行，但不会在python2.7中运行，而且我阅读了许多关于这个主题<e

浏览 5提问于2015-11-19得票数 0

回答已采纳

点击加载更多