如何使用Python3从sharepoint抓取文件
从SharePoint抓取文件可以使用Python3中的SharePlum库。SharePlum是一个用于与SharePoint进行交互的Python库，它提供了许多方便的方法来访问和操作SharePoint中的文件和数据。
以下是使用Python3从SharePoint抓取文件的步骤：
- 安装SharePlum库：
- 安装SharePlum库：
- 导入所需的库和模块：
- 导入所需的库和模块：
- 配置SharePoint连接信息：
- 配置SharePoint连接信息：
- 创建SharePoint连接：
- 创建SharePoint连接：
- 获取文件列表：
- 获取文件列表：
- 下载文件：
- 下载文件：
以上代码将从指定的SharePoint文件夹中获取文件列表，并将每个文件下载到本地的指定路径。
注意：在使用SharePlum库之前，确保已安装所需的依赖库，如requests、requests_ntlm等。
这是一个使用Python3从SharePoint抓取文件的基本示例。根据实际需求，你可以进一步扩展代码以满足特定的业务需求。
相关·内容
我们目前使用PowerBI通过'Source = SharePoint.Files(‘)连接到sharepoint上的CSV文件。
我们现在需要将这些文件放入数据仓库，但我找不到文件sharepoint连接器，只能找到sharepoint列表连接。
有没有办法使用数据工厂从sharepoint抓取文件，我只需要将它们加载到Azure SQL数据库中？
谢谢
浏览 2提问于2020-08-21得票数 0
我有一些.py文件，我想在Docker镜像中运行它们。
但他们需要抓取飞溅的Docker镜像才能正常运行。我如何在运行scrapy-splash的同时，在Docker容器或镜像中运行这些.py文件？我计划在VPS服务器上运行它。
浏览 3提问于2018-05-23得票数 0
1回答
我是，在python中使用漂亮的using和Selenium来抓取网。在ubuntu中，当我运行像python3 filename.py这样的python文件时，我无法在同一个终端中执行其他一些任务，直到那个python脚本完成它的执行。
有没有任何方法可以让我从终端运行python文件，然后使它独立于它。这样，当python文件在后台执行时，我可以在同一个终端上工作。
我将感谢你的回应。
浏览 2提问于2020-04-18得票数 1
回答已采纳
我正在使用SharePoint搜索爬行一个外部网站，这是由标准的超文本标记语言文件组成的。似乎我遗漏了很多功能，因为文件不是存储在SharePoint本身中，也没有自定义的元数据、列和托管属性。
是否可以在SharePoint抓取的HTML文件中创建标记并将其用作托管属性？
浏览 0提问于2011-01-11得票数 0
回答已采纳
2回答
我希望sharepoint网站允许用户在已知的RSS提要集合中搜索内容。我在概念上想出了几种方法来做到这一点
抓取它们的源源(耶！)
将全文拖到我的sharepoint站点，然后让我的爬虫抓取它。
利用现有索引(如google)
按需搜索全文，使用类似google实用工具的工具(我的偏好)
因此，我是否可以从我的sharepoint站点允许用户从几十篇名为rss提要的文章中搜索全文？
谢谢
加里
浏览 3提问于2009-06-08得票数 2
我成功地打开文件并抓取已发布的sharepoint文件的内容。 然后，我尝试获取一个历史文件，但失败了。 这是可行的:站点地址：https://domain.sharepoint.com/teams/Foldername FilePath: /Freigegebene文档/常规/文件名 这不是:站点地址：https://domain.sharepoint.com/teams/Foldername FilePath: /_vti_history/1024/Freigegebene Dokumente/常规/文件名 这是可能还是不可能？ ?
浏览 22提问于2021-04-16得票数 0
回答已采纳
我是SharePoint Online的新手，但通过谷歌没有找到任何东西:我在我的文件系统和云存储上存储了大量文件(读取: to )，并希望访问它们的元数据以进行搜索。在不上传到SharePoint Online的情况下，这是可能的吗？还应该可以“同步”爬行文件夹的层次结构，这样我就可以在SharePoint中单击文件夹结构。我不想存储这些文件的内容(出于存储空间的原因)。
这就像在SharePoint中有一个同步文件夹，其中的文件是可搜索的，但它们只是某种快捷方式，没有内容。
我曾想过创建某种定时作业来爬行文件系统，并在SharePoint中创建包含元数据和文件链接的空文件，但这对我来说似乎
浏览 0提问于2015-07-07得票数 0
我正在尝试让SharePoint 4.0.4连接器在SharePoint中只抓取一些站点。所有站点都在同一个web应用程序中。我只想抓取一些网站，而不是其他网站。
例如，假设我的SharePoint web应用程序位于。然后假设我有3个站点：，和。
我可以使用什么开始和跟随模式来只抓取和？我不想遍历或索引。
我的连接器运行在名为connector.mysite.com的服务器上的4040端口上。
我找不到任何说明如何设置SharePoint 4.0连接器模式的文档。我已经有了安装指南，但它根本没有讨论爬行。如果你有一些文档，请寄给我。
谢谢。
浏览 1提问于2015-05-01得票数 0
2回答
这是我想要抓取的网站：
我不知道如何从URL中抓取JSON文件并打印出内容。我试着到处阅读，但我得到的最多的是这段代码，当我运行它时，它不工作：
import requests
import json
url = "https://s2.coinmarketcap.com/generated/search/quick_search.json"
r = requests.get(url)
cont = json.loads(r.content)
print(cont)
浏览 0提问于2018-05-15得票数 2
1回答
我是Python的初学者。我试着从我的控制台上抓取一些产品信息。当我来到访问者详细信息页面时，我发现每次单击搜索按钮时cookie都会发生变化。我发现每个请求的cookie都会发生变化。我不能像从其他页面抓取数据那样抓取数据，这些页面的cookie在一定时间内是固定的。
在比较cookie数据后，我发现这里只有3个键值对发生了变化。我认为这3个值导致我无法抓取数据。所以我想知道如何处理这种情况。
浏览 1提问于2020-09-01得票数 0
我在谷歌上没有找到太多关于这一点，使用Microsoft.SharePoint连接到SharePoint。
我正在寻找的是简单地查询sharepoint并迭代它上的每个项目，检查每个项目的文件大小，并注意项目是否超过阈值。
除了在WebBrowser对象中加载sharepoint和抓取屏幕之外，还有什么方法可以做到这一点吗？
有没有人有这个链接？
浏览 0提问于2016-02-26得票数 0
我正在尝试从sharepoint获取最近的文件，每月更新一次。我希望直接从sharepoint获取并进行分析，而不是手动在本地下载文件。
我的sharepoint url如下所示：
其中，abc是我的组织名称，如apple、wipro等。
我试着点击这个链接：
## Sharepoint access
## pip install Office365-REST-Python-Client
from office365.runtime.auth.authentication_context import AuthenticationContext
from office365.sharepo
浏览 181提问于2020-05-13得票数 0
我已经在我的机器上成功安装了Sharepoint 2010和FAST Search for Sharepoint 2010。抓取sharepoint站点似乎运行良好，但是抓取本地文件系统总是失败，如下所示：
The start address unknown://win-fs/C:/Users/ravish/FAST_TEST_SET cannot be crawled.
Context: Application 'FAST_Content_SSA', Catalog 'Portal_Content'
Details:
Item not crawle
浏览 21提问于2011-03-06得票数 0
回答已采纳
有没有可能通过Sharepoint API或任何其他方式以编程方式开始抓取给定的内容源(比如文件共享)？
浏览 0提问于2011-09-29得票数 0
回答已采纳
我有一个非常标准的WinSCP SFTP脚本，它可以抓取一些文件并将它们保存到SharePoint库中。脚本是从VBA调用的，所以我不能将lcd留空。对于不同的用户，库的位置略有不同，所以我需要一种获得脚本位置的方法。
脚本存储在同步的SharePoint文件夹中：%USERPROFILE%\User-Path\FTP\
对于其他用户，该路径可能是%USERPROFILE%\UserPath-FTP\FTP。
@echo off
"C:\Program Files (x86)\WinSCP\WinSCP.com" ^
/command ^
"open sft
浏览 5提问于2022-07-19得票数 1
回答已采纳
1回答
我的团队一直在使用Sharepoint 2010抓取大量外部网站。
Sharepoint web爬虫没有提供足够的可配置性，因此我们一直使用快速web爬虫来运行爬虫。
但是，在Sharepoint 2013中，FAST web crawler似乎已被弃用/与Sharepoint web crawler合并。
我找不到关于如何配置2013 Web Crawler组件的重要文档。它比2010年的Sharepoint爬虫更强大吗？
浏览 2提问于2013-01-17得票数 1
我使用此子例程从特定类子节点中抓取文本 elements = WebDriverWait(self.driver, 10).until(EC.presence_of_all_elements_located((By.CLASS_NAME, "gamesRow")))
for a in elements:
self.formatBets(a.text) 在应用.text属性之后，转换后的字符串如下所示： May 05 1
NASHVILLE PREDATORS
-1�+150
o5�+110
-185
More +
4:08 PM
2 COLUMBUS BLUE J
浏览 71提问于2021-05-06得票数 0
我要将MOSS 2007服务器中的用户配置文件导入到我的SharePoint 2010服务器中。
有没有人可以建议我怎样才能达到同样的效果。
我们是否可以使用SharePoint 2010中用户配置文件服务应用程序中的配置同步连接中的业务数据连接导入用户配置文件。
我这么做的原因：
我想在SharePoint 2010中抓取MOSS 2007用户配置文件数据库。
敬请指教！
谢谢
科坦·甘地
浏览 1提问于2010-08-06得票数 1
2回答
我在安装Python 2.7时遇到了问题。
因为我是在我的一门课上学习Python的，所以我首先学习了Python3，目前已经在我的计算机上安装了Python 3(我正在使用Windws 7)。
我需要安装Python27，因为我想学习如何使用Django，而它们目前只与Python2兼容。
在我安装了Python 2.7之后，当我尝试运行Python 2.7时，我一直收到一个语法错误：
file=sys.stderr语法错误:无效语法
我知道是因为它从我当前的Python3路径中抓取了这个文件。
那么我该如何解决这个问题呢？如何让我的Python27.exe从Python27路径而不是Pyt
浏览 1提问于2012-06-15得票数 2
2回答
我有一个网页，我的结构是这样的
<div>
<ul>
<li class=tree>
<a> </a>
</li>
</ul>
</div>
我想抓取所有这些超链接并放入NOw的文本文件中
浏览 2提问于2011-06-06得票数 0
嘿，伙计们，我需要你们的帮助，我在网络抓取领域迈出了我的第一步。当我试图关注youtube上的一个网络抓取教程视频时，我收到了这样的警告。我已经安装了soupsieve和BeautifulSoup (pip install等)，我甚至从我正在抓取的网站上得到了正确的结果，但仍然得到了这个恼人的警告，我该怎么办？我使用的是python 3，pycharm。
from urllib.request import urlopen as uReq`enter code here`;
from bs4 import BeautifulSoup as soup;
my_url = 'https:
浏览 0提问于2019-05-15得票数 2
我在SharePoint 2007 web部件的目标受众中工作，添加AD组作为目标受众存在问题，因为我无法在“分发/安全组”下找到AD组。
SharePoint和AD之间的连接已经配置好了，因为AD组或AD用户能够在SharePoint (人员和组)中查找和添加，所以无法在web部件的目标受众中找到它。
更新：
我想添加的用户配置文件已经完全抓取，所有的用户在AD组已经导入。但问题仍然存在。
浏览 3提问于2012-03-29得票数 1
这是我的第一个Python脚本。我目前正在尝试从多个url中抓取嵌入到HTML表中的数据，这些url位于一个名为url-list.txt的文件中。我已经成功地使用Python的Panda库从一个页面中抓取了所需的数据，然而，我正在尝试执行一个简单的for循环，从url-list.txt文件中加载每个url，以便从剩余的100个左右的url中抓取数据。这是我到目前为止所得到的。您可以看到我在for循环中的尝试被注释掉了。任何帮助都将不胜感激。
import bs4 as bs
import urllib.request
import pandas as pd
#url_list = "
浏览 4提问于2019-06-08得票数 0
1回答
我是python的新手，在运行python请求包时遇到了问题。我到处寻找答案，但似乎大多数问题都是通过安装requests包的说明来回答的，您会看到我已经这样做了。 在我开始之前，我的规格如下： 操作系统: Python Catalina 10.15.7外壳: iTerm2内部版本3.3.12Python版本:系统:2.7.16Pyenv: 3.9.0 用例:我正在尝试网络抓取，并试图编写一个简单的程序，从当地汽车经销商的网站上抓取一些数据(例如，抓取列出的$20000以下汽车的信息)。 在启动项目之前，我使用以下命令安装了request包： % pip3 install requests
浏览 17提问于2020-10-20得票数 0
我正在尝试使用我的sharepoint登录凭据将文件从linux上载到sharepoint。我使用cURL实用程序来实现这一点。上传成功。
使用的命令是: sharepoint -k选项用于克服不安全的sharepoint站点的证书错误。
然而，这个上传的文件从我的登录显示在sharepoint的“已签出”视图(绿色箭头)中。因此，对于来自其他登录帐户的用户，此文件不存在。
我的登录名具有对sharepoint的写访问权限。
关于如何使用cURL将此文件“签入”到sharepoint，以便任何人都可以在登录时查看该文件，您有什么想法吗？
浏览 10提问于2012-11-19得票数 13
如何在Sharepoint 2007中获取文档的上次抓取时间？
我想知道我将在哪个表中获得此信息？
浏览 2提问于2009-09-15得票数 1
当您使用IE浏览Sharepoint中的文件列表并尝试下载该文件时，您可以选择以只读或编辑模式打开它。当您打开文档时，Office知道该文件存在于Sharepoint中，因此当您保存该文件时，它将在Sharepoint中更新，而无需用户重新上传该文件。
我想在一个定制的网站上拥有同样的功能。我可以访问Sharepoint和文件列表，所以我使用的URL与Sharepoint下载文件的URL相同，但是Sharepoint中发生了其他事情，它告诉计算机不要下载文件的副本，而是从Sharepoint URL在Office中打开它。
有没有人知道如何模仿同样的行为，这样我就可以在Office中打开一个文
浏览 0提问于2014-12-17得票数 1
回答已采纳
我正在尝试将网页抓取的结果写入html文件。我正在使用美丽汤从网页上刮去链接和文本。然后，当我创建文件并将其写入时，我会得到以下错误：
UnicodeEncodeError: 'ascii' codec can't encode characters in position 939-940: ordinal not in range(128)
写入文件的行如下所示：
file_object.write(file_content)
当我这样做的时候：
file_object.write(file_content.encode('utf-8'))
我没有发现
浏览 1提问于2015-07-05得票数 2
回答已采纳
我们的Exchange服务器正变得相当满，用户抱怨他们的收件箱受到了限制。
建议的解决方案是从电子邮件中抓取所有附件，将它们保存在我们的Sharepoint系统中，并将保存的文件的链接插入电子邮件中。
是否有可能做到这一点，是否有人知道一个现有的应用程序？
浏览 0提问于2010-10-14得票数 3
我需要从Sharepoint导出excel文件/工作表数据(文件位于Sharepoint站点上)，并使用SSIS导入到SQL。这是可能的吗。步骤是什么。
我知道我可以将这些excel文件从SharePoint站点下载到一个文件夹中，然后导入到SQL中，这很容易！但是我需要知道如何从Sharepoint站点直接做这件事。
谢谢！！
浏览 1提问于2013-08-08得票数 6
我是新来的，对Sharepoint、Visual Studio和C#一无所知。
我需要知道爬行需要多长时间。下面的代码运行得很好--它是一个来自：
但这只是历史(就像CrawlHistory所说的对象...)。要处理问题，我需要有关正在运行的爬网的信息。
我找到了一个枚举"CrawlStatus“，但我不知道如何才能抓取它。爬网将自动从MS Sharepoint启动。
有人能帮我吗？
...
SearchContext context;
using (SPSite site = new SPSite("myServer"))
{
conte
浏览 1提问于2015-03-06得票数 0
我有一个Sharepoint目录，我连接到Outlook。每天都会发布一个csv到这个目录，我可以从Outlook抓取它，而不是导航到Sharepoint站点。
我需要编写一个Powershell脚本，从Outlook中的Sharepoint列表中提取最近的文件，并将其转储到本地dir中。
我不能直接退出Sharepoint，因为我没有管理权限。我也不能直接从输入到Sharepoint的dir中提取，因为我没有这个dir的权限。这必须通过Outlook来完成。
我想我可以用从Outlook中提取电子邮件附件的方式来完成这个任务，但是我的脚本不起作用：
#file path
$filepath
浏览 2提问于2014-04-03得票数 0
回答已采纳
我需要从Sharepoint用户配置文件中的经理获取所有用户ID。表示多个用户隶属于单个Manager。用C#怎么抓取？任何人knows..Help我。
浏览 1提问于2012-08-27得票数 0
我正在抓取facebook页面数据，但要访问所有数据，我需要登录到我正在使用的帐户。
import wget
from bs4 import BeautifulSoup
url = "https://www.facebook.com/hellomeets/events"
down = wget.download(url)
f = open(down, 'r')
htmlText = "\n".join(f.readlines())
f.close()
print htmlText
如何登录账号，抓取页面的所有数据？
浏览 4提问于2015-06-17得票数 2
1回答
我正在确定可以抓取Windows SMB文件共享并通过API公开搜索结果(具有安全性调整)的搜索解决方案。到目前为止，SharePoint和弹性搜索似乎可以处理这个问题。但是有没有其他可能的解决方案呢？
浏览 3提问于2016-12-05得票数 2
sharepoint如何识别文件类型？例如，SharePoint不允许您上载可执行文件。假设我将文件扩展名从.exe重命名为.doc，sharepoint会允许上传此文件吗？
浏览 2提问于2008-10-15得票数 4
回答已采纳
我使用下面的代码从SharePoint打开Excel文件。
我有点困惑，我应该编码如何从SharePoint的文件夹中访问文件。
我需要的Excel文件存储在；SharePoint>> Document >> Test >> Data >>July中
到我的SharePoint的链接是这样的，{00112127-0FE6-44A4-A5FB-86BC6C4E835B}&InitialTabId=Ribbon%2EDocument&VisibilityContext=WSSTabPersistence
有人可以帮助我，我应该如何编码
浏览 8提问于2017-07-17得票数 0
我正在努力寻找可以帮助我自动填写表单的库。有人建议我从上抓取(一个网站抓取库)。我解压缩了tar.gz，然后尝试了以下方法：
python setup.py install
Traceback (most recent call last):
File "setup.py", line 1, in <module>
from setuptools import setup, find_packages
ImportError: No module named setuptools
有人知道怎么安装吗？
浏览 2提问于2013-02-05得票数 0
回答已采纳
我需要将文件从现有的AngularJS/.NET应用程序保存到Sharepoint。我在网上看到的大多数例子都是当应用程序驻留在Sharepoint本身上时。如何从外部保存文件？
我已经被允许用户访问我们组织的Sharepoint站点，但没有应用程序用户密码。为了能够编写代码，我需要从SharePoint站点的管理员那里请求什么？
浏览 2提问于2019-10-01得票数 0
回答已采纳
我正在使用Visual Studio 2010和Sharepoint 2010。我想知道是否有一种方法可以让SharePoint部件抓取网站中的所有数据，这样我就可以将其保存到自定义数据库中。
浏览 2提问于2011-01-05得票数 0
回答已采纳
2回答
我的目标是用从 中抓取由驱动的web。
我已经四处查找，但没有找到安装了以下所有功能的码头映像：
是否有人能够将我与所有这些安装和一起工作的链接起来？
也许我自己的建筑并不像我想的那么困难，但它暗示了我到目前为止。
任何和所有的建议都很感激。
浏览 10提问于2017-12-23得票数 10
回答已采纳
我是SharePoint 2013 .Net客户端API的新手。我想以编程方式爬行所有的SharePoint站点。我想要充分提取名单，文件，网页，一切！
理想情况下，我想从网站的根开始，从那里抓取所有的东西。
有人能给出一个高层次的概述所涉及的基本步骤吗？例如，我是否需要创建一个目录，或者如果我有管理员凭据，我可以简单地爬行吗？
我使用的是C#、.Net 4.0和客户机运行时API (而不是REST)。
浏览 1提问于2015-03-13得票数 0
回答已采纳
3回答
我正在尝试找到一种方法来隐藏SharePoint temporary中的用户配置文件，使其不会出现在人员搜索结果中。
可能的解决方案是什么？
我是否可以设置某种抓取规则来跳过一些基于标志的用户配置文件？或者我可以锁定用户配置文件吗？
谢谢，Siriwat
浏览 2提问于2009-06-02得票数 0
使用SharePoint 2010时，无论何时要在SharePoint Designer 2010中编辑文件，都会从本地服务器下载SharePoint Designer 2010的安装文件。但在SharePoint 2013中，当你点击“在Sharepoint Designer中编辑”时，你会被引导到微软网站下载安装包。
我如何才能从本地服务器下载安装程序，而不是每次都从Microsoft网站下载？
浏览 1提问于2013-06-18得票数 3
背景
随着一个内部Sharepoint 2010安装和一个虚拟机安装Wordpress (在同一个本地网络上)，我的任务是看看我们是否可以让Sharepoint用户使用他们的Sharepoint凭证登录Wordpress。
方法是使用Sharepoint作为SSO服务，一旦登录，就可以将凭据传递给Wordpress，在Wordpress中，登录将自动进行，并直接传递给管理面板。
共享点到Wordpress
我已经找到了许多的例子，但我希望从Sharepoint转到Wordpress，而不是反过来。
僵尸邮报
Wordpress帮助论坛上有一个僵尸帖子，询问七年前的。
谷歌未经测试的方法
我发现
浏览 3提问于2014-02-06得票数 0
通过将清单XML文件放置在网络文件夹中，我已经能够在Word中提供OfficeTask窗格外接程序。然而，我想要做的是，将清单文件托管在我的well服务器上，该服务器还承载了Task窗格well应用程序，并让Office从那里抓取清单。
我尝试将清单文件所在的URL添加到受信任的Web外接程序目录中，并将其作为" SharePoint“类型的目录列出(虽然它不是SharePoint站点，只是一个普通的旧http主机)。我的加载项也没有出现在Word中。
是否有一种方法可以在常规的way主机上托管清单XML文件，并在Office中提供外接程序？
浏览 0提问于2016-06-10得票数 1
回答已采纳
3回答
由于某些原因，我在sharepoint网站上的搜索不起作用。
我已经设置了SSP，范围，抓取，一切，但它仍然不能工作
有人能给我解释一下如何设置搜索吗？也许我在这个过程中做错了什么。
浏览 4提问于2009-11-11得票数 1
2回答
我从某处的一篇文章中听说，Flash现在可以使用SharePoint列表而不是XML文件。
然而，我很难找到一个教程，它将解释如何让一个闪存应用程序从SharePoint列表中绘制。
有人知道什么好的教程吗？
我正在使用XML2010，闪存CS4，目前我正在使用AS3从闪存应用程序上的SharePoint文件中提取数据。
浏览 2提问于2010-09-15得票数 1
我对heritrix工具很陌生，现在我可以从www抓取网页，现在我想要提取爬行urls的内容。
请提前帮助我任何one.please.Thanks。
浏览 0提问于2013-08-28得票数 2
回答已采纳
我无法在Mac上运行“从urlopen导入urllib”的代码，使用Beautiful进行web抓取。
我安装了Beautiful，并将其与请求和lxml一起导入。
从urllib导入urlopen跟踪(最近一次调用)：ImportError中的第1行: ImportError:无法从'urllib‘导入名称'urlopen’
我不期望任何立即可见的结果，只是urlopen是可用的。
浏览 0提问于2019-07-10得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
