1回答
我正在使用https://developers.facebook.com/tools/debug来确定facebook从我的页面上看到了什么。当我对我的页面执行操作时，Facebook抓取仅因为这一行返回500错误
$photoObj=$facebook->api("/$photoId?
浏览 0提问于2012-05-31得票数 0
回答已采纳
我目前所做的是，从URL解析文本，然后清理文本并按空格将其分解并保存到文件中。我发现最难的是，案例:从site.com/page1抓取单词并将唯一单词保存到文件中。在抓取site.com/page2时，我需要检查每个单词是否已经在文件中，只有在不存在时才保存。
我的想法是，获取$word，并从文件中提取每一行，如果没有找到，则检查并保存。我不是在寻找任何代
浏览 1提问于2012-04-10得票数 1
回答已采纳
我写了一个BlackJack游戏，但是当我从卡片组API中查询API后，这些卡再也没有显示在屏幕上。我已经在控制台上记录了玩家牌和发牌牌，它有卡的数据，但什么也没有显示。__proto__: Array(0)
0: Array(1)
0: {code: "4H", image: "https://deckofcardsapi.com/static/img/4H.png", images: {…
浏览 15提问于2021-03-02得票数 0
1回答
有些商店没有公开此信息的API。你觉得这样行得通吗？我可以只构建一个脚本来检查所有站点吗？当API不可用时，我如何获得使用API的好处？Javascript能帮上忙吗？
浏览 1提问于2015-01-20得票数 0
2回答
我在网络上有一个html文件，它几乎每分钟更新一次表中的新行。在任何时候，该文件都包含近15000行，我想用表中的所有数据创建一个MySQL表，然后根据可用的数据计算出更多行。所说的HTML表包含，比如说来自过去3天的行。我希望将它们全部存储在我的mysql表中，并每隔一个小时左右更新一次表(这可以通过cron实现吗？)我可以使用bs4抓取数据，使用MySQLdb连接到表。但是我应该如何更新表呢？我应该使用什么逻辑来抓取使用最少资源的页面？
我没有获取任何结果，只是抓取
浏览 0提问于2013-07-30得票数 1
1回答
我希望做一个iPhone应用程序，利用餐厅的开放和关闭时间，以及他们的位置。我发现hoursmap.com是一个可以做一些我想做的事情的网站，但我还没有找到其他的网站，特别是没有一个有任何应用程序接口的网站。据我所知，Yelp和Google Places都没有这个功能。任何帮助都将不胜感激。谢谢!
浏览 1提问于2011-07-14得票数 0
回答已采纳
我正在尝试使用GitLab API来抓取由特定提交更改的所有文件，但是我看不到一个很好的方法。
换句话说，在sha1 API中，git仅显示名称GitLab的等价性是什么？
浏览 14提问于2022-04-26得票数 0
回答已采纳
3回答
从社交媒体网络中提取数据
、、、
我正在尝试创建一个Web应用程序，它将能够分析社交媒体的概况。我想分析的社交网站有Facebook、Twitter和YouTube。我想使用数据提取工具API作为我的后端.我发现的许多工具要么昂贵，要么不起作用。
我对Facebook、Twitter和YouTube API以及NodeXL等都进行了研究。请有人建议我可以使用的免费的API吗？最好是那些不会太难执行的项目。
浏览 5提问于2015-04-14得票数 0
回答已采纳
我想开发一个rails应用程序，它可以从我的rails应用程序中搜索航班信息，从不同的航空公司网站(例如，亚洲航空公司和马来西亚航空公司)获取航班信息。在我的rails应用程序中显示这些结果。
浏览 1提问于2009-11-02得票数 0
1回答
我正在尝试抓取一个使用调用HTML的API的网站，因此为此，我需要抓取API，然后从API抓取HTML结果 我已经使用这篇文章设法获得了API响应，并从中获得了HTML。json.loads(response.text)
selector= scrapy.Selector(text=resp['results'], type="html") 而且它工作得很好，当我试图从页面获取
浏览 10提问于2020-12-16得票数 1
我对API的使用非常陌生，我正在努力弄清楚身份验证。通过我的电子邮件，我可以登录到公司分析页面并查看信息。我的帐户仅处于“用户”级别。如何获取访问令牌，以便可以使用Google API从页面抓取数据？我尝试使用生成访问令牌，但我不知道服务帐户电子邮件。任何建议都将不胜感激，因为我太困惑了。
浏览 3提问于2021-06-15得票数 0
3回答
HTML表格特定行抓取
、、、、
我想从的特定行中抓取数据。我只想要橙色/金色的行。s=39090&a=1"
chrome_options.add_argument("--headless")
data = [item.text for item in items.select("th,td")]
print(da
浏览 2提问于2018-03-17得票数 1
我正在使用中的卡夫卡暂停和恢复功能。如果有人能回答上面的问题/给我提供正确的资源，那将是很有帮助的。
浏览 15提问于2017-07-22得票数 5
2回答
一旦我得到它，我知道如何正确地过滤它，但我不能将它“注入”到R中。如果url以".txt“或".csv”结尾，我已经看到了许多拉取数据的方法，但是如果这个url不是以文件类型结尾，那么我知道如何获取它的唯一方法就是拉出html，但是我得到...所有的html。有几种选择可以将文件下载为.csv并以这种方式注入它，但如果我做得足够好，我觉得我应该知道如何直接从源代码获得它。
浏览 3提问于2016-04-07得票数 0
这是与我的问题最接近的问题，但它并没有得到很好的回答：
你每秒应该做多少个请求来抓取？对此有什么标准吗？当然，所有的大型搜索引擎在这方面都有一些他们所遵循的准则。
浏览 0提问于2010-05-30得票数 10
我在Perl中逐行解析一个大文件(以\n结尾)，但是当我到达某个关键字时，比如" TARGET "，我需要抓取TARGET和下一个完全空的行之间的所有行。因此，给定文件的一段：第2行第4行目标第6行抓取这行它应该变成：第5行抓取这行
浏览 0提问于2009-06-24得票数 11
回答已采纳
我需要将大量的消息从我的后端api加载到一个用于IOS聊天app.Each的表视图中，当我重新加载数据时，整个列表是populated.How，这样做更有效，而不需要加载整个列表？我想加载最后20条消息，当用户滚动起来时，希望从后端获取下20条消息(最后40条消息)。任何帮助都将不胜感激。谢谢
浏览 1提问于2014-05-17得票数 0
回答已采纳
session_start(); 在注销时，但一旦被重定向到索引页面，(我想是再次登录)编辑:我不希望用户从facebook注销。show some data
{ includefacebookregister.php"; } else { ec
浏览 0提问于2013-05-26得票数 0
我们目前正在尝试将代码从Python网络抓取器转移到Node.js网络抓取器。来源为Pastebin API。抓取时，响应是一个javascript对象，如下所示： [ scrape_url: 'https://scrape.pastebin.com/api_scrape_item.php?i=FD1BhNuR',
full_url: 'https:&
浏览 19提问于2020-01-29得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
实时音视频活动推荐
腾讯云开发者
