我想知道解决我的问题的最佳方法是什么。如果我有一个已经从我的API中获取的产品数组，现在我想要获取一个产品。我是应该过滤抓取的数据，还是应该根据产品Id重新发起API请求？
浏览 12提问于2021-01-19得票数 0
3回答
嗨，我刚开始从推特上抓取数据，我一直在做一个收集推文和回复的项目。我使用twitter API抓取了tweet，但我无法抓取他们的回复。有什么建议吗？
浏览 3提问于2021-01-14得票数 0
1回答
我试着收集的故事，并对Kickstarter的数据进行风险分析。我使用API的方法如下：
Kickstarter中有什么变化吗。
浏览 1提问于2022-01-26得票数 -1
1回答
我正在制作一个应用程序(iOS和安卓)，将显示在校园和校园附近选定的场所，即只有地方的食品价格低于10美元(我有CSV文件中的商店名称)。这是我的计划：
获取所有这些商店的会场ID并将其存储在应用程序中。该应用程序将获得附近所有场馆的JSON提要，我的应用程序将过滤出在本地数据库中没有场馆ID的场馆。在应用程序的未来版本中，我想添加Foursquare的<
浏览 2提问于2013-03-20得票数 0
回答已采纳
我正在尝试制作一个有趣的小程序，其中包括显示有关steam游戏的信息，但我不确定如何获得特定游戏的所有类型。
第二张图片来自web api ()为什么它在webapi上只有2种类型，而在steam商店上却更多呢？有没有别的地方我可以用来获取其他类型的作品？
浏览 2提问于2018-07-01得票数 2
3回答
我有一个问题，那就是从网站获取信息到我的python项目中(当项目正在运行时)。我还没有写过任何代码，因为我是这种编程的初学者。我想问你，我需要哪些模块以及如何使用它们，如果你们中的一些人可以，我将感谢一些代码的例子。
浏览 1提问于2020-09-18得票数 0
我有一个应用程序，它从外部API中抓取行，并将它们发送到浏览器，而不存储在数据库中。数据库只保存API请求的URL。从API接收的行需要按行进行过滤，无论是服务器(PHP)还是客户端，筛选器都需要存储在数据库中。例如，行的筛选器可以是子字符串或替换。我假设您永远不希望数据库中有javascript/PHP代码，但是还能如何做到呢？是否有
浏览 0提问于2014-04-29得票数 7
回答已采纳
我正在尝试策划来自不同媒体的涵盖相同故事的新闻文章，为此我使用新闻-请python库。下面的代码给出了使用给定URL的新闻，但我希望获得多篇新闻文章(基于特定的日期或日期范围)。这是使用特定URL获取新闻的代码： from newsplease import NewsPlease
article = NewsPlease.from_url('https://www.nytimes.com
浏览 48提问于2019-10-04得票数 1
我正在编程地通过表单从前端的单一贴图页中更新post缩略图，并且在上传新的图片之前删除以前的图像及其数据库中的元数据，以使DB中的东西保持混乱。一切都很好，只是当单个post页面在表单提交上刷新时，它仍然显示旧的图像。我必须再次刷新页面手动显示新的特色图像。 wp_delete_attachment( $old_img_id, true );
del
浏览 9提问于2022-02-28得票数 -1
回答已采纳
我正在使用selenium python，我想知道如何在24小时内有效地抓取超过50,000个数据点。例如，当我在网页'insight.com‘上搜索产品时，抓取器大约需要3.5秒来搜索产品并获取其价格，这意味着对于大量数据，抓取器需要几天时间。从使用线程同时查找多个产品的一部分，我还可以如何加速这个过程？我只有一台笔记本电脑，将不得不同时抓取其他六个类似的网站，因此不想要太多的线程，计算机的运行速度将显着
浏览 28提问于2020-06-18得票数 2
假设恶意参与者经常发布一段调用屏幕截图函数(例如Graphics.CopyFromScreen()或.NET中的UIAutomation框架)的软件，但并没有通知用户。我下载并安装了那个软件。假设软件是用有效的publisher证书签名的，我有几个问题要问：如果是的话，合法的截屏程序是否需要在防病毒程序中有例外情况才能允许这种行为？如果没有，AntiVirus软件至少会检测到数据的</em
浏览 0提问于2020-05-27得票数 0
我有一个使用DSPACK组件库用Delphi6编写的DirectShow应用程序，运行在Windows XP上。在我的过滤器图的顶部是一个音频捕获过滤器。捕获过滤器已分配给我的VOIP电话，并且在streeam中有一个抓取过滤器示例。在样本抓取过滤器的回调方法中，每当我从样本抓取过滤器中获得连续两个具有相同时间戳(SampleT
浏览 2提问于2011-12-03得票数 0
我正在尝试使用Youtube API来抓取有创意的常见视频。
我尝试在YouTubeQuery类中使用setField方法，但我无法提供准确的字符串参数来按创意公共进行过滤。编辑:我使用的是Youtube API的Java实现。
浏览 0提问于2013-01-13得票数 1
回答已采纳
我使用nutch 1.6进行抓取，使用solr 3.6.2对抓取的urls进行索引。但是，我只想保留包含details的urls。我所做的就是给nutch/conf/regex-urlfilter.txt添加了许多(很多)过滤器。我想知道是否有更好的解决方案，即使我应该抓取所有数据(urls)，然后在Solr中只过滤重要的一次(在Solrindex命令中)。
浏览 0提问于2013-05-23得票数 1
回答已采纳
在，我们正在试图弄清楚如何抓取YouTube页面(或带有嵌入式YouTube播放器的页面)，然后破解视频或RSS，我们可以将其包含在ShockWave提要的元素中。我们已经能够对YouTube EDU中的程序执行此操作，例如，我们将其转换为。后者的URL可以由标准的Flash播放器播放，因此我们可以将其包含在RSS提要中。我们没有这样做的权利/许可。
浏览 0提问于2009-06-23得票数 0
回答已采纳
1回答
抓取网站的API？
、、、
我只是想知道，谷歌或其他公司是否提供了一个API，允许你接收抓取的链接？我想过滤的链接与.txt扩展和可能的另一个额外的扩展。
如果不是，我如何抓取/索引页面，但只将其细化为我选择的扩展？另外，我是否需要一个大型数据库来抓取这些文件的内容？我想抓取随机链接(与我选择的扩展)，在DMOZ的起点。
浏览 1提问于2014-06-06得票数 0
我刚用Python开始了几个web抓取项目。我目前使用lxml，Beautiful Soup和requests模块来抓取网页。我需要知道是否有任何方法可以只从网站获得我们需要的数据，而不是加载整个页面。requests模块执行GET请求并接收整个，bs4，lxml只过滤数据。我也不是在寻找API key方法，它并不适用于所有地方。
浏览 28提问于2021-11-13得票数 0
回答已采纳
5回答
如何从其他网站获取数据？
、、、
我想创建一个网站，从其他网站提取信息，并将它们打印到我的网站上，我正在进行研究，所以我想听取一些意见，这个项目的最佳解决方案是什么？我听说Python使用解析器可以做到这一点，我只是想知道我应该走哪条路，应该使用哪种语言？
浏览 1提问于2013-06-14得票数 4
云服务器
ICP备案
云直播
即时通信 IM
实时音视频
腾讯云开发者
