我正在通过api抓取韩国航班网站，没有得到所需的数据

文章/答案/技术大牛

发布

3回答

python、api、web-scraping

我想刮掉韩国的航班网站，它给出了隐藏的航班api，但当我在邮递员中检查它时，它工作并显示结果，当我使用python在请求中尝试它时，它显示空白记录。这是网站https://suvarnabhumi.airportthai.co.th/flight，这是带有请求负载的接口'https://apis.airportthai.co.th/‘，如以下代码所

浏览 43提问于2021-09-10得票数 0

回答已采纳

4回答

旅游搜索引擎和聚合器如何获取源数据？

web-crawler

我正在考虑一些关于旅游搜索引擎的想法，我想知道这些网站是如何获得源数据的。他们会从航空公司的主页上抓取所有的内容吗？考虑到航空公司的数量，这似乎是一项艰巨的工作。是否有一些API或web服务标准，每个航空公司也遵守？我是否必须为我希望索引的每一家航空公司协商对数据API的访

浏览 4提问于2009-10-03得票数 7

回答已采纳

2回答

如果我没有网站的数据库，在Android应用程序中检索其信息的替代方案是什么？

android

我想开发一个应用程序，以显示其网站上的特定频道的节目时间表。我没有他们的网站，但是，有没有其他技术可以从页面中检索一些特定的数据，在我的情况下，程序的名称和它的传播时间。该网站也没有RSS提要。

浏览 3提问于2012-06-15得票数 1

回答已采纳

2回答

如何在24小时内从动态加载的网页中抓取超过5万个数据点？

python、selenium、web-scraping

我正在使用selenium python，我想知道如何在24小时内有效地抓取超过50,000个数据点。例如，当我在网页'insight.com‘上搜索产品时，抓取器大约需要3.5秒来搜索产品并获取其价格，这意味着对于大量数据，抓取器需要几天时间。从使用线程同时查找多个产品的一部分，我还可以如何加速这个过程？我只有一台笔记本电脑，将不得不同时抓取其他六个类似的网站<

浏览 28提问于2020-06-18得票数 2

1回答

从数据库中自动显示数据并在LCD屏幕上显示。

php、javascript、html、mysql

我想使用php和mysql创建如下内容：有人能帮我/指导我如何开始吗？

浏览 2提问于2012-11-19得票数 0

2回答

用精美的汤抓取数据

html、python-3.x、web、web-scraping、beautifulsoup

我对抓取数据还是个新手。我在试着刮擦来自网站的三个详细信息- a。日期b。客户数量c。当前停电对于current outages，我试着简单地- article = soup.find(class_="menu-content") keyword_section = soup.find我想简单地获取上周的这些(历史数据)

浏览 28提问于2020-08-15得票数 0

回答已采纳

2回答

Twitter API* vs Web抓取？*

ruby-on-rails、ruby、twitter、nokogiri、mechanize-ruby

首先，我想获得我twitter账户的所有追随者。我做了一点研究，发现我们可以用Ruby on rails做web抓取，使用: Nokogiri或Mechanize gem。我还得到了一个css选择器，用于web抓取。现在，如果我查找HTML页面源代码，它不会显示该帐户的所有追随者。我真的可以使用web抓取代码来获取我所有的twitter追随者，还是应该使用Twit

浏览 2提问于2012-11-08得票数 0

回答已采纳

1回答

生产数据新鲜度

amadeus

我想知道Inspirationnal搜索和flightOfferSearch端点的新鲜度。为了提高性能，我希望实现一些缓存机制，并且在不需要时不要重复调用api。在刷新结果之前，我可以将灵感搜索和flightOffer搜索响应放到缓存中几次？

浏览 7提问于2020-04-30得票数 0

回答已采纳

3回答

哪些旅游网站发布了他们的API？我正在艰难地寻找

api、e-commerce

我正在寻找一个API，将提供一切与酒店相关的细节，但我有一个艰难的时间来搜索它。我被引导相信expedia或hotels.com打开了那里，但我在任何地方都找不到它- 有谁有主意吗？

浏览 3提问于2010-12-02得票数 1

回答已采纳

1回答

像kayak这样的网络比较网站如何获得他们的数据？

api、sabre、amadeus、travelport-api

我想知道一个航班比较网站(在那里，你不能预订航班，只能重定向到其他网站)如何获得他们的数据。到现在为止，这一切都是通过api的，还是通过报废的数据(这些数据不太可靠)？我一直在网上阅读，试图找出是否是这样，但并不是每一家航空公司和每一个航班搜索网站(有预订选项)都提供了api</em

浏览 3提问于2017-08-12得票数 0

9回答

屏幕抓取器是如何工作的？

screen-scraping、web-scraping、html-content-extraction、pdf-scraping、console-scraping

我听到人们一直在写这些程序，我知道他们是做什么的，但他们实际上是如何做到的呢？我在寻找一般的概念。

浏览 3提问于2008-10-01得票数 20

回答已采纳

3回答

哪个Amadeus API会返回航班的详细信息和价格？

api、amadeus

我正在开发Amadeus API并使用Air_MultiAvailability。它给了我航班搜索结果数据，但没有给我航班价格。所以我需要得到所有航班的详细信息和价格。我不知道我是否使用了正确的API，但我查看了带有价格细节的航班搜索数据。热心的帮助

浏览 3提问于2014-09-18得票数 3

1回答

用pyautogui控制鼠标和浏览器实现过程自动化

python、automation、webbrowser-control、pyautogui

我是Python的新手，我想在工作中完成这个项目，我需要专家指导，因为我的同事中没有一个是程序员。将文本输入搜索标签框或删除搜索标记

浏览 1提问于2019-12-18得票数 0

1回答

如何使用Python中的Selenium从在滚动中添加div的网页中刮取数据？

python、selenium、web-scraping、automation、webdriver

我正在尝试从以下网页中抓取数据：。我试图针对的元素如下：div[@class='infinite-trip-list']//div[@class='span1 trip-duration'] 这是一个在用户滚动中动态添加元素的列表。我的目标是将这些元素存储在一个变量中，以提取每次飞行的持续时间。到目前为止，我还无法做到这一点，这就是

浏览 4提问于2020-08-15得票数 0

回答已采纳

2回答

如何使用pandas或python删除整个DataFrame中的逗号

python、pandas

我对任何类型的程序都不熟悉。我来自韩国，所以我在这里输入英语很紧张，但我正在努力勇敢！(请原谅我丑陋的英语)这是我从网站上得到的DataFrame。我正在

浏览 352提问于2020-03-18得票数 2

回答已采纳

10回答

寻找一个屏幕抓取可能值得的示例

screen-scraping

屏幕抓取看起来像是一个有用的工具--你可以进入别人的网站并窃取他们的数据--多么棒！即使在web上，大多数应用程序数据也是特定于该应用程序的。例如，假设我从StackOverflow上刮掉了所有的问题和答案，或者从谷歌上刮掉了所有的结果(假设这是可能的)--我剩下的数据并不是很有用，除非我有一个竞争对手的</em

浏览 1提问于2009-08-14得票数 3

回答已采纳

2回答

Amadeus航班API错误:除YY和YYY外，载波代码为2或3白体。

json、rest、go、amadeus

我使用以下SDK通过Amadeus搜索和购买航班： { { "title": "INVALID FORMATsegments[0]/operating/carrierCode&q

浏览 9提问于2022-05-30得票数 0

7回答

像kayak.com这样的网站是如何聚合内容的？

api、architecture、screen-scraping、aggregate

问候，我一直在玩弄一个新项目的想法，想知道是否有人知道像Kayak.com这样的服务如何能够如此快速和准确地从如此多的来源聚合数据。更具体地说，你认为Kayak.com是在与API交互，还是在爬行/抓取航空公司和酒店网站，以满足用户的请求？我知道对于这类问题没有一个正确的答案，但我很好奇其他人认为什么是解决这个问题的好方法。如果有帮助，假装你明天要创建kayak.com…

浏览 4提问于2011-01-06得票数 84

回答已采纳

1回答

Oneworld Alliance有API吗？

python

有没有人知道Oneworld Alliance的API？这个想法是用Python编写一个旅行推销员，他根据实际可用的航班连接访问系统中的所有机场。

浏览 0提问于2011-06-17得票数 0

1回答

使用Google Maps API和动态数据的Java教程/示例

google-maps、jakarta-ee、dynamic

有谁知道如何开始使用Java、Google Maps API和Google Maps上的动态跟踪对象实现应用程序的教程或示例吗？飞行雷达/跟踪就是一个例子。

浏览 4提问于2018-01-26得票数 0

点击加载更多