php如何抓取数据库 - 腾讯云开发者社区

文章/答案/技术大牛

发布

1回答

将Ruby on Rails博客移植到Wordpress

ruby-on-rails、wordpress、post、import

我有一个其他人写的Ruby on rails博客，现在已经不再参与了。我想把它移植到一个新的Wordpress博客上。Textface.com是RoR博客。在我改变域名之前，我需要把所有的帖子从RoR博客移植到Wordpress。我对RoR不是很了解，所以我不知道该怎么做。我想包括帖子标题，日期张贴，和图像。

浏览 0提问于2012-07-25得票数 0

2回答

Web应用程序体系结构和应用程序服务器？

php、python、model-view-controller、cakephp、application-server

该应用程序定期从其他站点抓取信息，并根据最终用户的输入进行抓取。为此，我使用Php+curl抓取信息，使用Php或python解析信息并将结果存储在MySQLDB中。我正在考虑在一台单独的web服务器上使用Php作为网站前端，在另一台服务器上运行Php spider、MySQL DB和python。对于这类工作，我应该使用什么框架？

浏览 2提问于2010-06-11得票数 3

回答已采纳

2回答

从DB中的多个返回1个结果

php、mysql

我正在尝试查询我的数据库，并且只为每个数据库返回一个名称。(php/MySQL)我想知道如何只抓取每个名称一次并显示它们。而不是循环遍历并多次抓取和显示所有名称。

浏览 1提问于2012-09-26得票数 1

2回答

使用PHP、MySQL和Curl的Crontab Linux

php、curl、crontab

我正在尝试运行一些php与curl在它里面，所以它会从网站检索信息，然后将其插入到我的数据库。我能够让cronjob工作，php也能工作，因为我让它在每次运行时都会给我发一封电子邮件，它确实做到了。Cronjob：cronjobs.php：$to =

浏览 0提问于2013-07-11得票数 0

回答已采纳

4回答

如何在会话中抓取同一页面上的用户并列出他们？

php、ajax、session

它会抓取页面上的会话用户名，并在您发送聊天时显示您的姓名。使用Ajax通过.txt文件发送、存储和发送消息，并使用PHP语言进行处理。没有数据库(到目前为止)。我想知道如何抓取并列出正在聊天的页面上的当前用户？我不太擅长PHP，所以这对我来说有点复杂。我的猜测是将用户名记录到数据库中，然后显示登录的人...我说得对吗？

浏览 3提问于2012-03-08得票数 0

6回答

如何知道被抓取的网站是否发生了变化？

php、screen-scraping、web-scraping

我正在使用PHP抓取一个网站并收集一些数据。无需使用正则表达式即可完成所有操作。我使用php的explode()方法来查找特定的HTML标记。如果网站的结构发生变化(CSS、HTML)，那么抓取器可能会收集错误的数据。所以问题是-我如何知道HTML结构是否发生了变化？如何在将任何数据存储到我的数据库之前识别这一点，以避免存储错误的数据。

浏览 1提问于2010-03-28得票数 8

回答已采纳

3回答

使用爆发、拆分或preg_split存储和获取多个数据库条目

php、mysql、split、explode、preg-split

我正在试图找出如何以及哪种方式最好地存储和获取多个条目到数据库和从数据库中获取。要么使用split，要么使用split，要么使用preg_split。我需要实现的是，用户使用表单中的文本字段向不同的用户发送多条消息，或者通过输入"101,102,103“这样的ID与多个用户共享数据，而PHP代码足够聪明，可以在"，”之后选择每个ID来获取每个ID。我需要知道如何使PHP代码获取ID，并能够与它们一起使用函数。就像从数据库单元格中抓取

浏览 1提问于2011-03-25得票数 0

回答已采纳

2回答

插入前的mysql数据库比较

php、mysql、database、scrape

所以我正在抓取一个网站的urls，并将这些urls存储在数据库中，我正在寻找最轻的方法来比较新的抓取的urls和存储的urls，以便只添加当前未存储在数据库中的urls。我是一个mysql数据库在php中工作。

浏览 0提问于2012-12-18得票数 0

回答已采纳

1回答

如何将图像序列转换为文件名不是从1开始的电影？

command-line、ffmpeg、movie

我有一系列的图像要转换成电影。唯一的问题是，我想开始使用ffmpeg将第120号到240号的图像转换成电影，但我不知道用于该转换的命令行。对于这种情况，有没有可能的命令行？

浏览 0提问于2011-08-27得票数 0

2回答

如何存储从网页抓取的数据

php、web-crawler

我想在我的web应用上建立一个教育搜索引擎，所以我决定使用PHP从我的网页上抓取大约10个网站，并将数据存储到我的数据库中以供以后搜索。如何检索此数据并将其存储在数据库中？

浏览 0提问于2011-05-07得票数 1

1回答

将Ajax数据发布到公共PHP函数

php、ajax

我的目标是学习面向对象的PHP，现在我对过程有了很好的理解。我不得不把这个Ajax请求发送到我的php文件。php echo $uid ?); }}); Phpphp if($_POST['flag&#

浏览 0提问于2017-04-19得票数 0

3回答

在循环中迭代时，在循环中访问MySQL的效率是高还是低？

php、mysql、loops、web-scraping

我正在编写一个PHP脚本来从web上抓取数据。最终，我想要把所有抓取的数据很好地塞进mysql数据库中并进行格式化。但是，由于PHP脚本中有多个循环和数组需要迭代，我的直觉是，为了速度和效率，最好不要保持对mysql数据库的循环访问(在每次循环时插入数据)，而是将数据存储在PHP中的临时数组中，然后仅在脚本结束时将数组一次性转储到

浏览 2提问于2012-05-12得票数 1

回答已采纳

1回答

我可以使用XML-RPC将Python抓取的文章发布到我的wordpress站点上吗？

python、php、wordpress、web-scraping

我是编程新手，在前两周学习了一点Python，并编写了一个自动化脚本，从网站上抓取每个类别中的类别和文章。

浏览 0提问于2020-05-17得票数 0

1回答

Google Chrome错误的文本显示

php、google-chrome、utf-8、character-encoding

我还尝试了回显来自编码的UTF-8 MySql数据库的文本，still..it在Safari和Firefox中运行良好，但在Chrome中不起作用。对于字母Č，č，Ž，ž，这是没有问题的。

浏览 1提问于2015-02-20得票数 2

2回答

除非启用了Javascript，否则使用php函数

php、javascript、ajax

我有一个网站，将抓取新的数据在第一页访问。我想使用AJAX来做这件事，这样我就可以在抓取过程中向用户提供至少一些loading.gifs，但这只有在启用了Javascript的情况下才能实现。我的站点使用了一个PHP模板引擎，所以我想把抓取函数放在html模板的<noscript>标记中。因为这将在所有PHP代码之后发生，所以我必须重新加载页面，以便可以使用PHP呈现/解析抓取的数据。

浏览 0提问于2011-01-16得票数 1

2回答

如何使文件仅供PHP访问？

php、.htaccess、access-control

我有一个PHP脚本，它应该是用来刮取数据库的，我不希望公开访问该数据库。如何使该文件不能像https://example.com/database.file一样查看，但是PHP仍然可以对其进行抓取。上一次尝试禁用对文件的访问时，PHP文件每次尝试访问它时都返回403。接下来，我在这个网站上看到了两个问题，但没有人能回答我的问题。

浏览 4提问于2020-08-17得票数 0

回答已采纳

2回答

如何从存储在MySQL中的数组中获取不同的值？

php、mysql

我有一个MySQL字段，它存储了一个包含3个值的数组：如何使用PHP语言查询数据库，以便只获得不同的item2

浏览 0提问于2010-03-09得票数 0

1回答

使用php查找mysql表中的最高票数

php、mysql

我正在寻找一种方法，在php中从mysql数据库中名为'answers‘的表中抓取条目，然后从名为'votes’的表中抓取条目并从中计算出投票最高的答案。在这方面我似乎找不到任何帮助。这些结构可以在中查看它的工作原理是用户的投票被存储在' votes‘表中，并被'answer_id’列识别，我只是不知道如何计算它们并确定票数最高的答案

浏览 0提问于2011-10-23得票数 0

回答已采纳

1回答

.htaccess和Php中的页面标题

php、.htaccess、url、mod-rewrite、url-rewriting

我已经用头撞墙一整天了，但是我不明白如何让我的URL在URL中显示页面标题，而不是所有的查询参数。

浏览 3提问于2015-01-28得票数 0

回答已采纳

2回答

通过幻影和casperjs将刮过的数据保存到mysql数据库

web-scraping、phantomjs、casperjs

嗨，我正在开发一个网络刮刀，首先我试图使用php CURL进行抓取，但后来我遇到了一个问题，就是我无法刮掉通过AJAX加载的站点，然后我转到了‘幻影JS’和'casper‘。现在我已经成功地安装了webkit，可以从任何网站刮取数据，但是我无法将数据保存到数据库中以供长期使用。简单地说，供以后使用。我想要做的是，不管我刮了什么数据，我都想把它保存到mySql数据库中。我尝试过发送Ajax请求将数据发送到数据库，但失败了。例如，我想出了另一个解决方案，即当我从指定的网站抓取数据

浏览 1提问于2018-04-02得票数 0

回答已采纳

点击加载更多