我正在阅读angular的服务器端渲染文档，因为它们提到服务器端渲染是帮助爬虫。我知道在服务器端渲染爬虫可以获得整个dom，但爬虫也可以与组件交互，那么它如何帮助爬虫呢？从安全的角度来看，服务器端渲染和客户端渲染哪个更好？我也为react读到了同样的东西。
浏览 18提问于2019-09-15得票数 0
1回答
问题是爬虫找不到规范的站点，因为它是通过Angular动态加载的。有没有可能绕过这个限制，比如在Angular项目的索引站点中放置对所有对象的引用？更清楚地说：object的详细视图: mysite.com/#/ detail /object1
如果我根据当前显示的对象动态添加对amp页面的引用，爬虫将找不到amp
浏览 1提问于2017-09-18得票数 0
我遇到了一些问题谷歌爬虫和元标签，我使用反应头盔(没有ssr)的反应ssr。反应头盔确实有效，但谷歌搜索似乎找不到我添加的标签。我知道爬虫在没有启用js的情况下运行网站，在测试时我可以看到，当js被禁用时，头盔不会呈现标签(启用时可以正常工作)。知道怎么做吗？
谢谢你的帮助。
浏览 0提问于2020-12-28得票数 0
回答已采纳
2回答
我目前正在编写视图/访问者计数器的代码，该计数器检查访问者是人还是机器人/爬虫。我已经找到了一些解决办法，我用过。
浏览 3提问于2018-01-10得票数 0
回答已采纳
服务器端渲染。原因是谷歌索引爬虫和预渲染，以提高移动设备的性能。
是否可以使用Ghcjs、Haste、Elm或其他Haskell->JS编译器在服务器端呈现Haskell前端？
浏览 5提问于2015-09-26得票数 8
.'});export const myApp = functions.https.onRequest(app);这就是我尝试模拟爬虫调用的方法。我查看了一下prerender-node源代码，发现有一个shouldShowPrerenderedPage方法可以通过user-agent header检查爬虫是否完成了请求。，但得到一个错误
get
浏览 3提问于2018-11-06得票数 0
1回答
除此之外，我写了一个小服务，这将渲染网站使用服务器上的爬虫，如谷歌或Facebook的铬。example.com/path-to-page，它应该提供给普通用户，还有http://myprerenderer.com/render/http://example.com/path-to-page，它应该提供给爬虫等|svg)$">
Header set Cache-Control "max-age=31536000, public"
浏览 1提问于2018-03-26得票数 0
我有一个不到10页的小网站。<title><?php echo SITE_NAME; ?></title>var url = window.location.href; var path = 'home'; var path = window.
浏览 14提问于2018-09-02得票数 1
回答已采纳
1回答
我正在尝试使用Express.js和AngularJS设置SPA的社交共享。问题是，我想分享动态内容，所以我使用来获取facebook按钮。
浏览 4提问于2017-04-28得票数 2
我正在用scrapy写一个爬虫，但是，我遇到了一些用js渲染的网站，因此urllib2.open_url不能工作。有没有什么方法可以用webbrowser来做这件事，或者有没有其他没有webbrowser的解决方案来处理js站点？
浏览 1提问于2013-01-11得票数 2
我的Laravel5.6应用程序有一个Vue.js前端。Vue.js应用程序位于资源目录中。我已经读过几篇使用Prerender SPA插件的文章。这些文章是为独立的vue.js应用程序编写的，并且有一个index.html文件。在Laravel的例子中，我们有index.php。我如何使我的Laravel Vue.js应用程序SEO自由。
浏览 1提问于2018-07-20得票数 3
我只想让谷歌，必应，雅虎爬行我的网站建立索引。但我不希望我的对手网站使用抓取服务来窃取我的网站内容。我该怎么办？
浏览 6提问于2010-03-09得票数 2
我有一个Angular 7应用程序，我正在尝试预先渲染页面以支持网络爬虫/ SEO。我决定使用prerender.io来帮助这些爬虫预先渲染、缓存和提供静态超文本标记语言，但是我很难在我的Angular 7应用程序中安装它们的中间件。根据their docs的说法，我可以安装一个中间件，当网络爬虫发出页面请求时，它会检测到，并将请求重定向到预渲染服务器。然而，我发现的所有示例都涉及到修改一些后端节点服务器。
浏览 19提问于2019-02-26得票数 1
回答已采纳
React (JS)使用JavaScript在客户端构建用户界面。我只是从它开始，想知道从搜索引擎的角度来看，索引React应用程序是否有任何问题。</noscript> <script type="text/javascript" src="/static/js/bundle.js"></script
浏览 33提问于2017-12-29得票数 2
回答已采纳
</Head> <Script src="https://cdnjs.cloudflare.com/ajax/libs/popper.j
浏览 16提问于2021-09-29得票数 0
我们正在尝试抓取这个页面上的可用性：
我需要使用我的爬虫来选择“所有楼层平面图”，并获取所有的可用性。但我相信数据实际上是通过Javascript请求发送的。有没有办法让我的Nokogiri爬虫渲染它？或者模拟点击按钮的过程？
浏览 1提问于2015-06-10得票数 4
登录后，我查看了facebook中的html代码，他们似乎对JS文件做了很多请求(根据firebug，多达20个)。所以，虽然我知道facebook需要加载许多JS和CSS文件(而不是一个JS和一个CSS文件)，但我的问题是更通用的网站和网络爬虫的状态。我们应该担心这些技术(通过ajax加载主要内容)会影响网络爬虫(googlebot和朋友)吗？我想提高性能，加载“稍后需要”的内容(text/js/css)似乎是个好主意，但如果爬虫不能使用(当然是内
浏览 2提问于2013-03-18得票数 3
我也有一个简单的html页面，其中显示了一个JavaScript文件3Dscene.js中的交互式3D艺术作品。
我只是想把这两个元素结合起来。3Dscene.js包含它所需的所有模块导入。./3Dscene.js'>，如果我只是使用标准的html/js设置，它就可以工作。
浏览 1提问于2021-09-24得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
