1回答
从网站中提取数据
、、、
我想通过这个网站以表格的形式获得每个城市的石油价格，我试图通过选择城市和站点来复制每个数据，但数据量非常大，有什么工具可以选择每个选项并保存它收到的数据。
(网站收到JSON格式的回复)网站的网址为
浏览 0提问于2017-10-22得票数 0
1回答
对于平均每天2500次访问的magento网站，亚马逊EC2的最佳配置是什么？目前我们使用的配置如下：
Web服务器01 - M1大型实例Web服务器02 - M1大型实例缓存服务器- M1大型实例数据库服务器01 - M3超大型实例数据库服务器02 - M1大型实例负载均衡器
使用上面的配置，我们的网站比以前的主机(Razorservers)慢。
以下是关于magento会话的更多数据:我们的magento会话的访问量是Google analytics的两倍多。唯一的IP(取自服务器日志)或多或少与Google Analytics的唯一访问者相匹配。
这就是magento的行为吗？或者这是一
浏览 2提问于2013-10-08得票数 0
我需要一个大的卡迈克尔数字( 10到100位)的列表。有没有网站提供这样的数据。如果我能得到一个大的奇数合成数和素数的列表，那会更有帮助。
浏览 2提问于2011-08-16得票数 2
SQLite3数据库的最大连接数是多少？
为什么我不能将它用于非常大的网站，例如拥有300万用户的网站？
浏览 5提问于2012-01-26得票数 33
回答已采纳
我在一个测试环境中有一个SQL DB，它是测试网站的后端数据源。网站上没有任何活动(因为它在我们的测试环境中)，但每隔几天，数据库日志文件就会变得非常大，从而导致备份等问题。
这是一个测试环境，所以没有我们无法控制的活动。为什么日志还在增长呢？为什么这么大？
我正在寻找一些关于如何在不活跃的站点/数据库上跟踪导致日志增长的提示。
我使用DBCC OPENTRAN查找打开的事务，结果是没有打开事务。
还有其他想法吗？
浏览 2提问于2010-05-14得票数 0
回答已采纳
我已经读了很多次，我应该清理我的数据库，以保持高性能。对帖子进行多次修改总是被认为是一个大的性能盗取者。
我对这个说法很怀疑。我知道这张表会比2大10次，但它的运行速度真的会慢些吗？考虑到在经常查找的字段中有索引(或者应该是索引)，查询应该还是一样快。
我看不出我自己的网站有什么不同，但我没有那么多的数据。我很好奇到底是什么时候，如果真的有进步的话，任何进步都会开始显现出来。
我并不是要网站所有者增加他们想要保留的修改数量，我只是想了解现实世界的效果，而不是我经常看到的大性能改进声明。
浏览 0提问于2018-01-07得票数 5
回答已采纳
我们的网站设置了每天从谷歌分析到BigQuery的数据传输。但是，BQ中的每日数据集通常在上午7:30到10:30 (GMT+1)左右可用。有没有办法更快(一大早)进行更新？
我们的网站位于荷兰，但BigQuery中的谷歌分析数据集存储在美国。
浏览 4提问于2018-11-13得票数 0
假设我有一串JSON格式的数据是私有的。作为一个假设的例子，我们可以说，它包括姓名，电话号码，社会保险号码和信用卡号码，我的十大客户(不太)。
我需要以可读的格式查看这些数据。有很多网站可以帮助我。但我必须给他们数据(坏的)。
是否有一种方法可以像不同网站那样格式化JSON数据，而不必将我的数据提供给网站呢？
浏览 7提问于2014-03-28得票数 0
回答已采纳
我在云服务器上运行一个网站。该网站完全围绕一个(相当大的)数据库运行。在过去的两周里，我注意到MYSQL的CPU负载稳步上升，我不知道为什么。已经有一段时间了15%-16%，然后开始一天上升1-2%。目前我们已经达到了27%，并且认为流量增加了，没有那么大.是什么导致了这一切？
谢谢!
浏览 0提问于2014-03-25得票数 0
回答已采纳
1回答
我有几个网站，平均每天在我的网络中有10,000个大学。我也有几个移动应用程序，每天可能会有5000次的xml数据。我的网站不是什么大的，只是少数壁纸网站和其他一些小网站，没有真正的数据库密集型。
我目前拥有一台专用服务器，我觉得这对我的网络来说太过分了。我正在研究如何获得虚拟专用服务器(VPS)。我只是想知道我应该寻找什么样的统计数据来支持我的网站网络。
谢谢
浏览 0提问于2011-02-26得票数 1
1回答
我知道mariadb "datadir“将允许我移动服务器默认卷位置。这不是我的问题。是否可以使用自己的关联卷创建每个数据库并定位特定于其用途的卷。想想一大堆网站..。为了便于网站重新定位，我想为每个网站的数据库找到“接近”网站内容的音量。
我找过“创建数据库.卷.”但我找不到任何这样的变体。我认为每个网站的一个服务器不会有很好的变化。
有什么想法吗？
谢谢你的帮助。
浏览 0提问于2022-10-30得票数 0
2回答
我们目前正在记录使用MySQL的几个网站的印象数据，并正在寻找一个更合适的替代记录流量的高流量，我们的网站现在看到。我们在MySQL数据库中最终需要的是聚合数据。
所谓“大容量”，我的意思是说，我们每个月要为这个印象数据记录大约5000万个条目。需要注意的是，这个表活动几乎完全是、写，而且很少读取。(与SO：上的这个用例不同)。我们通过按范围划分数据并执行批量插入来解决一些MySQL性能问题，但从总体上讲，我们不应该使用MySQL。
我们在MySQL数据库中最终需要的是聚合数据，我相信还有更适合这个用例的大容量日志记录部分的其他技术。我读过关于、 (与一起)、和的文章，我觉得自己走在正确的轨道
浏览 3提问于2015-09-09得票数 1
回答已采纳
我有2个网站，我把所有的GA数据发送到大查询。由于大查询将为每个站点创建不同的表，因此我想将它们合并为一个表。另外，我想创建一条记录来指示站点的名称，这样站点A和站点B的数据就不会混淆。
这个是可能的吗？我已经尝试过联合，它工作得很好，只是我无法区分站点a和站点b之间的数据。
很高兴，谢谢
浏览 1提问于2016-05-04得票数 1
alexa.com似乎有一大堆主要网站访问者的数据。但他们没有任何观众设备的细分(据我所知)。
例如，有没有办法确定amazon.com (或任何其他网站)获得了多少移动流量？
谢谢,
浏览 0提问于2013-09-21得票数 0
我可以将DataStream时间窗口设置为24小时这样的大值吗？这一要求的原因是，我希望根据最新的24小时客户端流量对网站进行数据统计。这样，我可以检查是否有违反安全措施。
例如，检查用户帐户是否使用多个源IP登录到网站。或者在最近的24小时内检查某个IP访问的唯一页面数。如果检测到安全冲突，则将实时执行配置的操作，例如阻止源IP或锁定相关用户帐户。
网站的吞吐量约为200 to /s，我认为将时间窗口设置为一个大值会导致内存问题。我应该把每个时间窗口的统计结果像5分钟一样存储到数据库中吗？
然后根据数据库进行统计，查询最近24小时内生成的日期？我对大数据分析没有任何经验。如有任何建议，将不胜
浏览 2提问于2018-07-02得票数 1
回答已采纳
我需要多少数据才能使用Presto？该网站表示，它可以查询从千兆字节到web的数据大小。我知道它是如何用来查询非常大的数据集的，但是有人会使用它来查询数百it的数据吗？
浏览 3提问于2013-11-07得票数 5
1回答
我有几个网站，我希望瘦身。这些网站已经活跃了很长一段时间，确实有旧的帖子数据不再相关。我希望删除这些(大于3年)和有元数据，他们的附加媒体，修订和包括W3缓存文件。此外，数据库清理可能会有所帮助。
哪种方法最好？
插件“大容量删除”，并删除“删除附件”
wp-cli post删除
WP api函数
浏览 0提问于2019-06-20得票数 1
回答已采纳
我有一个大约10000行的大xml，我想在启动服务器时将xml数据加载到一个数组中，并通过我们在java中做的website.Like在整个用户会话中保持该列表，将数组列表保存在servlet context.How中我们可以在服务器启动时将一个大的xml数据放到一个集合中，以提高PHP中网站的性能。请引导这……
浏览 1提问于2014-04-05得票数 0
1回答
我要建一个网站。这是一种允许全球用户访问的杂志。数据可能会变得非常大。我使用mySQL数据库作为核心数据库来执行读/写操作，例如添加新用户、添加新文章等等。由于核心数据库中的数据可能非常大，我正在考虑使用Apache作为只读数据库(反正我使用Solr作为搜索引擎)，以便每次用户查看文章、用户配置文件等时读取数据。
这在实践中是一个好方法吗？利与弊是什么？
浏览 3提问于2013-08-31得票数 0
回答已采纳
我想知道Windows Azure是否是一个可行的选择，现在他们提供了10个免费网站，用于托管一个带有数据库和域名等的简单网站。或者更传统的虚拟主机仍然是更好的选择？
数据库不会那么大，所以5美元的100MB数据库选项就足够了。我想交通也需要几美元吧？
浏览 3提问于2013-01-04得票数 0
回答已采纳
1回答
Magento数据库同步
、、、
请任何Magento或MySQl专家指导我的最佳方式，以同步马根托生产网站数据库与开发网站，database.An的理想方式切换，没有数据损失。
Magento产品是在版本1.6上开发的，而开发的.The开发网站数据库是对实际生产数据库的备份，之后我们升级、添加了功能、模块、更改设计和消除了错误造成的核心更改，部分从生产和开发网站数据库的这一大部分结构来看，从类别、产品和属性的角度来看都是一样的。(目前尚缺乏最后3个月的交易)。谁能建议一下这个案子的最佳选择是什么？
浏览 1提问于2014-02-27得票数 1
回答已采纳
让我们假设我已经创建了一个Azure虚拟机，最初是一个小虚拟机。我已经安装了SQL Server并创建了数据库。也由虚拟机上的IIS托管到网站。我看得出小号的性能不达标。我想升级到一台更大更强大的机器。我知道，我可以从Azure门户网站执行此操作。我的问题是，因为我已经完全配置了这台机器，并在小型VM上运行数据库和网站。我需要知道，如果我从Azure门户网站将虚拟机(VM)的大小从小更改为大，我是否会丢失所有数据和托管网站？我担心如果这次升级我可能会丢失数据和网站。
浏览 1提问于2015-11-19得票数 1
我已经成功地配置了FOSUserBundle连接到网站的管理部分，这很好用。
我们希望公众用户只能通过Facebook登录网站，所以我也安装了FOSFacebookBundle，这是可行的。说大也大吧。我可以登录、验证、访问用户的个人资料页面和注销；所有这些都按预期工作。
但是，当用户通过Facebook登录时，该用户不会被添加到数据库中。我是不是误解了文档底部的“自定义用户提供程序”()应该做的事情？
基本上，当Facebook登录时，用户会被添加(如果需要)，然后通过FOSUserBundle获取。
我一次又一次地阅读文档，在这里阅读问题，但不知道发生了什么(没有)。
有谁知道代码中的哪些
浏览 0提问于2012-11-18得票数 0
回答已采纳
所以我正在做一个相当大的项目，这个网站将为大约7000名客户提供服务，该网站每天有2500次点击量，并将作为服务器打包，并作为一个总体解决方案重新出售给其他数十个处于类似情况的组织。
该网站将有很多用户的输入区域。我们将需要数据表，您的标准注册字段，我们将需要完全控制的事情，如ajax等。
建立一个网站的最好方法是什么？我通常关心的是兼容性，易用性，负载时间，带宽等等.
客户端还告诉我们，他们需要主页面上的一个大旋转球，以及动画模式对话框，很多东西在滑动时移动和动画，基本上商业网站需要大量的动画。
闪电太老了吗？当使用的时候，javascript值吗？
浏览 0提问于2010-08-25得票数 5
回答已采纳
我们正在网站工作，并将Drupal商业整合到我们的网站中。我们还在每个产品上添加多个产品，以便用户在将产品添加到购物车的同时选择产品。
该网站将拥有超过1,000万的产品展示(节点)和3,000多万产品(drupal commerce)的大数据集。
我们还集成了apache和search，并允许用户搜索和过滤搜索结果。
有人认为，如果我们将这么大的数据存储到单个数据库中，这会影响我们的性能，还是需要将数据存储到数据库的“主/从”概念中？
由于我们有庞大的数据集，所以我们正在准备我们的数据库架构，所以它不会影响我们的网站的性能。
浏览 0提问于2015-12-09得票数 1
3回答
我有一个名单的30个网站，我已经扫描。我需要为每个个人网站提取一份报告。做得到吗？现在，我只是在运行一份报告，并得到所有30项的结果，它只是在一大块数据，我没有时间筛选出来。
浏览 0提问于2014-04-23得票数 2
回答已采纳
大家好，新年快乐。我是MySQL数据库的新手，如果可能的话，我需要一些帮助和建议。我目前创建了一个非常大的网上商店，拥有超过250 gb的产品，而且还在不断增长。我已经优化了我的专用服务器和WordPress网站的最佳选择，但我仍然不满意我的网站的速度和它的一些功能，如当我使用搜索栏是非常慢。我知道我需要MySQL优化，我已经做了一些优化，但我不确定如何继续进行更多的优化或索引表。我不知道如何有效地完成它，以及在这么大的数据库上使用什么键和命令才能正确地建立索引。提前谢谢你
浏览 27提问于2021-01-17得票数 1
我想把图片上传到我的网站上。同样的图片将显示在另一个网站。因此，这是一个场景，图像上传到一个网站，并显示在两个网站。这两个网站是托管在两个不同的服务器，以及他们都有自己的数据库。
我使用的角度JS，实体框架，Web API和SQL Server 2014作为后端两个网站。目前，我正在使用ngFileUpload上传图片。请回答以下问题：-
我应该将图像上传到数据库(作为nvarchar-max)还是文件系统(FTP或本地web服务器文件系统)？我阅读了许多文章，并了解到数据库检索图像对性能有影响，但它更安全。然而，文件系统在性能上很容易，但在维护上很复杂，比如备份。因此，我无法决定在这两者
浏览 2提问于2017-09-24得票数 1
1回答
我的问题很简单: KnockoutJS搜索引擎优化友好吗？我有一个网站，并大量使用淘汰机数据模板，但我怀疑谷歌爬虫是否会发现我的网站，因为页面是一大堆模板，没有真正的超文本标记语言是present.And我怎么才能改进这一点？使用RSS？
浏览 0提问于2012-10-26得票数 8
回答已采纳
1回答
网站中的媒体交付
、、
有多大的网站向大量用户提供媒体内容？有没有可用的视频/音频流框架？他们是否将大的视频片段存储在数据库中？
我知道这不是一个具体的问题；我不是在寻找一个固定的网站--我只是在思考哪种方式是最常见的
浏览 0提问于2011-09-11得票数 1
回答已采纳
我有一些回购(对于网站)，由于图像不断变化的事实，它们正在变得非常大。
有没有一种方法可以从git中删除旧数据，以减少repo的大小？
浏览 0提问于2010-07-07得票数 2
回答已采纳
我正在使用AACDecoder来监听数据流。这里是网站：。现在我想知道怎样才能把播放器的音量调大。我正在使用MultiPlayer进行监听。
我怎么能这样做呢？
浏览 1提问于2015-05-13得票数 0
我正在尝试开发一个应用程序服务器，它将向核心网站组提供内容，并为其他也想使用这些内容的网站提供第三方服务。应用服务器将托管这些核心+第三方网站的web服务。身份验证和所有起作用的东西。数据本身将由数百万条记录组成。
这些记录将来自各种来源:API、RSS提要、REST服务等。这个应用程序服务器基本上会定期收集这些数据，并使用这些新信息更新数据库。然后，这些数据将通过某种网络服务(最有可能是REST)共享给核心网站和第三方网站。
尽管如此，我正在努力做出使用哪个框架的最佳决定。冒着失去所有可信度的风险，我目前有一大堆这样的代码被写成wordpress插件。一开始只是一个一次性的网站，后来演变成
浏览 2提问于2011-07-30得票数 0
回答已采纳
1回答
我的网站上有多张图片。但是这些图像是从存储在数据库中的字节生成的。我从byes生成了图像，并将其显示在我的网站上。但每个图像的大小非常大(70公斤)。这让我的网站变慢了。
有没有办法调整这些图像的大小(12千克)。如果有人有解决方案，请帮助我。
提前感谢
浏览 0提问于2012-08-06得票数 0
1回答
性能问题wordpress
、、、、
我们试着在网站的e主页上测试两张图片的性能。我们测试了一个图像然后另一个图像。现在的问题是，图像体积大，质量好，尺寸大，与小尺寸和低质量的图像相比，速度效果更好，尽管它本应与之相反，但请帮我找出原因。这张图片是网站首页上的第一张图片。
速度结果：
给出更好效果的图像被命名为“大”(大尺寸、大尺寸和高质量)以及其他的“小”。
大图像：
小图像：
目前在主页上使用的大图像。
浏览 10提问于2022-09-02得票数 -1
我想把一些二进制数据发布到一个网站上。文件可能有点大，所以我将其转换为base64并合成一个url，然后使用NSString stringWithContentsOfURL将url发布到网站上。
这是有效的，但它真的比我认为的要慢得多。部分原因是我的服务器有2048个字符的url限制。有没有更好的方法来发布数据？
谢谢!
浏览 1提问于2010-06-28得票数 0
回答已采纳
目前，我有一个相当大的网站，每天有大约10000名访问者。
这是一个社区网站，有新闻/博客/视频和一个大论坛。
这一切都运行在一个自制的PHP5应用程序上，性能良好，具有良好的性能。数据库是MySQL5.1数据库。
现在我已经厌倦了PHP和松散类型的框架，缺乏命名空间和适当的MVC设置，所以我在考虑用MVC3 ASP.NET重写这个站点。
现在我有了这方面的经验，但还不是MVC框架，我有几个关于性能的问题，特别是实体框架:使用实体框架值得吗？它会花费大量的开销和性能降级吗？我还不确定是否应该切换到MSSQL。
浏览 8提问于2011-01-11得票数 0
回答已采纳
1回答
不同网站缓存架构的权衡
、、、
有没有好的文章或博客文章来探讨不同网站缓存架构的权衡？
例如，对每个网站主机使用单独的缓存与使用一致的散列在每个网站主机之间共享缓存与使用专用缓存主机相比有什么利弊？如果对需要非常一致的数据使用一种模式，而对大容量但不一定要保持一致的数据使用另一种模式呢？
业界是否已经为大多数用例确定了一个通用模式？
浏览 0提问于2010-11-12得票数 2
7回答
我搜索了一大堆网站，没有发现任何代码或教程详细介绍了从单个数据库中获取表名的细节。
假设我有4个数据库，并且我想要名为mp21的数据库中所有表的名称，我可以使用哪个查询？
浏览 1提问于2011-01-10得票数 14
回答已采纳
1回答
我有一个网站，其中代码刮其他网站，以获得准确的数据。虽然代码运行良好，但性能却有相当大的滞后，因为代码首先从各个站点(有时是9个网站)下载html流，提取相关部分，然后呈现html页面。
我该怎么做才能获得最佳的表现。我应该从共享托管(godaddy)更改为我自己的服务器，还是与我的主机无关，我需要对我的代码进行更改？
浏览 0提问于2012-03-25得票数 2
回答已采纳
我对编码相当在行，但我是数据库设计方面的新手。这是一个常见的问题，但我没有看到确切的答案，所以我只想确认一下，然后我开始编码所有的东西。
我有一个购物网站，列出了很多产品。目前我有6,000个产品，但这可能会在未来增长相当大，也许有一天100,000+。我按页面列出网站上的产品，让用户搜索和排序产品。
设计和查询数据库以搜索和排序产品的最有效方法是什么？我是否只是创建一个大的产品表，然后使用如下查询：
SELECT *
FROM productTable
WHERE searchCriteria
ORDER BY sortColumn
LIMIT basedOnPageNumber
当
浏览 0提问于2016-03-05得票数 1
我正在做一个类似于网站访问者分析的项目。它将被100s的网站使用，平均每天有10,000到100,000的页面浏览量，因此数据量将非常大。
我应该使用带有websiteid的单个表，还是对每个网站使用单独的表？
改变一个有100多个网站的实时服务，每个网站都有单独的表格，这似乎是一个很大的问题。另一方面，对于如此庞大的数据，性能和可伸缩性可能会成为一个问题。任何建议，评论或建议都是非常受欢迎的。
浏览 1提问于2009-03-02得票数 6
回答已采纳
我们有一个相当大的内部MS数据库。我需要提供我们的网站上的一些买家的界面。通过我们的防火墙向网站提供数据有哪些好的选择？
目前，从外部对内部网络的所有访问都是通过Cisco VPN完成的。
虽然我们确实希望为经过身份验证的用户提供对整个数据子集的访问(通过ASP.NET网站的过滤器)，但是如果我们的所有数据都泄露了，那将是非常糟糕的。
安全是一个重要的问题。
Web服务器不在站点
数据库服务器在现场
有什么想法吗？
谢谢。
浏览 0提问于2009-11-30得票数 1
回答已采纳
我必须增加一个经典的asp网站的特定页面的请求大小限制，以便张贴更多的数据。
我进入IIS > Asp >限制属性，并在“最大请求实体体限制”属性中更改值。
奇怪的是，当我更改所有网站上的属性时，它工作得很好，但是如果我只在特定的asp页面上更改它(内容视图>右键单击文件>切换到特性视图> IIS > ASP >限制属性.)在我发布数据的地方，它不起作用。
由于明显的原因，我不想让这么大的文章出现在所有的网站上，但我不明白为什么它不能在一个网页上工作。
在我的applicationHost.config：
<location path="
浏览 1提问于2015-12-21得票数 4
2回答
我正在用PHP构建我的第一个小应用程序，并尝试做MVC。
我的网站需要相当大的城市和类别阵列。
我的问题很简单，但由于数组都是网站的数据，都是php数组，这些数组应该放在自己的模型中吗？
据我所知，模型用于业务逻辑和访问数据，因为城市和类别基本上都是数据，这证明它们有一个模型吗？
如果答案是否定的，为什么?我该怎么做？
谢谢
浏览 2提问于2013-03-13得票数 1
回答已采纳
4回答
是否有任何理由继续在一个非常大的网站日志记录？原始日志中有什么有价值的数据。
我们今天保存日志是为了“以防万一”，有人能为“以防万一”提供答案吗？
浏览 0提问于2009-08-19得票数 1
回答已采纳
1回答
是否有一种方法可以在robots.txt文件中创建基于模式的规则，供搜索引擎索引？
纽约100
纽约101
纽约102
..。
亚特兰大100
亚特兰大101
亚特兰大102
..。
我们的网站有数以百万计的记录，我们希望搜索引擎索引。
索引应该基于数据驱动的结果，遵循一个简单的模式:城市+批号。
所加载的网页显示城市地段和相关信息。
不幸的是，有太多的记录不能简单地放在robots.txt文件中(超过21 to )，谷歌有500 to的机器人文件限制。
浏览 7提问于2021-12-22得票数 1
1回答
我生成了一个BCP格式文件(xml)，用于将CSV文件导入到SQL SERVER表中。有IIS文件(代表100+网络日志)。有些网站收集5列数据，有些网站收集6列数据。前五列是相同的。
是否存在，我可以先检查CSV文件有多少列，然后才执行大容量插入命令？，这样，我就可以选择与命令一起使用的正确格式文件，而不会出现错误，说明列丢失了。
浏览 4提问于2013-06-10得票数 1
回答已采纳
我有一大堆"www.asp.net/learn/“的书签，特别是关于数据访问和安全的书签。我留着它们是为了送给新人。
该网站似乎已被清除。
有人发现了一份档案？
浏览 0提问于2010-03-17得票数 2
回答已采纳
Durandal是在初始加载/预加载期间加载视图模型/视图，还是按需加载它们。
假设我有一个非常大的网站，每个视图有100个或更多的页面，每个视图都有一个相当大的viewModel。Durandal会预先加载所有这些内容吗？
每个视图中的数据调用如何，如果预先加载它们，所有这些调用都会被触发吗？
试图理解杜兰达的行为
浏览 0提问于2013-03-03得票数 3
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
