数据仓库与大数据处理
是云计算领域中的重要概念，它们在数据管理和分析方面起着关键作用。
数据仓库是一个用于存储和管理大量结构化和半结构化数据的集中式存储系统。它通过将来自不同数据源的数据进行抽取、转换和加载（ETL）处理，将数据整合到一个统一的存储位置。数据仓库通常采用星型或雪花型的数据模型，以支持复杂的查询和分析操作。数据仓库的优势包括高性能的查询和分析能力、数据一致性和可靠性、支持决策制定和业务智能等。
在大数据处理方面，云计算提供了强大的工具和平台来处理海量的数据。大数据处理涉及到对大规模数据集进行存储、处理、分析和可视化等操作。云计算平台提供了分布式存储和计算资源，使得大数据处理变得更加高效和可扩展。常见的大数据处理技术包括分布式文件系统（如Hadoop HDFS）、分布式计算框架（如Apache Spark）、数据流处理（如Apache Kafka）和机器学习算法等。
数据仓库和大数据处理在许多行业和应用场景中都有广泛的应用。例如，在电子商务领域，数据仓库可以用于存储和分析用户行为数据，以提供个性化推荐和营销策略。在金融领域，数据仓库可以用于存储和分析交易数据，以进行风险管理和欺诈检测。在医疗保健领域，数据仓库可以用于存储和分析患者数据，以支持临床决策和疾病预测。
腾讯云提供了一系列与数据仓库和大数据处理相关的产品和服务，包括云数据仓库（CDW）、云数据仓库灾备（CDW-DR）、云数据仓库分析（CDW-ANA）、云数据仓库加速（CDW-ACC）等。这些产品提供了高性能的数据存储和处理能力，以及灵活的数据分析和查询功能。您可以通过腾讯云官方网站（https://cloud.tencent.com/）了解更多关于这些产品的详细信息和使用指南。
相关·内容
2回答
我知道Google BigQuery是一个数据仓库，但是Dataproc、Big Table、Pub/Sub被认为是数据仓库吗？这会使Hadoop成为一个数据仓库吗？
浏览 2提问于2018-09-24得票数 1
回答已采纳
2回答
我想更详细地了解数据仓库和数据湖。
在我看来，这个话题有不同的信息。Inmon将数据仓库定义为
一种面向主题、综合、时变和非易失性的数据收集，以支持管理层的决策过程。
现在我明白了，这只是一种架构形式，并不意味着任何技术。这意味着底层数据可以是任何也可以是S3对象存储的结构。此外，还提出了一个具有数据集成过程的数据仓库。
当谈到数据湖时，我发现了以下定义
可伸缩的存储存储库，保存大量原生格式的原始数据(“原样”)，直到需要时再加上可以在不损害数据结构的情况下接收数据的处理系统(引擎)。
取自。
现在，数据仓库能成为一个更严格的数据湖吗？有一种观点认为，数据仓库必须使用ETL，但
浏览 0提问于2018-12-11得票数 1
1回答
我正在学习Hadoop，偶然发现了蜂箱。我还了解到，HIVE是一个用于分析查询的数据仓库。
如果数据仓库是多个数据源的聚合，为什么公司要使用多个数据源并进行聚合？为什么他们不能直接写到数据仓库，因为这将减少聚合和处理的开销？
这是因为如果所有用户都从同一个数据仓库读取时会产生的开销吗？
我想知道，如果我们有高度可伸缩的数据仓库，为什么我们需要数据库呢？
(只有在大公司的背景下才能产生大量的数据。因为我能理解大多数公司甚至可以用两个数据库来管理。)
浏览 12提问于2022-01-30得票数 0
回答已采纳
1回答
我们提供一个在线订阅产品，使我们的用户可以研究和分析他们感兴趣的行业的金融数据。因此，我们有各种工具从不同的来源加载数据、清理数据、处理数据、基于用户交互的标记数据等等。基本上，处理数据操作的各种流程和工具。
我们正在对这些数据过程进行全面改革，我正试图找到一个正确的术语来称呼这些过程，无论是为了研究目的，还是为了我的演讲。到目前为止，我考虑的名字：
ETL --这个术语似乎过于专注于加载数据。我们的数据处理也广泛地处理用户输入。
数据仓库--这个术语似乎过于通用和宽泛。我不确定我们的流程在本质上是否是数据仓库。
我正在寻找一个术语，我可以用来命名或描述我们的过程。
浏览 0提问于2015-08-06得票数 1
回答已采纳
1回答
最近，我一直在比较火花和Flink的一个全新的项目。在这个项目中，流功能不是那么重要。对~(90) is数据进行批量分析是最重要的。稍后，我将在数据分析中应用ML和数据挖掘。
在搜索时，我发现很多文章，演示和视频声称Flink是下一代的分析解决方案。没有多少文章能为火花辩护。另一方面，星火是(或曾经？)非常流行，并广泛部署在非常大的生产系统。
我的问题是：对于我的用例来说，流并不重要，我是拥抱Flink还是从Spark2开始？
顺便说一下，我读过。这不能给我一个好的答案。
更新，2018年4月，：我们最终选择了火花。显然，除了表现之外，还有更多的问题要解决。Cloudera、Hortonwor
浏览 5提问于2017-05-19得票数 3
回答已采纳
2回答
我计划了各种管道将增量数据从本地SQL DB复制到Azure数据仓库，有时行数会有一些问题，比如行数不匹配或相同的行被复制，我如何检查哪些行正在被复制到数据仓库，以便如果存在冗余或差异，我应该知道。
我知道ADF V1管道监控功能只显示被复制的行数，而不显示被复制的行，有没有办法让我找出哪些被复制，哪些没有被复制。
当我们处理有百万行的表时，这件事变得更加困难。
浏览 16提问于2018-02-08得票数 0
我爱我的朋友。然而，最近我一直在做一些研究来了解主键标识的实际利弊，我发现了，它很好地总结了它。
作者在文章中指出：
对数据仓库非常有用；
是使用身份而不是GUID的优点之一。
我的理解是，对于特别大的数据库，如数据仓库，大小确实很重要--不过，文章似乎没有解释其他原因。所以我问：
为什么GUID对于数据仓库来说是个坏主意？
浏览 3提问于2012-06-14得票数 3
回答已采纳
1回答
在数据仓库环境中增强BI
、、、
我的公司目前正在SQL server中建立一个企业数据仓库。我们正在考虑使用PowerBI，但我很难理解PowerBI在数据仓库环境中是如何工作的。 例如，除了更美观的报告之外，它还能为我们提供什么，而我们现在使用的Cognos没有呢？它是如何处理海量数据的？
浏览 13提问于2020-04-03得票数 0
回答已采纳
我有一个Server 2008 R2数据库服务器，它承载了一个数据仓库数据库。在此服务器上还安装了及其两个数据库ReportServer和ReportServerTempDB。
出于性能原因，我希望分离数据仓库数据库和Reporting。我有另一台可以安装SSRS的服务器。这两台服务器都是虚拟的，因此它们的规范很容易更改，或者在必要时可以“创建”其他服务器。
我无法理解的是，最好的地方是举办ReportServer和ReportServerTempDB。我可以看到三个选择：
将它们留在数据仓库数据库中。
将它们放在安装了Reporting的服务器上
专门创建另一个服务器来承载这两个数据库。
使
浏览 0提问于2013-10-15得票数 3
回答已采纳
我正试图在地面上旋转一个蓝色的突触池。目前，从https://registry.terraform.io/providers/hashicorp/azurerm/latest/docs/resources/synapse_sql_pool上的文档可以看出，您必须使用synapse工作区，该工作区还包括数据工厂集成和powerbi等。 现在，我们只想要数据仓库，而不是所有其他花哨的东西。正如您在Azure Portal中所看到的，您可以自由地使用或不使用工作区来启动synapse分析DW (请参阅框中的右图，“以前的SQL DW")： ? 当你旋转它的时候，你就有了一个独立的DW...
浏览 11提问于2020-10-31得票数 0
我试图比较创建数据仓库的解决方案，这是大约20 TB使用微软产品在现场和Azure。我已经检查了SQLServer2019大数据集群，但是有一些问题。我们能用这个产品作为现场数据仓库吗？我们这种产品的缺点和优点是什么？
浏览 0提问于2021-02-04得票数 -1
我正在使用ADF连接到源并将数据放入Azure data Lake存储中。在将数据放入data Lake Store之后，我想做一些转换，聚合，并在SSRS报告中使用这些数据，也用于创建多维数据集。
谁能向我推荐哪个是最佳选择(Azure Data Lake Analytics或Azure SQL DW)？
我希望在这里做出决定，在数据湖之后选择哪一个。
浏览 0提问于2018-04-10得票数 6
我正在使用AdaptiveServerEnterprise15.7设计一个大容量的数据仓库。该公司已经在使用SSAS 2008 R2进行大部分数据分析，并希望在上述数据仓库的基础上继续使用它。
我想知道社会上是否有人曾经做过这样的事情，并且可以分享一些建议。关于这个数据仓库的一些估计如下：
尺寸正在缓慢变化(每3天左右)
每天将有1500万新记录(12项措施)
我最关心的是处理的性能，而不是查询。
干杯,
RA
浏览 1提问于2012-09-28得票数 1
我必须为贷款申请数据库设计数据仓库，并且在选择如何存储详细数据方面有问题。应用程序在OLTP数据库存储资本和当前余额每月处理一次，但为了报告经常需要知道当前余额在任何给定的日期计算的利息，费用等，所以应用程序生成这在飞行中。问题是-为每笔贷款存储每天的所有数据是一个好主意吗？这将在一个月内产生数百万条记录！这种情况的最佳实践是什么？还在计算部分数据吗？
浏览 1提问于2014-01-20得票数 0
我在Ubuntu远程服务器上用Postgres数据库成功地设置了Airflow，看起来很棒。
我能够连接到我的数据仓库(一个单独的服务器)，并轻松地将查询作为任务发出。这很简单，因为安装了Airflow的服务器实际上正在发出查询。
因为我现在只是测试Airflow，所以它安装在一个相当小和低功率的服务器上。有没有办法安排任务在我强大的Windows桌面上运行？或者，利用本地计算机下载数据/处理文件，并让Airflow知道任务已成功完成的最佳方法是什么？
浏览 12提问于2017-03-07得票数 6
回答已采纳
我正在为我们的网站建立一些报告材料(一个相当大的网站，每天有几百万的页面浏览量)，我想知道有没有什么好的免费/开源数据仓库系统。
具体地说，我只想找一些东西来存储数据--我计划为它构建一个自定义的前端/UI，这样它就可以显示我们关心的信息。然而，我不想为此构建一个定制的数据库，虽然我非常确定SQL数据库在这里不能工作，但我不确定到底要使用什么。任何有帮助的文章的指针也将不胜感激。
编辑:我应该提一下--我曾经简要介绍过的一个数据库是MongoDB。它看起来可能行得通，但他们的“用例”特别提到数据仓库“不太适合”：。而且，它似乎并不是专门针对数据仓库的。
浏览 5提问于2009-10-24得票数 4
回答已采纳
我想对一个非常大的PostgreSQL 8.3数据库进行分区。，
分区可以提供几个好处：
..。
很少使用的数据可以迁移到更便宜、更慢的存储介质。
怎样才能把桌子重新定位到其他媒体或电脑上呢？亚当
浏览 3提问于2010-03-01得票数 6
回答已采纳
我注意到代码工作簿在从表中查询时太慢了。它比使用数据仓库中的SQL要慢得多。为迭代分析快速提取和连接数据的正确工作流是什么？
浏览 4提问于2022-02-16得票数 0
我正在使用Google Data Flow来实现一个ETL数据仓库解决方案。
看看谷歌的云服务，DataProc似乎也可以做同样的事情。
而且看起来DataProc比DataFlow便宜一点。
有没有人知道相对于DataProc，DataFlow的优缺点
为什么谷歌同时提供这两种服务？
浏览 1提问于2017-09-27得票数 66
我非常了解SSIS，Informatica，用于执行ETL过程&将数据加载到数据仓库。
但我没有足够的机会接触Hadoop。
我只是想知道
我们可以用Hadoop代替ETL工具，比如Informatica用于ETL过程吗?
在这里，我基本上是在谈论关系表结构。我知道hadoop可以用于从非结构化数据中提取信息。
浏览 7提问于2014-05-29得票数 1
我正在尝试用Azure做实时分析，当我通过服务时，我已经看到Azure提供的三个服务是HDInsight(Kafka)，Azure stream Analytics和Azure Events hub我必须使用哪些服务。我正在尝试从SQL服务器或twitter或其他地方实时流式传输数据，并将其存储在Azure数据仓库或data Lake中。
浏览 1提问于2019-07-11得票数 0
2回答
我有一个非常大的SQL Server表(2.2亿条记录)，大小为233 of。我需要将此表导出为平面文件，并通过Putty将其发送到另一个服务器，该服务器将直接将此表插入到数据仓库中。
这个数据仓库有一个特定的模式，数据应该如何加载(每个列的特定数据类型和长度)。
首先，我需要通过更改SQL Server中列的数据类型和数据长度来执行一些验证。我使用alter table更改了数据类型和数据长度，但最终得到了错误。因此，我尝试将该表插入到一个新的表中，同时对那些应该坚持数据仓库模式的列使用SUBSTRING和CAST函数。
由于事务日志文件驱动器和TempDB驱动器中的空间限制，这是不可能的。
浏览 24提问于2018-08-04得票数 1
我计划将页面压缩应用于我的数据库中的一些大表(一个数据仓库)。这些表相当大，有超过150亿行。
当我在测试环境中应用压缩时，整个过程花费了大约22个小时。这些表每天都通过相当长的运行查询进行访问。
在应用压缩时，会对正在运行的查询产生任何影响吗？有锁等我应该知道吗？
是否有交错的方法来应用压缩？
你可能有其他的投入/反馈吗？
浏览 0提问于2012-10-31得票数 9
1回答
复制SQL数据仓库的架构？
、、、、
我想将数据仓库的表、procs、用户等复制到一个新的暂存DW中，但是我不需要任何数据。
我尝试用Redgate SQL Compare创建快照，并得到一个错误，说明不支持DW快照。我也尝试过编写DW脚本，但是我遇到了一个错误：“在版本13.0.0的DwTableDistribution Server的SqlDatabase版本数据库中不支持‘SqlAzureDatabase’属性”。
我剩下的唯一想法就是恢复prod的完整副本并删除数据，但这似乎是一项相当大的任务，而我所需要的只是DW的骨架。有什么想法吗？
浏览 8提问于2020-02-13得票数 2
回答已采纳
我使用AWS Aurora PostgreSQL。PS版本:13(更新问题)
我们使用逻辑插槽(Wal2json)复制到数据仓库。最近，一个大容量更新查询更新了4000万行。
之后，我的集群的IOPS太高，队列深度达到80。所有的行动都被阻止了。
然后，我们删除复制槽，一切恢复正常。我知道批量更新应该分批完成。只是想弄清楚这是否是逻辑复制中的瓶颈。我们将来如何处理这样的用例？在这里，pgoutput有意义吗？
浏览 0提问于2022-11-28得票数 0
2回答
我试图掌握大数据，主要是如何管理大数据。
我熟悉数据管理和数据生命周期的传统形式；例如：
收集的结构化数据(如网页表格)
存储在数据库服务器RDBMS中的表中的数据
数据清理后，ETL进入数据仓库
数据使用OLAP多维数据集和其他各种BI工具/技术进行分析。
但是，在大数据的情况下，我对第2点和第3点的等效版本感到困惑，主要是因为我不确定每个大数据“解决方案”是否总是涉及使用NoSQL数据库来处理和存储非结构化数据，以及数据仓库的大数据等效是什么。
据我所见，在某些情况下，NoSQL并不总是被使用，而且可以完全省略--这是真的吗？
对我来说，大数据生命周期就是这样的：
浏览 7提问于2017-04-20得票数 7
回答已采纳
我正在经历这种新技术的使用。然而，我有一个疑问。
为什么要选择BigQuery而不是其他应用程序，比如Teradata？大查询相对于这些查询有什么优势？具体来说，我想知道，在数据仓库环境中，为什么和何时应该使用BigQuery？这对我的生意有什么好处？
请尽快让我知道这些，因为我们可能会接受这一新技术。
你好，丽娅
浏览 2提问于2012-07-02得票数 1
我有一个从数据仓库中提取的非常大的数据集。要将数据集下载到我想要运行lme4的机器上，需要很长时间。我想知道是否可以将数据处理成协方差矩阵，下载该数据(小得多)，并将其用作lme4的数据输入。我已经使用SAS为多个回归模型做了类似的事情，我希望我可以为lme4创建这种类型的输入。
谢谢。
浏览 9提问于2013-02-06得票数 0
2回答
我有一个客户，他有一个现有的1.5Tb数据仓库，目前正在计划在一个新的环境中完全刷新数据仓库。他们的基础设施管理器组织了两个服务器，每个服务器都有SQL 2017标准，现在要求我为新的DW数据库/实例规划一个HA/DR计划。
我立即想到使用AlwaysOn可用性组，尽管我以前从未使用过它们，而且我所读的文章中都没有提到典型的数据仓库工作负载--这都是OLTP应用程序。随着一个大的每日ETL进程和一个较小的日内ETL进程运行在他们当前的DW上，这会对我们如何处理这个问题产生影响吗？
谢谢-任何帮助我在正确的方向在这里将是有益的！
浏览 0提问于2019-08-22得票数 7
2回答
我正在连接到一个小型C# 2010应用程序中的一个非常大的C#数据仓库。我过去只使用MS。
对于数据库调用和IBM.Data.DB2，使用ODBC有什么区别吗？
浏览 3提问于2015-06-30得票数 0
回答已采纳
目前，我的雇主有一个团队来创建桌面仪表板，另一个非常大的团队为外部客户创建临时和定期报告。这两个团队都从许多数据库和其他来源提取数据。对于每个报表，它们要么创建驻留在机器上的脚本，要么创建驻留在源数据库中的存储proc，有时在jenkins实例上创建计划作业，或者手动复制和粘贴查询结果。这是一堆记录不清的烂摊子。
我的解决方案(对它们的工作方式和实现成本影响最小)是创建一个数据库，所有提取的数据都将在数据库上运行，因此报表和仪表板只能访问这个单一的源。一个运行常规提取作业的任务调度程序和一个相当简单的自定义软件应用程序，它跟踪源数据库的更改并通知项目所有者(作业)，但数据库所有者也可以使用它来
浏览 0提问于2020-04-27得票数 0
2回答
有关许可证和修补SSAS的信息
、、、、
我有一个用于数据仓库的服务器，它有两个SSAS (SQL SERVER Analysis Services)实例。
数据仓库没有那么大，也没有200 on那么大，我每天都备份整个数据。
现在他们让我修补\升级它：
谢谢，是的，这表明它是2016年的SP1。我提出这个问题的原因是，正如我在周五指出的，当我们测试如何从动态连接到Analysis的Power中创建度量(例如，年度网络应用程序)时，这导致了意想不到的错误。我们的研究表明，这很可能是由您的Analysis版本造成的，解决方案是安装一个累积更新(CU) 3 SP1用于Server 2016，或者是一个最近的CU (如您在页面左侧的列表中所
浏览 0提问于2018-10-02得票数 -1
回答已采纳
我第一次接触数据仓库，我想知道是否有必要在事实和维度之间设置外键约束。没有它们有什么大坏处吗？我目前正在使用关系星型模式。在传统的应用程序中，我习惯于使用它们，但我开始怀疑在这种情况下是否需要它们。我目前正在Server 2005环境中工作。
更新:对于那些感兴趣的人，我遇到了一个问同样的问题。
浏览 10提问于2010-05-12得票数 7
回答已采纳
想要了解Netezza还是Hadoop是适合以下目的的选择：
feeds.Generate 从几个相当大的在线源中提取提要文件，有时超过GB.--清理、过滤、转换和计算来自不同维度的度量的更多信息，类似于数据仓库立方体是如何实现的，以及援助any应用程序，以便使用或任何其他标准机制更快地访问最终数据/度量。
浏览 8提问于2010-12-29得票数 6
回答已采纳
我有一个包含1000万条记录的大表，用于我们现有的应用程序之一。我们正在开发一个新的应用程序，它只需要7000条记录的大表的过滤结果集。 我的问题是，与使用过滤条件查询大表(它将连接到模式中完全独立于现有应用程序的少数其他表)相比，使用7000条记录的较小表是否会有性能提升？或者我应该避免冗余，在一个表中维护所有数据？这是数据仓库中的设计。请给我建议！ 谢谢!
浏览 16提问于2019-06-18得票数 0
回答已采纳
3回答
因此，和大多数企业公司一样，我们在Hadoop中建立了一个数据仓库，在Hive中支持用户查询，现在，经过几个月的用户接受测试之后，每个人都对最终用户使用它不是标准(Oracle/Netezza)数据库进行即席数据分析感到有点惊讶。虽然我知道这可能是一种非常愚蠢的项目执行方式(我们应该在构建产品之前研究用例和最佳匹配技术)，而且我知道Hadoop与单节点机器有何不同的基本技术方面。我仍然想了解，在任何情况下，使用Hadoop/Hive是否对数据仓库有意义？例如,
查询性能是否总是存在权衡，或者是否可以通过配置更改、硬件的横向缩放来优化？
它能像Netezza一样快吗?Netezza使用非
浏览 0提问于2019-01-17得票数 0
回答已采纳
1回答
我有一个相当大的数据集1460(n)x81(p).大约38个变量是数字变量，rest是介于2-30之间的因素。我正在使用*包中的dummy.data.frame来编码用于运行回归模型的因子变量。
但是，当我运行以下代码时：
train_dummy <- dummy.data.frame(train, sep = ".", verbose = TRUE, all = TRUE)中的一些列是从原始数据集中删除的。
以前有没有人遇到过这样的问题？
链接到原始培训数据集：
正在删除原始数据集中的许多列，包括响应变量SalePrice。对于尝试什么有什么想法/建议吗？
浏览 4提问于2017-03-15得票数 1
我有一个预览版的Azure Sql数据仓库正在运行，在我通过BCP导入一个大表(大约80 GB)之前，这个预览版一直工作得很好。现在，所有的表，包括小的表，都不响应一个简单的查询
select * from <MyTable>
对系统表的查询仍在运行。
select * from sys.objects
BCP流程已在周末结束，因此任何统计数据更新现在都应该已经完成。有没有办法弄清楚是什么让这一切发生的？或者至少当前正在运行的是什么，以查看是否有阻塞？
我正在使用SQL Server Management Studio 2014连接到数据仓库并执行查询。
浏览 5提问于2015-09-01得票数 1
2回答
数据仓库表格索引？
、、、、
也许我误解了什么，但我记得我读过一篇文章，其中说没有理由在非常大的数据仓库表上创建非聚集索引。这是因为索引本身会变得如此庞大。应该只考虑对这些表进行分区。我说得对吗？我对这些案子没有实际经验。
浏览 0提问于2011-09-09得票数 2
回答已采纳
1回答
各位朋友：
我们正在构建一个ETL进程，以便在64位操作系统上使用SQL Server2005SSIS加载中型维度数据仓库。我们计划使用SSIS的校验和包来管理SCD(渐变维度)。
尽管我们正在使用SSIS校验和包进行概念验证，但在实际生产场景中使用它并不舒服。我听说它不适合64位操作系统。此外，由于它不是开箱即用的SSIS产品，因此安装该软件包将是一个麻烦。
你们怎么想的？我应该使用老式的T-SQL校验和，还是应该尝试一下这个包？有没有人有在大容量ETL过程中使用它的经验？
浏览 1提问于2009-12-18得票数 0
回答已采纳
1回答
我有一个要求，在那里要监视数据仓库的总体情况。我很困惑，需要一个清晰的画面。数据仓库与数据库不同吗？
例如：对于监视数据库，我们将监视其可用性、表空间、缓存、连接和其他高级指标。
我们可以在哪些参数上监视数据仓库？
浏览 0提问于2014-08-29得票数 2
回答已采纳
我将实现一个使用Sharepoint 2013配置Microsoft 2012 (包括SSRS、SSIS和SSAS)的环境。我有一些开发人员将使用SQL Server 2012工具构建数据仓库，包括多维数据集和模型，还有最终用户将使用Excel 2010和Powerview以及Powerview通过Sharepoint 2013。
如果我需要64位基础设施和工具来达到所需的性能水平，请让我知道好吗？
浏览 0提问于2013-12-03得票数 0
回答已采纳
在Server 2000和2005年的日子里，查询中的最大表数为256.。
MySQL有类似的限制吗？
我知道这样大的查询意味着数据库设计有问题，或者应该使用某种数据仓库解决方案，但是让我们暂时忘记这一点，关注MySQL的理论能力。
浏览 0提问于2011-01-04得票数 7
回答已采纳
1回答
带有多个仓库的仪表板
、、、
我在寻找关于可能的方法的反馈。我正试着把至少十几个不同的仪表板放在一起，这些仪表板看的是各种不同的主题，有着重叠的维度。我遇到的问题是所请求的数据存储在至少4个非常大的数据仓库中，所有这些数据都具有不同的规范化和数据标准化级别。几乎每个仓库中的所有数据都使用来自同一个操作数据存储的相同数据，只是以不同的方式存储、标准化或聚合。
我的问题是，是否有必要建立一个新的数据仓库，将来自这些仓库的必要数据组合起来，并将其专门存储在我需要创建的十几个仪表板中？还是更好的方法是依赖仪表板应用程序混合工具，并让每个仪表板连接到每个已经建立的数据仓库？
谢谢你的反馈！
浏览 4提问于2021-01-22得票数 0
回答已采纳
1回答
数据仓库和MOLAP服务器之间有什么区别？数据存储在数据仓库和MOLAP服务器上吗？
当您提出一个查询时，您是将其发送到数据仓库还是MOLAP服务器？
对于ROLAP，ROLAP服务器向数据仓库(存储事实表和维度表)提出SQL查询，然后进行分析是有意义的。但是，我在某个地方读到ROLAP直接从操作数据库(OLTP)收集数据，但是，数据仓库在哪里/什么时候使用呢？
浏览 2提问于2017-12-06得票数 1
回答已采纳
2回答
现代商业智能解决方案
、、、、
构建商业智能解决方案的现代方法是什么？我看过PowerBI，但我想知道最适合它的数据源是什么。它仍然是传统的数据仓库解决方案，应该用作数据源吗？我也听过很多关于数据湖的讨论，但对此了解不多。或者我应该只使用常规的关系数据库作为源？有人对此有什么看法和建议吗？
浏览 1提问于2018-01-12得票数 0
1回答
使用角角将图像分割成子部分
、、、、
我想做一个的实现。
为了做到这一点，我想将一幅图像划分为64x64个子正方形区域，如图中所示(例如，256x256大小的图像将被划分为大小64x64的16个部分)。
我已经能够做到这一点，作为我的预处理步骤，但我希望这项工作能在推理时间完成。我做了一些研究，似乎可以使用lambda层来实现这一点。然而，我仍然无法意识到这一点。我必须承认，我仍然很难理解这一切是如何运作的。
浏览 1提问于2020-02-03得票数 0
回答已采纳
1回答
数据建模和维度建模有什么区别？
、、、、
我一直在学习数据仓库的概念，我发现这两个主题有点令人困惑。我读过多篇博客文章，我明白数据建模包括三个步骤
概念数据模型逻辑数据模型物理数据模型
在数据仓库中，我们需要执行某些步骤：
步骤1:确定维度
步骤2:确定措施
步骤3:标识维度的属性或属性
步骤4:确定度量的粒度
这些建模技术相互关联吗？如果是的话，这有什么关系。如果有人问，如何设计一个数据仓库，什么应该是正确的答案。在设计数据仓库时，这些建模技术从何而来。
如果有人能为我提供任何关于数据建模和维度建模场景的链接/资源，这将是非常有帮助的。
浏览 0提问于2020-11-19得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
