设想一个高度可伸缩的体系结构，其中每个租户都是按区域和可用性区域划分和分布的，每个服务器都持有总数据的一个子集。还存在冗余，还有承载相同逻辑碎片的物理碎片。这很好，如果客户端知道分配给用户的所有逻辑碎片，那么在处理返回极端数量数据的请求时，客户端可以使用map/reduce样式检索所有数据。这解决了当用户的数据量大于任何单个服务器的存储、内存或计算的容量时的问题。那么我的问题是，如果一个名词微服务的数据是跨多个服务器隔离和共享的，并且每个服务器都承载着不同的用户或租户子集，我如何创建系统中所有对
浏览 4提问于2022-07-23得票数 0
2回答
我正在探索Azure数据湖，我是这个领域的新手。我探索了很多东西，读了很多文章。基本上，我必须从不同来源的数据开发Power仪表板。在典型的Server栈中，我可以编写一个ETL (提取、转换、加载)进程，将我的系统数据库中的数据导入数据仓库数据库。然后利用SSAS等技术，利用Power实现数据仓库。但是我想使用Azure数据湖，我探索了Azure和Azure ( use )。我绘制了如下的架构图。
在
浏览 1提问于2018-03-15得票数 3
回答已采纳
1回答
我一直困惑着是要创建一个数据湖还是一个数据仓库，希望一些有经验的现实世界的专业人士能给我一些启示。我的问题是：
我是否应该先创建一个数据湖，然后从湖中转换/处理这些原始数据，并将其摄取到数据仓库中？还是数据
浏览 0提问于2022-05-13得票数 2
回答已采纳
2回答
据我所知，它为您的数据存储增加了ACID事务，并通过增量引擎提高了查询性能。如果是这样，为什么我们还需要其他不支持ACID事务的数据湖呢？Delta lakes声称将数据湖和数据仓库这两个世界结合在一起，我们知道，由于它目前对操作的支持，它还不能取代传统的数据仓库。但它应该取代数据湖吗？为什么需要两份数据副本-一份在数据湖中，另一份在德尔塔湖中？
浏览 21提问于2020-07-30得票数 0
回答已采纳
2回答
我想更详细地了解数据仓库和数据湖。
可伸缩的存储存储库，保存大量原生格式的原始数据(“原样”)，直到需要时再加上可以在不损害数
浏览 0提问于2018-12-11得票数 1
在传统数据仓库中实现数据历史化是可能的(甚至是核心功能)。随着时间的推移，数据将被添加到数据仓库中，并且可以在数据中及时移动。 如果我只想使用数据湖，并为业务用户提供数据历史化，这可能吗？
浏览 36提问于2020-11-30得票数 0
回答已采纳
我试着从铜牌，银牌，金牌来理解德尔塔湖的数据流结构。Gold应该用于商业用途，并准备好通过数据仓库或某些报告服务来摄取。(我的理解对吗？)我的问题实际上是一个更深入的数据生命周期，通过摄取增量湖，直到将这些“黄金”表导出到数据仓库。
谢谢!
浏览 17提问于2020-03-11得票数 4
2回答
我的web应用程序存储使用数据，例如：执行的任务等等，我需要显示仪表板和报告的使用和性能趋势，例如：平均任务执行时间是多少？数据来自具有特定数据模型的关系数据库。
有人要求我创建一个数据记录，只是给他我所有的原始数据。我不明白这张照片里有什么数据。没有模型和关系，我的数据是无用的。而且，我没有事件流:我在关系数据库中有表。例如，“任务”表中的一行将有“打开时间”列和
浏览 0提问于2018-11-04得票数 1
1回答
从Azure数据仓库中，我们是否可以连接到Azure目录表或Lake Store文件作为外部表？
我希望能够对Azure数据仓库运行SQL查询，但希望从数据湖中获取数据。
浏览 0提问于2018-06-12得票数 0
我在Data Lake中处理大约4000个csv文件的输入文件集，当作业准备时间超过25分钟时，作业失败并出现脚本编译错误
浏览 0提问于2017-04-20得票数 2
我需要专家的意见，如何实现增量数据加载使用天青数据湖，天青sql数据仓库，天青数据工厂+聚基。采用哪种格式，我们应该将数据存储在天蓝色数据湖等。
谢谢胡丹·帕特尔
浏览 1提问于2017-08-10得票数 2
回答已采纳
1回答
在现代数据体系结构中，将数据湖划分为多个层次，数据以原始形式存储在着陆区，然后在可信/应用层进行汇总整理和存储。我相信我们甚至可以通过数据湖中的可信数据来进行报告。如果是这样的话，我想不出一种逻辑来证明数据仓库的存在是合理的。还是可信数据本身就是Datawarehouse？或者信任的数据更像是只是聚合数据，而不是做适当的建模，因此我们仍然需要数据仓库。
浏览 9提问于2022-07-25得票数 0
我正在从事一个数据湖项目，我使用(编写pyspark代码)用于ETL，使用Azure DevOps用于CICD和源代码管理。我注意到了Devops中的测试计划:我的查询是，我可以使用测试计划进行数据湖测试吗？我浏览过与网络浏览相关的测试计划，但没有发现任何与数据湖、数据库或数据仓库相关的计划。
浏览 3提问于2020-01-19得票数 0
2回答
从头开始建数据湖
、、
我正试图从零开始构建一个“数据湖”。我理解数据湖是如何工作的，以及它的用途；它遍布互联网。但是，当问题出现时，如何从头开始建立一个，就没有来源了。我想知道如果：
我知道如何运行Hadoop并将数据导入Hadoop。我想在前提数据湖上建立一个示例来演示我的经理。任何帮助都是非常感谢的。
浏览 1提问于2019-02-27得票数 2
回答已采纳
我正在我的公司里建立一个数据仓库。根据我的经验，在将数据转换为用户友好的数据之前，插入数据的初始表称为临时表。
然而，这里的技术团队使用开发、试运行和生产环境进行软件开发。
浏览 25提问于2020-02-07得票数 0
回答已采纳
我所处的位置是，我们使用Azure数据仓库中的外部表从Azure数据湖中读取数据。在性能方面，我看不到太大的区别。我假设Data Warehouse正在后台运行某种形式的分布式查询，正在转换到U-SQL(?)
浏览 1提问于2018-01-18得票数 3
根据我从微软网站和其他评论中所读到的，它说它是新的SQL数据仓库，然而，它也说它把所有这些结合在一起:数据吞吐(比如天青数据工厂)、数据仓库和大数据分析(比如数据湖)？
浏览 2提问于2020-05-01得票数 1
回答已采纳
2回答
我有几个使用Python脚本访问的外部数据API。我的脚本从就地服务器运行，转换数据，并将其存储在同一服务器上的server数据库中。我认为这是一个基本的ETL系统，使用Python和T运行。随着新API的出现，系统将有相当大的增长，并且需要更复杂的数据管道(例如，一些API数据将分拆到多个表中)。我花了几天时间研究Azure产品，这些产品可以让我运行Python脚本来访问web中的数据，并将处理过的数据存储在云数据库中。我在寻求关于其他人在类似工作中
浏览 0提问于2018-11-07得票数 0
回答已采纳
1回答
我想用必要的文献资料来定义数据仓库。在中，数据仓库这一术语也适用于复杂的数据，即视频、图像等，但在本文中，数据仓库这一术语仍未定义。
浏览 0提问于2018-12-05得票数 1
回答已采纳
1回答
如果我们能够通过Power中的Azure查询ADLS数据，而不是为连续运行SQL付费，那将是非常有利可图的。
我发现的唯一信息是，其中建议使用Power源和ADLA。
浏览 3提问于2020-02-04得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
