2回答
据我所知，它为您的数据存储增加了ACID事务，并通过增量引擎提高了查询性能。如果是这样，为什么我们还需要其他不支持ACID事务的数据湖呢？Delta lakes声称将数据湖和数据仓库这两个世界结合在一起，我们知道，由于它目前对操作的支持，它还不能取代传统的数据仓库。但它应该取代数据湖吗？为什么需要两份数据副本-一份在数据湖中，另一份在德尔塔湖中？
浏览 21提问于2020-07-30得票数 0
回答已采纳
我们是一家广告公司，我们在Azure表中存储了大量数据。比如每个用户的页面浏览量、页面动作、会话等。我们选择Azure tables而不是SQL Server的原因是数据量太大(每秒数以万计)。我们希望更进一步，并对该数据执行高级查询。在Azure生态系统中，这是可能的吗？也许是通过在他们的数据仓库产品中加载数据，或者通过一些Map Reduce查询？此外，如果上述情况是可能的，我们也在考虑在数据仓库中以微批的方式摄取数据，以确保我们有一个相对较新的副本，而不必加载大量
浏览 1提问于2016-03-07得票数 0
7回答
我听说了数据湖这个新名词。我在谷歌上查到了
数据湖是一个大规模的存储库和处理引擎.数据池提供“任何类型的数据的大量存储、巨大的处理能力和处理几乎无限并发任务或作业的能力”。术语数据湖通常与面向Hadoop的对象存储相关联。在这种情况下，组织的数据首先加载到Hadoop平台，然后将业务分析和数据挖掘工具应用于其驻留在Hadoop的商品计算机集群节点上的数据。我对Hadoop和<em
浏览 8提问于2016-03-14得票数 16
我已经模拟了一些设备，这些设备正在向IoT集线器存储发送消息，并通过使用Azure Data创建管道将数据(以JSON格式编码)复制到Azure Data Gen2。如何将这些json输出文件转换为CSV文件，由数据湖引擎处理？我不能直接在蔚蓝数据湖处理所有的json遥测吗？
浏览 0提问于2019-08-06得票数 0
回答已采纳
1回答
即使经过很多资源，我也不明白什么是湖房，所以我想问一问。如果我们有Azure Gen 2存储、ADF和Azure数据库，可以将传入的CSV文件转换为Delta表，可以称为"Lakehouse“体系结构，还是称为"Delta Lake"？或者是"SQL分析“引擎在Delta湖层之上使它成为了"Lakehouse"？
请澄清。
浏览 0提问于2021-06-18得票数 1
回答已采纳
2回答
我们在Hadoop文件系统中创建了一个新的数据湖。数据以ORC的形式存储。目前分析系统直接连接到数据湖来读取这些ORC文件。
有没有办法在数据湖和分析系统之间创建一个中间层来服务数据？
浏览 16提问于2018-10-04得票数 0
在传统数据仓库中实现数据历史化是可能的(甚至是核心功能)。随着时间的推移，数据将被添加到数据仓库中，并且可以在数据中及时移动。 如果我只想使用数据湖，并为业务用户提供数据历史化，这可能吗？
浏览 36提问于2020-11-30得票数 0
回答已采纳
我已经使用azure synapse link将我的dataverse表同步到az Data lake。我验证了表确实出现了。一段时间后，当我检查时，那里没有表。不知道为什么。需要帮助。
浏览 3提问于2021-07-07得票数 0
Azure Data v2有一个Get元数据活动，它可以读取存储在ADLS中的文件上的元数据。它可以在移动/复制文件时保留文件上的元数据。但是，是否有一种方法可以使用ADF在湖文件上添加或修改元数据？
浏览 6提问于2020-12-04得票数 1
回答已采纳
2回答
从头开始建数据湖
、、
我正试图从零开始构建一个“数据湖”。我理解数据湖是如何工作的，以及它的用途；它遍布互联网。但是，当问题出现时，如何从头开始建立一个，就没有来源了。我想知道如果：
我知道如何运行Hadoop并将数据导入Hadoop。我想在前提数据湖上建立一个示例来演示我的经理。任何帮助都是非常感谢的。
浏览 1提问于2019-02-27得票数 2
回答已采纳
2回答
我想更详细地了解数据仓库和数据湖。
可伸缩的存储存储库，保存大量原生格式的原始数据(“原样”)，直到需要时再加上可以在不损害数
浏览 0提问于2018-12-11得票数 1
在dataframe中，我的行包括“机器学习、数据、ia、分段、分析”或“大数据、数据湖、数据可视化、市场营销、搜索引擎优化”等句子。因此，术语应该是“分析”、“大数据”、“数据湖”、“英语”等等。你知道如何实现这一点吗？
浏览 10提问于2022-06-15得票数 0
回答已采纳
2回答
从湖中读取数据
、、、、
我需要从azure数据湖中读取azure数据，并在sql中应用一些连接，并在Web UI中显示。数据大约是300 gb，从azure数据工厂到azure sql数据库的迁移正在以4 4Mbps的速度进行。我也试过使用sql server 2019，它支持polybase，但复制数据也需要12-13个小时。我也尝试过cosmos db来存储湖中的数据，但似乎需要很长时间。任何其他我们可以从湖里读取数据的方法。一种方法可
浏览 27提问于2019-10-17得票数 0
我需要在AWS上构建一个数据湖，但是我不知道S3和HDFS到底有什么不同。我在网上找到了一些答案，但我仍然不明白真正的区别。
我还需要知道是否有人在AWS中拥有HDFS和S3的数据湖架构。
浏览 2提问于2019-07-11得票数 1
回答已采纳
/tests/.my_test_env
如何构建Docker镜像来模拟Azure数据湖(第2代)？我使用Python3SDK与数据湖进行交互，文档在这里-- 。
浏览 3提问于2020-08-27得票数 2
希望在订阅/帐户中注册所有数据源，但是缺少"Azure (多个源)“选项。其他来源(HIVE、SAP、AWS S3)也是如此。
浏览 2提问于2021-01-19得票数 1
回答已采纳
我们正在尝试使用Apache Superset来可视化业务数据，其中一些存储在基于SQL的数据库中，但其中一些(例如外部天气数据)我们需要通过公共API(通常是REST，但有时也是基于推送的微服务，如websocketsSuperset是否可以以这种方式显示数据，或者它是否绑定到SQL或类似SQL的查询/API？
浏览 8提问于2020-03-24得票数 2
对于像我这样的用户来说，这似乎是一种困惑，因为azure blob存储和蔚蓝数据湖存储有什么主要区别，在哪个用户情况下，azure blob存储比蔚蓝数据湖存储更适合，反之亦然？
谢谢。
浏览 9提问于2020-04-05得票数 4
回答已采纳
1回答
数据湖方法(根据幻灯片5 )是：
做分析-使用像Hadoop这样的引擎。但是，假设我们已经将许多数据集加载到我们的数据池中，那么如何以自动化和可伸缩的方式进行模式发现呢？using是否支持动态模式发现，或者使用ADLA或其他工具集来实现它的好方法？
浏览 1提问于2017-07-10得票数 2
回答已采纳
1回答
我正在尝试构建一个Azure Data管道，它从Azure数据湖中获取数据并对其进行转换。
在我看来，这其中的权衡并不明显。
浏览 0提问于2019-04-17得票数 1
回答已采纳
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号