1回答
如何使用用户分配的标识从数据库访问ADLS容器
azure、azure-databricks、azure-managed-identity、azure-data-lake-gen2
我有一个带有blob容器的ADLS存储帐户。我已经成功地在Databricks中挂载了带有服务主体的ADLS，并且能够对数据进行必要的转换。请提出一个工作解决方案或任何有益<
浏览 6提问于2022-03-08得票数 0
3回答
AWS湖形成: s3://abc/的湖形成许可不足
amazon-web-services、amazon-s3、aws-lake-formation
我正在尝试从AWS湖编队控制台设置一个数据集。我按照下面的资源进行同样的操作：对s3的湖形成许可不足：
有人能帮上忙吗
浏览 0提问于2020-09-15得票数 10
1回答
Linux内核如何处理只针对谱变体1而不是变体2修补的新芯片？
linux-kernel、performance、cpu、intel、vulnerability
芯片如何修补幽灵变体1和熔毁熔毁，如威士忌湖和琥珀湖，如何处理谱变体2？我在找一台新笔记本电脑。目前正在评估联想x390。它将与威士忌湖一起上市，该公司声称对熔毁和幽灵变体有硬件修复。根据南德科技公司的说法
最大的性能标志是解决谱变体2。威士忌湖和琥珀湖都没有减轻v2的影响，但是威士忌湖对一些更危险的攻击(如v3和L1TF )进行了修复。威士忌湖也提供新的性能回收箱，因为该平台也在
浏览 0提问于2019-02-28得票数 6
1回答
按年/月/日而不仅仅是日期划分增量/星火表有什么好处？
apache-spark、databricks、delta-lake
在许多数据湖中，我看到数据是按年、月、日划分的，例如：与按日期进行分区相比，这样做有什么好处？例如：我能想到的唯一优势是，例如，分析人员希望查询特定月份/年的所有数据。如果只是按日期进行分区，则必须在分区键上编写带有计算的查询，如下面的psuedocode所示：
SELECT * FROM myTable WHER
浏览 1提问于2022-01-17得票数 5
回答已采纳
7回答
Hadoop Vs数据湖
hadoop、data-warehouse、data-lake
我听说了数据湖这个新名词。我在谷歌上查到了
数据湖是一个大规模的存储库和处理引擎.数据池提供“任何类型的数据的大量存储、巨大的处理能力和处理几乎无限并发任务或作业的能力”。术语数据湖通常与面向Hadoop的对象存储相关联。在这种情况下，组织的数据首先加载到Hadoop平台，然后将业务分析和数据</em
浏览 8提问于2016-03-14得票数 16
2回答
从一个DataLake到另一个DataLake的Azure数据工厂复制
azure-data-lake、azure-data-factory-2
我需要建立一个能够从一个DataLake复制到另一个的管道，但是到目前为止，通过谷歌搜索，我找不到任何与之相关的东西，有人能给我指出正确的方向吗？非常感谢。
浏览 16提问于2018-02-21得票数 0
9回答
大数据属新兴领域，专业人才匮乏，高端人才更是企业的争抢对象。踏入大数据领域的我们，高端的AI技术更是我们所需要了解的，而作为初入者，如何追赶大数据AI热潮？怎样去做，才能更加占据优势？
浏览 1411提问于2018-03-30
2回答
如果我删除Azure数据湖分析帐户，它会删除它的默认数据源吗？
azure、azure-data-lake
我对Azure相当陌生，我只是尝试Azure数据湖分析。为了测试目的，我创建了一个新的Azure帐户，并且希望现在就删除它，但是在安装过程中，我使用了一个现有的Azure数据湖存储(ADLS)帐户作为默认的存储帐户。我现在知道我可能应该添加现有的ADLS作为关联的数据存储。我假设我现在可以安全地删除Azure帐户，而不会影响底层的默认存储帐户，但我想在执行此操作之前检查一下，因为如果删除现有的ADLS，将是一个巨大的
浏览 3提问于2017-08-18得票数 0
1回答
将Azure应用程序Insight日志文件导出到Azure数据湖存储
azure、azure-application-insights、azure-data-lake
我是天蓝色门户的初学者，我在前端侧(角2)和后端侧(Asp.net核心)配置了azure应用程序洞察力。我可以通过azure应用程序洞察力跟踪我的应用程序日志文件，并导出xls工作表( )，但是为了备份跟踪目的，我需要将所有日志文件存储到蔚蓝数据湖存储中。我需要在我的应用程序上调试这个问题，当我面对issues.but时，我得到了和继续导出sql，blob存储的链接，我不想要不必要的存储来将我的数据存储在蔚蓝资源中。因此，如果有任何
浏览 2提问于2017-05-30得票数 5
1回答
数据湖如何存储数据和格式？
sql、image、nosql、azure-data-lake、data-lake
我听说数据湖可以存储任何类型的数据:关系型，NoSql，图片/图像，Adobe，Excel。如何以无SQL格式或二叉树存储数据？还是把它像普通硬盘一样保存？如果是这样的话，他们为什么不直接称之为存储，而不是数据湖呢？我正在试图找到“数据湖”的确切存储机制。
浏览 0提问于2018-09-09得票数 2
回答已采纳
2回答
从数据湖中检索数据到分析系统
hadoop、bigdata、analytical
我们在Hadoop文件系统中创建了一个新的数据湖。数据以ORC的形式存储。目前分析系统直接连接到数据湖来读取这些ORC文件。
有没有办法在数据湖和分析系统之间创建一个中间层来服务数据？
浏览 16提问于2018-10-04得票数 0
2回答
如何处理数据湖vs数据仓库中的历史化数据？
data-warehouse、data-lake
在传统数据仓库中实现数据历史化是可能的(甚至是核心功能)。随着时间的推移，数据将被添加到数据仓库中，并且可以在数据中及时移动。 如果我只想使用数据湖，并为业务用户提供数据历史化，这可能吗？如果是，一个可能的方法是什么样子的？
浏览 36提问于2020-11-30得票数 0
回答已采纳
1回答
Kappa体系结构是否使用数据湖？
apache-spark、bigdata、data-processing、data-lake、kappa
Kukreja在“Apache、Delta湖和Lakehouse的数据工程”中说，Kappa体系结构没有数据湖。微软在 (见图)中提到了一家“长期商店”，但没有透露它的实际情况。它使用这些数据来“重新计算”。对我来说，这是一个数据湖。
浏览 10提问于2022-07-21得票数 0
回答已采纳
1回答
如果我通过enduser/承租者分割我的微服务数据，并且每个服务器都拥有全部数据的一个子集，那么如何在所有服务器上查询数据呢？
microservices、data-warehouse、scalability
设想一个高度可伸缩的体系结构，其中每个租户都是按区域和可用性区域划分和分布的，每个服务器都持有总数据的一个子集。还存在冗余，还有承载相同逻辑碎片的物理碎片。这很好，如果客户端知道分配给用户的所有逻辑碎片，那么在处理返回极端数量数据的请求时，客户端可以使用map/reduce样式检索所有数据。这解决了当用户的数据量大于任何单个服务器的存储、内存或计算的容量
浏览 4提问于2022-07-23得票数 0
1回答
能否在Azure database中创建链接服务到Synapse数据库
azure-data-factory、azure-synapse
嗨，有人能让我知道是否有可能在Azure数据工厂中创建链接到湖泊数据库的服务吗？
浏览 2提问于2022-06-20得票数 0
回答已采纳
2回答
在我的用例中需要数据吗？
data
我的web应用程序存储使用数据，例如：执行的任务等等，我需要显示仪表板和报告的使用和性能趋势，例如：平均任务执行时间是多少？谁是最活跃的用户？等等，这套问题是开放的，我们可以发明更多。
这个场景是否属于datawarehouse的经典方法？数据来自具有特定数据模型的关系数据库。有人要求我创建一个数据<
浏览 0提问于2018-11-04得票数 1
1回答
如何从Azure数据湖转换，将数据按日期文件夹分区到delta湖
azure、azure-data-factory、azure-data-lake、delta-lake
我拥有一个由datetime嵌套文件夹划分数据的蔚蓝数据湖gen2。我想向我的团队提供增量湖格式，但是我不确定我是否应该创建一个新的存储帐户，将数据复制成增量格式，或者将当前的蔚蓝数据湖转换为增量湖格式是否是最佳实践。
有人能提供关于这件事的任何建议吗？
浏览 2提问于2022-08-09得票数 0
回答已采纳
1回答
是否跟踪数据池中数据的更改？
business-intelligence、scd、data-lake
最近我发现了数据湖世界，我计划用ADL建立一个数据湖。我不确定的一件事是数据湖应该如何跟踪随时间变化/处理与源不同版本的更改。我遇到过这样的站点，声称数据湖按原样提供数据，其他状态是数据应该是时间戳，或者文件夹结构应该反映时间戳。干杯!
浏览 0提问于2019-07-24得票数 0
回答已采纳
2回答
如何使用数据工厂截断Dynamics 365实体(并复制到Azure数据湖)？
azure、dynamics-crm、azure-data-factory、azure-data-lake、azure-data-factory-2
我目前正在使用数据工厂将实体从Dynamics 365批量复制到Azure数据湖。实体每24小时保存为数据湖中的CSV文件。我希望将实体截断为新数据，并附加到数据湖中已经存在的文件中，而不是批量复制。 我认为这是SQL数据库的常见操作，但这可以在Dynamics 365和数据湖之间完成吗？
浏览 14提问于2019-05-01得票数 1
2回答
关于三角洲湖的困惑
delta-lake
我试着阅读了很多关于databricks delta lake的资料。据我所知，它为您的数据存储增加了ACID事务，并通过增量引擎提高了查询性能。如果是这样，为什么我们还需要其他不支持ACID事务的数据湖呢？Delta lakes声称将数据湖和数据仓库这两个世界结合在一起，我们知道，由于它目前对操作的支持，它还不能取代传统的数据仓库。但它应该取代数据湖</
浏览 21提问于2020-07-30得票数 0
回答已采纳
云服务器
对象存储
ICP备案
云点播
语音识别
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号