腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
从
数据
湖
中检索
数据
到分析系统
、
、
我们在Hadoop文件系统中创建了一个新的
数据
湖
。
数据
以ORC的形式存储。目前分析系统直接连接到
数据
湖
来读取这些ORC文件。 有没有办法在
数据
湖
和分析系统之间创建一个中间层来服务
数据
?
浏览 16
提问于2018-10-04
得票数 0
1
回答
如何使用用户分配的标识从
数据
库访问ADLS容器
、
、
、
我已经成功地在Databricks中挂载了带有服务主体的ADLS,并且能够对
数据
进行必要的转换。 现在,我正在使用用户分配的托管身份来避免在代码中保留秘密。
浏览 6
提问于2022-03-08
得票数 0
1
回答
如何使用SSIS将文件上载到Azure
数据
湖
存储?
、
、
使用SSIS将文件从本地文件位置上载到Azure
数据
湖
存储有
哪些
不同的方法?我们有azure blob上传任务,支持将文件上传到azure blob存储?Azure
数据
湖
存储也有什么方法吗?
浏览 3
提问于2017-02-11
得票数 2
1
回答
内部部署的delta
、
如果是,需要安装
哪些
软件/工具? 我正在尝试在本地实现一个增量
湖
,以分析一些日志文件和
数据
库表。我现在的机器上装了ubuntu,apache spark。不确定还需要
哪些
其他工具。是否有任何其他工具建议来实施内部
数据
湖
概念?
浏览 20
提问于2021-02-10
得票数 2
1
回答
作为一名软件测试人员,如何在蔚蓝
数据
湖
中测试
数据
?
、
、
、
、
我想验证Azure
数据
湖
中被Azure data摄取的
数据
。 我如何验证?作为验证过程的一部分,我可以做
哪些
不同的验证?
浏览 0
提问于2019-03-10
得票数 0
回答已采纳
2
回答
需要将Grafana与Azure
数据
湖
集成的解决方案
、
、
我想将Azure
数据
湖
存储与Grafana集成起来,以实现时间序列
数据
的可视化。我需要知道我可以使用
哪些
工具来使其成为可能。我使用ADF从
数据
湖
中存储的csv文件中提取
数据
,并移动到Azure
数据
资源管理器中的一个表中。在那之后,我使用了grafana中的Azure data explorer插件来进行可视化。
浏览 0
提问于2019-07-04
得票数 0
1
回答
如何提高从cosmosdb复制
数据
的性能?
、
、
、
我现在正试图通过
数据
工厂将
数据
从cosmosdb复制到
数据
湖
存储。cosmos迁移工具不工作,没有导出
数据
,也没有问题日志。如何/
哪些
工具可以提高复制性能?
浏览 3
提问于2017-07-11
得票数 1
1
回答
使用Azure函数(Nodejs)将
数据
(csv文件)上传到Azure DataLakeGen2
、
、
、
我目前正在尝试使用带有NodeJs的Azure函数将csv文件发送到Azure Data Lake gen2,但无法做到这一点,任何关于这方面的建议都会非常有帮助。谢谢。
浏览 1
提问于2019-09-10
得票数 0
2
回答
是否有可能通过使用Azure
数据
工厂将
数据
从Azure
数据
湖
gen2传输到Azure事件中心?
、
、
、
、
是否有可能通过使用Azure
数据
工厂将
数据
从Azure
数据
湖
gen2传输到Azure事件中心?一旦从Data转移到事件中心,是否有其他方法来保留事件集线器中相同的文件夹结构?
浏览 4
提问于2019-09-24
得票数 1
回答已采纳
3
回答
AWS
湖
形成: s3://abc/的
湖
形成许可不足
、
、
我正在尝试从AWS
湖
编队控制台设置一个
数据
集。我按照下面的资源进行同样的操作:对s3的
湖
形成许可不足: 有人能帮上忙吗
浏览 0
提问于2020-09-15
得票数 10
2
回答
关于三角洲
湖
的困惑
据我所知,它为您的
数据
存储增加了ACID事务,并通过增量引擎提高了查询性能。如果是这样,为什么我们还需要其他不支持ACID事务的
数据
湖
呢?Delta lakes声称将
数据
湖
和
数据
仓库这两个世界结合在一起,我们知道,由于它目前对操作的支持,它还
不能
取代传统的
数据
仓库。但它应该取代
数据
湖
吗?为什么需要两份
数据
副本-一份在
数据
湖
中,另一份在德尔塔
湖
中?
浏览 21
提问于2020-07-30
得票数 0
回答已采纳
1
回答
浅谈Azure Synapse分析
有人能帮我理解Azure Synapse Analytics包括
哪些
组件/服务吗?根据我从微软网站和其他评论中所读到的,它说它是新的SQL
数据
仓库,然而,它也说它把所有这些结合在一起:
数据
吞吐(比如天青
数据
工厂)、
数据
仓库和大
数据
分析(比如
数据
湖
)?那么,当您购买Azure Synapse Analytics时,它到底包括
哪些
组件? 谢谢。
浏览 2
提问于2020-05-01
得票数 1
回答已采纳
1
回答
用Azure
数据
湖
gen2列出气泡的问题
、
、
我使用Azure存储(Blobs)来存储文件。代码示例:var myClient = storageAccount.CreateCloudBlobClient();var dirRef= con
浏览 1
提问于2018-12-21
得票数 1
回答已采纳
1
回答
将CSV从Azure
数据
湖
(Gen 2)加载到Azure SQL
数据
库
、
、
、
、
我有一个Azure
数据
湖
存储(Gen 2)帐户与几个容器。我想将salesorderdetail.csv文件从Sales容器导入到Azure
数据
库中。mkpracticestorageaccount.blob.core.windows.net/sales', 当我看到在SSMS上的对象资源管理器窗口中创建的外部
数据
源时,上面的代码似乎工作正常:以下代码应该将salesorderdetail.csv文件中的
数据</em
浏览 1
提问于2018-12-14
得票数 2
1
回答
从Azure blob存储到蔚蓝
数据
湖
存储的处理文件
、
我正在处理从Azure blob存储到azure
数据
湖
存储的文件,我需要从年份(文件夹)\月份(文件夹)\ do (txt文件在日基上)选择文件,.I能够使用hadrcoded路径完成一个文件,但我
不能
每天选择文件并处理复制在蔚蓝
数据
湖
存储中我正在使用ADF V2并使用UI设计器来创建我的连接、
数据
集和管道--我的步骤很好。 从
数据
湖
存储中选择该文件,并通过usql处理转
浏览 0
提问于2018-10-28
得票数 1
回答已采纳
1
回答
将文件和文件夹从Azure DataLake Gen1复制到没有Azure DataFactory的Azure DataLake Gen2
、
、
浏览 0
提问于2020-10-22
得票数 0
1
回答
将65000个小型xml文件组合到blobs存储中,并将它们作为大型CSV文件拷贝到
数据
湖
中
、
、
、
、
它的遥测
数据
,每小时都会出现在那里。现在我们正在使用azure批处理服务,它通过将所有文件名保存在Azure表存储中来做到这一点,批处理服务中的每个任务都会从表存储中读取
数据
,并在完成后进行更新。
浏览 0
提问于2017-09-09
得票数 1
1
回答
SaaS应用程序
数据
摄入到DL/DWH -什么包括在NFR中?
、
、
、
、
我们希望确保我们有能力访问我们的
数据
,并且将其摄入到我们的分析
数据
湖
(一些实时的)中。我正在寻求关于供应商和他们的解决方案我们应该有
哪些
要求/更喜欢什么的建议?API-大多数供应商都提到他们提供了用于
数据
访问的API,但是需要
哪些
特性API才能适合将
数据
摄取到Analytics?中。例如,Salesforce有批量API,这是否意味着如果供应商只提供“精益API”,它们就
不能
用于DL用例吗?通过ODBC直接SQL访问-我还读到如果SaaS应用
浏览 7
提问于2021-10-13
得票数 0
回答已采纳
2
回答
(Azure)
数据
湖
的元
数据
管理
、
、
、
、
据我所知,
数据
湖
解决方案用于存储从原始格式的原始
数据
到经过处理的
数据
。不过,我还
不能
理解(Azure)
数据
湖
中的元
数据
管理的概念。在
数据
湖
中处理元
数据
的最佳实践是什么?是否有任何自动读取元
数据
的机制(例如,从头文件中读取),如果有,是否有任何方法来查看和编辑此元
数据
(可能是编程实现的API )?我担心,如果没有适当的管理,“
湖
”只会变成“
浏览 4
提问于2017-03-27
得票数 3
1
回答
Azure Databricks存储或
数据
湖
、
、
我正在创建一个结构化的流式作业,它将其
数据
存储在databricks增量
数据
库中。我面临的选择是将检查点位置和来自增量
数据
库的
数据
存储在以下两个位置之一中: 1.正常的dbfs位置,如“/”和“delta.mydatabase”2.来自
数据
湖
的挂载目录,如“/mnt/mydatalake/delta.mycheckpointlocation”和“/mnt/mydatalake/delta.mydatabase” 如果我
浏览 4
提问于2018-11-20
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
存储架构升级,多源数据如何快速入湖?智能入湖通道它来了!
2024避坑指南:预测哪些行业不能入,哪些是普通人的机会
购买的商标能不能入驻天猫?有哪些要求?
数据湖与大数据?
什么是数据湖?
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
云直播
活动推荐
运营活动
广告
关闭
领券