数据湖构建安全吗
数据湖是一种大规模、可扩展的数据存储和分析解决方案，它可以存储来自不同来源的结构化、半结构化和非结构化数据。数据湖的构建可以确保数据的安全性，但需要采取一定的安全措施。
以下是一些可以采取的安全措施：
- 数据加密：对存储在数据湖中的数据进行加密，以防止未经授权的访问和篡改。
- 访问控制：通过设置访问控制策略，可以限制对数据湖中数据的访问，确保只有授权的用户才能访问数据。
- 审计和监控：通过审计和监控，可以跟踪数据湖中数据的访问和使用情况，以确保数据的安全性。
- 数据质量：通过数据质量检查和数据清洗，可以确保数据湖中存储的数据是准确的和可靠的。
推荐的腾讯云相关产品：
- 腾讯云数据库：提供了多种数据库服务，包括MySQL、PostgreSQL、MongoDB等，可以用于存储和管理数据湖中的数据。
- 腾讯云数据仓库：提供了数据仓库服务，可以用于存储和分析数据湖中的数据。
- 腾讯云数据安全：提供了数据加密、访问控制、审计和监控等数据安全服务，可以用于保护数据湖中的数据。
- 腾讯云数据处理：提供了数据处理服务，可以用于清洗和处理数据湖中的数据。
推荐的产品介绍链接地址：
相关·内容
1回答
支持数据湖设置的服务
、、、、
我必须测试和比较可用的解决方案来创建一个数据湖。
除了AWS湖的形成之外，还有其他服务可以轻松地建立一个安全的数据池吗？我知道我可以在Azure和Google平台上创建一个帐户，但是我不知道他们是否有任何我需要的解决方案的“包”，或者帮助我建立数据湖的服务。
浏览 1提问于2019-05-09得票数 0
回答已采纳
在同一台服务器上，我运行了一些qlikview的加载器和hadoop中的一个数据湖。我的qlikview加载器使用impala连接器(您可以在qlikmarkt中找到的连接器)查询数据湖的一些“表”，但我们将在数据湖中使用kerberos安全性。有人知道我是否需要cloudera为kerberos提供的特殊连接器吗？我认为kerberos可能不会影响本地，但我不知道，有什么想法吗？
感谢所有人
浏览 0提问于2016-04-07得票数 1
7回答
我听说了数据湖这个新名词。我在谷歌上查到了
数据湖是一个大规模的存储库和处理引擎.数据池提供“任何类型的数据的大量存储、巨大的处理能力和处理几乎无限并发任务或作业的能力”。术语数据湖通常与面向Hadoop的对象存储相关联。在这种情况下，组织的数据首先加载到Hadoop平台，然后将业务分析和数据挖掘工具应用于其驻留在Hadoop的商品计算机集群节点上的数据。我对Hadoop和数据<
浏览 8提问于2016-03-14得票数 16
1回答
我们有一个与外部客户端共享数据和一些相关文件的用例。数据存储在数据湖(雪花)中。我们正在考虑将相关文件存储在s3或azure存储中。这些文件是数据的补充信息/附加附件。由于安全问题，预签名或SAS URL将无法工作。
是否有可能生成指向具有b2b类型身份验证的浏览器轻松打开的文件的链接？我们是否需要构建</e
浏览 3提问于2021-06-23得票数 1
2回答
我一直在为客户建立数据湖，在那里我们将数据从onprem或任何其他来源加载到S3 (一个数据湖)中。我们将在这些原始数据上创建一个AWS Glue目录来创建模式。下一步是使用EMR或AWS Glue进行数据清理，将转换后的数据加载到RDS / REDSHIFT / S3中作为最终目标。分析人员、其他用户将使用IAM服务提供所需的数据/ S3桶访问，用于Quicksight可视化或使用雅典娜、data等进行
浏览 0提问于2019-08-20得票数 3
2回答
我们在Hadoop文件系统中创建了一个新的数据湖。数据以ORC的形式存储。目前分析系统直接连接到数据湖来读取这些ORC文件。
有没有办法在数据湖和分析系统之间创建一个中间层来服务数据？
浏览 16提问于2018-10-04得票数 0
我喜欢创建web应用程序来上传文件，保存到azure数据湖，读/写到azure SQL Server。我使用我的Azure AD客户端I/密钥访问数据湖，
我的Azure SQL Server连接字符串，如: Server=tcp:{MyAzureSQLServer}.database.windows.net,1433;Initial目录{MyAzureDatabase}；持久化安全Info=False;MultipleActiveResultSets=False;Encrypt=Tr
浏览 4提问于2019-01-18得票数 0
在传统数据仓库中实现数据历史化是可能的(甚至是核心功能)。随着时间的推移，数据将被添加到数据仓库中，并且可以在数据中及时移动。 如果我只想使用数据湖，并为业务用户提供数据历史化，这可能吗？
浏览 36提问于2020-11-30得票数 0
回答已采纳
1回答
目标
我可以说我没有DW (即使我有星型)，而是数据湖+数据集市？所有ETL和星型架构构建都发生在数据湖层。所有逻辑都在这里。尽管如此，它仍然有原始层的结构化和非结构化
浏览 0提问于2020-09-15得票数 1
回答已采纳
2回答
从头开始建数据湖
、、
我正试图从零开始构建一个“数据湖”。我理解数据湖是如何工作的，以及它的用途；它遍布互联网。但是，当问题出现时，如何从头开始建立一个，就没有来源了。我想知道如果：
我知道如何运行Hadoop并将数据导入Hadoop。我想在前提数据湖上建立一个示例来演示我的经理。任何帮助都是非常感谢的。
浏览 1提问于2019-02-27得票数 2
回答已采纳
1回答
我正在尝试构建一个Azure Data管道，它从Azure数据湖中获取数据并对其进行转换。
在我看来，这其中的权衡并不明显。一方面，在我看来，第一种选择避免复制到仓库(是吗</em
浏览 0提问于2019-04-17得票数 1
回答已采纳
2回答
我的web应用程序存储使用数据，例如：执行的任务等等，我需要显示仪表板和报告的使用和性能趋势，例如：平均任务执行时间是多少？数据来自具有特定数据模型的关系数据库。
有人要求我创建一个数据记录，只是给他我所有的原始数据。我不明白这张照片里有什么数据。没有模型和关系，我的数据是无用的。而且，我没有事件流:我在关系数据库中有表。例如，“任务”表中的一行将有“打开时间”列和
浏览 0提问于2018-11-04得票数 1
我已经使用逻辑应用程序将数据加载到azure datalake存储gen2。我尝试使用连接器azure文件存储，但在that.Can中无法获得任何文件系统文件夹。有人在此问题上帮助我吗？
浏览 0提问于2019-05-16得票数 1
我不熟悉蔚蓝的世界。我正在浏览blob存储和adls2。我注意到，除了空间约束和herieracial名称空间之外，adls2所能做的一切都可以通过blob完成。
浏览 10提问于2022-04-22得票数 0
我们希望确保我们有能力访问我们的数据，并且将其摄入到我们的分析数据湖(一些实时的)中。我正在寻求关于供应商和他们的解决方案我们应该有哪些要求/更喜欢什么的建议？API-大多数供应商都提到他们提供了用于数据访问的API，但是需要哪些特性API才能适合将数据摄取到Analytics？中。例如，Salesforce有批量API，这是否意味着如果供应商只提供“精益API”，它们就不能用于DL用例吗？通过ODBC直接SQL访问-我还读到如果SaaS应用程序有多个租户，可以构建</
浏览 7提问于2021-10-13得票数 0
回答已采纳
我需要在AWS上构建一个数据湖，但是我不知道S3和HDFS到底有什么不同。我在网上找到了一些答案，但我仍然不明白真正的区别。
我还需要知道是否有人在AWS中拥有HDFS和S3的数据湖架构。
浏览 2提问于2019-07-11得票数 1
回答已采纳
/tests/.my_test_env
如何构建Docker镜像来模拟Azure数据湖(第2代)？我使用Python3SDK与数据湖进行交互，文档在这里-- 。
浏览 3提问于2020-08-27得票数 2
1回答
我将计划一个粗略的概念，如何构建数据湖。关于集装箱的概念，有一件事让我印象深刻。我的问题是，有多个容器有什么好处吗？例如，每个用例有多个容器？但我也可以想象它在一个容器与不同的文件夹。从访问管理的角度来看，容器级rbac、文件夹级、文件级acl.唯一的区别是，如果我有一个容器，其中包含多个用例文件夹，或者每个用例有多个容器，那么安全性概念就是唯一的区别。我们为什么要采用一种方法而不是另一种方法，就像杀手一样的争论吗？
浏览 2提问于2020-11-18得票数 0
回答已采纳
我们可以移动/加载数据到天蓝色数据湖存储从宇宙数据库。如果可以做到，前提是什么？
对于这方面的任何帮助我们都很感激。
浏览 4提问于2021-06-22得票数 0
回答已采纳
我拥有一个由datetime嵌套文件夹划分数据的蔚蓝数据湖gen2。我想向我的团队提供增量湖格式，但是我不确定我是否应该创建一个新的存储帐户，将数据复制成增量格式，或者将当前的蔚蓝数据湖转换为增量湖格式是否是最佳实践。
有人能提供关于这件事的任何建议吗？
浏览 2提问于2022-08-09得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
