Amazon为AWS Lake Formation提供了更细粒度的控制

2023-11-12 11:37来源:大国新闻网

Amazon Web Services周二宣布,将全面推出能够为数据湖管理带来更细粒度控制的工具。

首先,AWS首席执行官Adam Selipsky在他的AWS re:Invent主题演讲中表示,Row和cell级别的湖泊形成安全“将正确的数据交到正确的人手中”。

Lake Formation已经使客户能够将数据移动到S3数据湖中,使用机器学习对其进行清理和分类,并安全访问敏感数据。新工具现在允许客户对单个行和单元格实施访问控制。客户不必为每个用户创建多个表并管理数据管道,而是可以为特定用户的特定行定义一组策略。客户根据执行操作的人的身份控制对查询结果和AWS Glue ETL作业中特定行和列的访问。

同时,Lake Formation中治理表的事务消除了批量更新的需要。“数据不是静态的,”塞利普斯基说。“越来越多的数据正在被添加和快速移动。”

现在,客户可以创建一种新类型的表——受治理表——Lake Formation自动管理冲突和错误,以获得一致的数据视图。用户将能够实时跟踪数据。

受治理表支持ACID事务,允许多个用户并发地、可靠地跨多个受治理表插入和删除数据。ACID事务还允许客户运行返回一致和最新数据的查询。如果在ETL过程中或在更新期间出现错误,则不会提交更改,也不会显示更改。

使用受治理表的客户可以使用自动压缩来进行存储优化。当启用此选项时,Lake Formation会自动将受治理表中的小S3对象压缩为更大的对象,从而通过分析引擎(如Amazon Athena和Amazon Redshift Spectrum)优化访问。

多讯网声明:未经许可,不得转载。
汽车
地球与环境