とは AWS Lake Formation - AWS Lake Formation
翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。 とは AWS Lake Formation AWS Lake Formation デベロッパーガイドへようこそ。 AWS Lake Formation は、分析と機械学習のためにデータを一元管理、保護、グローバルに共有できるようにします。Lake Formation では、Amazon Simple Storage Service (Amazon S3) 上のデータレイクデータと AWS Glue Data Catalogの関連メタデータに対するきめ細かなアクセスコントロールを管理できます。 Lake Formation は、IAM 許可モデルを補強する独自の許可モデルを提供します。Lake Formation アクセス許可モデルを使用すると、リレーショナルデータベ
データメッシュとは何ですか? - データメッシュアーキテクチャの説明 - AWS
データメッシュは、分散型かつ非中心の所有権を通じてデータセキュリティに関する高度な課題を解決するアーキテクチャフレームワークです。組織には、さまざまな事業部門が提供する複数のデータソースがあり、分析のために統合する必要があります。データメッシュアーキテクチャは、異なるデータソースを効果的に統合し、一元管理されたデータ共有とガバナンスガイドラインを通じてそれらをリンクします。ビジネス部門は、共有データへのアクセス方法、アクセスするユーザー、およびアクセスされる形式を管理できます。データメッシュはアーキテクチャを複雑にしますが、データアクセス、セキュリティ、およびスケーラビリティを改善することによって高い効率を実現するものでもあります。 組織は増え続けるデータボリュームにアクセスできますが、実用的なメリットを引き出すには、データをソート、フィルタリング、処理、および分析する必要があります。組織
はじめに おはようございます、もきゅりんです。 最近は、データレイク関係に携わる機会があったため、ついでに Lake Formation を学びました。 Lake Formation とは通常数ヶ月単位で構築されるようなデータレイク環境を数日で構築してしまおう、という凄まじいサービスです。 当稿はその Lake Formation の主要な機能を図で整理するのが目的です。 20191001 AWS Black Belt Online Seminar AWS Lake Formation で記載されているように、 LakeFormation の主要な機能は2つです。 すなわち、ブループリント と アクセスパーミッション です。 この2つに焦点を当てて整理していきます。 ブループリント ブループリントとは、データレイクにデータを簡単に取り込める「データ管理テンプレート」です。これを実行すると、
Lake Formation 許可の概要 - AWS Lake Formation
翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。 Lake Formation 許可の概要 メタデータアクセス – Data Catalog リソースに対する許可 (Data Catalog 許可)。 これらの許可は、プリンシパルが Data Catalog 内のメタデータデータベースとテーブルの作成、読み取り、更新、および削除を実行できるようにします。 基盤となるデータアクセス – Amazon Simple Storage Service (Amazon S3) 内のロケーションに対するアクセス許可 (データアクセス許可とデータロケーション許可）。 データレイクのアクセス許可により、プリンシパルが基盤となる Amazon S3 ロケーション (データカタログリソースがポイントするデータ) に対するデータの読み取
Anonymize and manage data in your data lake with Amazon Athena and AWS Lake Formation | Amazon Web Services
AWS Big Data Blog Anonymize and manage data in your data lake with Amazon Athena and AWS Lake Formation April 2024: This post was reviewed for accuracy. Organizations collect and analyze more data than ever before. They move as fast as they can on their journey to become more data driven by using the insights from their data. Different roles use data for different purposes. For example, data engin
機械学習アプリケーションエンジニアの@yktmです。 AWSで構築するデータレイクがテーマの本連載、今回は第3回目、最終回です。 前回は、AWS Lake Formationで構築したデータレイクとAmazon Athenaの連携を確認しました。今回は、Lake Formationの権限管理で、Athenaからのクエリにアクセスコントロールをかける部分を試していきます。 データレイクにはとにかくどんなデータも格納される、ということは誰がどのデータにアクセスできるか管理する必要がでてきます。 Lake Formationを使うと、データレイクにおけるアクセスコントロールを、要件に合わせ細かく設定することができます。 実際に権限管理を試してみると、確かに細かく権限管理できることが実感できました。他方、Lake Formationにおける権限管理の考え方が複雑なため、自分にとっては難しい部分もあ
行レベルのアクセスコントロールによるデータレイクの保護 - AWS Lake Formation
翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。 行レベルのアクセスコントロールによるデータレイクの保護 AWS Lake Formation 行レベルのアクセス許可を使用すると、データコンプライアンスとガバナンスポリシーに基づいて、テーブル内の特定の行へのアクセスを提供できます。数十億のレコードを格納する大きなテーブルがある場合、さまざまなユーザーやチームがアクセスして表示できるデータを、許可した範囲に限定する方法が必要です。行レベルのアクセスコントロールは、データを保護するとともに、ジョブの実行に必要なデータへのアクセス許可をユーザーに付与するシンプルでパフォーマンスの高い方法です。Lake Formation は、一元的な監査とコンプライアンスレポートを通じて、どのプリンシパルが、どのデータに、いつ、どのサー
はじめに こんにちは、D2Cインフラエンジニアの小川です。 先日、社内分析基盤のリプレイスに伴い、AWS Lake Formation導入を行い多方面でのシステム改善を実現しました。本記事では、Lake Formationを導入をしてよかったことをご紹介したいと思います。 背景 Lake Formationの導入に至る背景として、大きく以下2点がありました。 データの二重管理 分析基盤環境のあるAWSアカウントと、分析対象のデータの格納先のAWSアカウントが、複数アカウントおよび異なるリージョンにまたがっていました。これにより、分析基盤環境のあるAWSアカウントで、データの格納先AWSアカウントからデータの定期移行をする必要があり、この運用方法では以下の課題がありました。 コスト増 データの二重保存料金の発生 AWS間のデータ転送料金の発生 管理者・ユーザー（分析者）の負担 データ転送に時
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
細粒度のアクセスコントロールのための方式 - AWS Lake Formation
AWS Lake Formation