『ゼロから触ってわかった!Azure × Databricksでつくる次世代データ基盤 非公式ガイド ―』 クラウドでデータ基盤を作ろうとすると、Azure・Storage・ネットワーク・権限・セキュリティ…そこに Databricks が加わった瞬間、一気に難易度が跳ね上がります。
その進化を裏付ける証として今回多くの新ソリューションと機能がアナウンスされた。まずは「Delta Lake 2.0」とサーバーレスDWHである「Databricks SQL Serverless」の2つだ。 Delta LakeはLakehouseの中でも最も広く利用されているフォーマットであり、これまではDatabricks ...
毎回やるのに忘れるのでTerraform化+備忘として書く。 やりたいこと Private IPしか持っていないデータベース(Aurora)にPCから接続する PCにインストールしたツールから、SQLを発行する こんな感じ。PCから、踏み台経由でデータベースに接続します。 Terraformで ...