りょう💪データエンジニア

好きなことをして暮らす生活を目指しています！データエンジニア / 統計検定準一級/Python/SQL/BigQuery/databricks

[りょう💪データエンジニア @ryo_datascience]

Unity Catalog

✓ 複数workspaceをまたいだ中央集約型ガバナンス機能
✓ Databricks上のデータやAI資産を一元管理すつためのガバナンス機能
✓ データに対するメタデータ・アクセス権・ガバナンスを一元管理するレイヤー

[りょう💪データエンジニア @ryo_datascience]

AIエージェントを活用した面白い事例

✅エンジニアは何をするか
✅AIに何を任せるか
✅人が介入する必要があるのはどこか

この辺りを自社にあった形式に分解できてていいなと思いました！

AI readyなデータ基盤の発展でよりデータエンジニアまわりの仕事は面白くなりそう😎 https://t.co/VZE4aXzAPN

[りょう💪データエンジニア @ryo_datascience]

https://t.co/OVSSKJROuH
こちらみました。。
松井さんの経歴面白いし、深い話でした。。。

[りょう💪データエンジニア @ryo_datascience]

DatabricksのABACのカラムマスクを試してみたんだけど、ポリシータグで一元管理できるのはいいですね。information_schemaで確認できるのも嬉しい。

データチュワードに共有しよう。。

RBACｘABACでアクセス制御する方向に持っていきたい。。

[りょう💪データエンジニア @ryo_datascience]

databricksでvariant型を初めて知ったけど、デルタレイクやsparkで扱いやすいデータ型なんですね。

[りょう💪データエンジニア @ryo_datascience]

・『ガバナンス＝制限』は誤解
・利用者に何も意識させずに、最大限使わせて価値創出に貢献する
・目指すのは、利用者もAIも何も気にせず使える基盤（ガバナンスはその裏で担保しておく）

databricks、やっぱり面白そう！！

[Kenji Matsuda/KJ/マツケン @ken_3ba]

見えなかったのでこちらです！

https://t.co/NcIm3OG7kd

#DCT_findy

[りょう💪データエンジニア @ryo_datascience]

databricksを業務で使用しているんだけど、AI関連のアップデートがすごい。

Unity AI Gateway, genie ontrogy,,,

楽しみな機能が多いからキャッチアップに熱がはいる🔥

[りょう💪データエンジニア @ryo_datascience]

ブログ閉鎖完了！

chatGPTにきいたら迷わずできました！バックアップ取っておくほどのものでもなかったので、基本全削除でしたが😂

これで脳のリソースあいたのでまた新たなことに挑戦していきたいです！！

[りょう💪データエンジニア @ryo_datascience]

3日くらい工数削減できる提案できたのでハッピーすぎる！

実現したいことの目的考えて代替案提示したら久しぶりに通った気がします笑

現状不要な機能もあったのでもっと意味のあることに時間使いたいと思います💪

[りょう💪データエンジニア @ryo_datascience]

長らく記事更新もしていなかったので、10月でブログを閉鎖しようと思います！

脳のリソース開けて次に進みます👍

[りょう💪データエンジニア @ryo_datascience]

最近CI/CDをGHAで組んでいるので購入！

CI/CDについて学びつつ、ソフトウェア開発の基礎もおさらいできそうです👍

[りょう💪データエンジニア @ryo_datascience]

cursorを使って簡単なGHAのワークフローを作ろうとしたら、gcpのsaの設定とかどんどん提案してくれる。

コマンドが問題なさそうであればapplyするだけ。
ドキュメント読むこともなく、スムーズにいった。すごい😅

[りょう💪データエンジニア @ryo_datascience]

最近なんとなく運用で使用していたサービスを実際に構築で活用してるので、格段に理解が深まっているのを感じます😆

プロンプトが問題なのかも知れないけど、手詰まったときは公式ドキュメントがやはり参考になるなあと！！

学びが多いこの頃です！

Terraform
cloudbuild
cloud run functions

[りょう💪データエンジニア @ryo_datascience]

infra managerの導入検討しているが、infra managerならではの運用とかでのつまりポイントとかあるのかな？🤔

[りょう💪データエンジニア @ryo_datascience]

技術書典オンラインマーケットでカエルと空の「Google Cloud Platformで学ぶTerraform 〜実践編〜 第2版」を購入しました！ #技術書典 https://t.co/Fxf6qC602B

基礎編がわかりやすかったので購入させていただきました！AWSを対象にした書籍が多いので助かります🙏

[りょう💪データエンジニア @ryo_datascience]

ビジネスを育てる 新版 いつの時代も変わらない起業と経営の本質

この本を半分くらい読んでいますが、ビジネスって面白いですね。

まずは借金せずスモールに何か始めてみるのと、今自分に仕事で関わっている方にさらに貢献するにはどうしたらいいかを考え実践します！

https://t.co/lgZtHDaNky

[りょう💪データエンジニア @ryo_datascience]

k8sを理解したい。

GKEを利用しているシステムをみたことはあるけど、k8sがよくわからなかったので、その部分のTerraformのコードもあまり理解できなかったという経緯があり、、

まずは公式チュートリアルをやってみる。
動画教材とAI使えば、概要はつかめるかな、、

[りょう💪データエンジニア @ryo_datascience]

I joined 僕はエンジニア組織をこう変える VPoEばんくしさんに聞く チームで実践するAI駆動開発! https://t.co/aiff4nVDLd #Offers_DeepDive

[りょう💪データエンジニア @ryo_datascience]

暗号技術入門、セキュリティについて最低限知っておきたいので読みはじめました！

数10ページ読んだけど、暗号技術について図解が豊富で分かりやすいです👍

[りょう💪データエンジニア @ryo_datascience]

I joined データエンジニアの未来【サポーターズCoLab】! https://t.co/X8kAy4VMPn #spzcolab