Top Tweets for #embulk

12 months ago

【 #Embulk 導入事例＠イノベーション】 AWS×GCP連携でデータ集約＆自動化！ OSSで低コスト、YAML管理で属人化防止🌟 BigQuery活用で分析も簡単、運用負荷も大幅削減！ ▼詳しい活用ストーリーはこちら https://t.co/zi0BbEczl2

1

3

2

0

1K

山本高廣 Takahiro Yamamoto @yama_san

about 1 year ago

【ユーザー行動ログとデモグラフィックデータを単一SQLで分析可能に】 #Embulk #findy_tools 🔗https://t.co/rt8ECRhC4k

0

4

0

1

488

over 1 year ago

Embulkはシャチ？🐳 #Embulk https://t.co/bmezXo9wqn

山本高廣 Takahiro Yamamoto @yama_san

over 1 year ago

Docker、DeepSeek、ログラスですね😊 クジラ、シャチ、クジラ？ #Docker https://t.co/yTm7Y71r2q #DeepSeek https://t.co/X2a2pfOjVm #Loglass https://t.co/drB1K1a2PA

0

565

0

1

0

164

almost 2 years ago

【新規レビューご紹介🎉】タイミー社(@TimeeDev)marufeuilleさんの #Fivetran レビューを公開しました！✨ https://t.co/EDau52ojtM ✏データ連携は主に #embulk をベースとする中で、データエンジニアの工数を最小に開発・運用できる状態を目指して導入。設定が容易で開発も進んでいるツールです🤝

findy_tools's tweet photo. 【新規レビューご紹介🎉】
タイミー社(@TimeeDev)marufeuilleさんの #Fivetran レビューを公開しました！✨

https://t.co/EDau52ojtM

✏データ連携は主に #embulk をベースとする中で、データエンジニアの工数を最小に開発・運用できる状態を目指して導入。設定が容易で開発も進んでいるツールです🤝 https://t.co/grKJhX9MaM

0

31

8

2

12K

over 2 years ago

【#アーキテクチャ紹介】 GMOペパボ社社内データ基盤「#Bigfoot」💾 ・ELTパイプラインの構成,ログ設計は定型化・DBからのETLは主に #Embulk ・問い合わせプラットフォームからのETLには一部SaaSを使用 (✏️GMOペパボ社(@pepabo)堤利史(@tosh2230)さん) YouTube動画より：https://t.co/5xBS95USS9

findy_tools's tweet photo. 【#アーキテクチャ紹介】
GMOペパボ社社内データ基盤「#Bigfoot」💾

・ELTパイプラインの構成,ログ設計は定型化
・DBからのETLは主に #Embulk
・問い合わせプラットフォームからのETLには一部SaaSを使用

(✏️GMOペパボ社(@pepabo)堤利史(@tosh2230)さん)
YouTube動画より：https://t.co/5xBS95USS9 https://t.co/QIJ0m0ne66

0

5

0

1

445

over 2 years ago

【#アーキテクチャ紹介-データ基盤】バクラク事業におけるデータ基盤の構成です📄 データソースはAWS、データの収集には #Embulk, #fluentbit、ビジネスインテリジェンスツールに関してはRedashからLooker Studioに移行💨 (✏️LayerX社(@LayerXcom) 高際さん(@shun_tak)) https://t.co/SVQVJSSnQ1

findy_tools's tweet photo. 【#アーキテクチャ紹介-データ基盤】
バクラク事業におけるデータ基盤の構成です📄
データソースはAWS、データの収集には #Embulk, #fluentbit、ビジネスインテリジェンスツールに関してはRedashからLooker Studioに移行💨

(✏️LayerX社(@LayerXcom) 高際さん(@shun_tak))

https://t.co/SVQVJSSnQ1 https://t.co/qvo92QXBMO

0

8

1

841

over 2 years ago

【#アーキテクチャ紹介】 dely社(@dely_corporate) クラシルリワードのデータ基盤🔥 DWH：#BigQuery (メイン), #Snowflake(サブ) 　⏩Google Analytics for Firebaseとの相性、フルマネージド ETL：#Embulk, #Digdag BI Tool：#Redash, #Looker (✏️開発責任者 @_funzinさん) https://t.co/H8yAM6v8GU

findy_tools's tweet photo. 【#アーキテクチャ紹介】
dely社(@dely_corporate) クラシルリワードのデータ基盤🔥

DWH：#BigQuery (メイン), #Snowflake(サブ)
　⏩Google Analytics for Firebaseとの相性、フルマネージド
ETL：#Embulk, #Digdag
BI Tool：#Redash, #Looker

(✏️開発責任者 @_funzinさん)
https://t.co/H8yAM6v8GU https://t.co/pCNOpkubcF

0

3

0

1

996

ひしだま @hishidama

almost 3 years ago

EmbulkでTsurugiのテーブルに読み書きするプラグインを作りました。 https://t.co/iSPKEpUKFF #embulk #tsurugidb

0

9

1

0

1K

about 3 years ago

Symbolブロックチェーンのトランザクションは増えてるのか？どうなのか？速報ベースですがっぽいグラフが出せました。1枚目がトランザクション単体、2枚目がアグリゲートトランザクションも含めた数の推移です。構成：MongoDB→Embulk→BigQuery→LookerStudio #Symbol #BigQuery #Embulk

kurikou_dev's tweet photo. Symbolブロックチェーンのトランザクションは増えてるのか？どうなのか？速報ベースですがっぽいグラフが出せました。1枚目がトランザクション単体、2枚目がアグリゲートトランザクションも含めた数の推移です。構成：MongoDB→Embulk→BigQuery→LookerStudio
#Symbol #BigQuery #Embulk https://t.co/zWvaM3Q8So

1

61

13

0

11K

about 3 years ago

SymbolブロックチェーンのDBからBlockデータ約240万レコードをBigQueryに転送するのに5分くらいで終わった…すげ～。#Embulk #bigquery

0

30

9

0

5K

about 3 years ago

Embulk環境のお引越しは無事に完了…。MongoDBから抽出したデータをBigQueryに流し込むところまでは動いたものの、今度は文字化けが直らない問題。標準出力の時点ですでに文字化けしてるから、Embulk側の設定か、実行環境(Ubuntu)側の設定かどっちかかな…。 #Embulk

kurikou_dev's tweet photo. Embulk環境のお引越しは無事に完了…。MongoDBから抽出したデータをBigQueryに流し込むところまでは動いたものの、今度は文字化けが直らない問題。標準出力の時点ですでに文字化けしてるから、Embulk側の設定か、実行環境(Ubuntu)側の設定かどっちかかな…。
#Embulk https://t.co/NmTKVeBadR

1

4

0

420