べりんぐ

Iceberg, OpenSearch探窟家です。 blog maintainer opensearch-hadoop 著書『実践Apache Iceberg』 work @awscloud All views are my own

[べりんぐ @_Bassari]

Apache Icebergの専門書『実践Apache Iceberg』を書きました。技術評論社から8月27日に発売予定です！！
刊行に寄せて、書籍の紹介と、執筆の思い出を振り返るブログを書きました
本書が日本におけるIcebergの普及と、多くの人の活用の助けに繋がればと心から願っています
https://t.co/YFNe0dxVCQ

[Jun Ohtani @johtani]

次回は7/23にLINEヤフー様にて開催することになりました。スピーカー募集中です！ / #searchtechjp
Search Engineering Tech Talk 2026 Summer - connpass https://t.co/RnvD5SJKcb

[べりんぐ @_Bassari]

これは理解を深めて何処かで喋りたいな... OTFSGとか

[べりんぐ @_Bassari]

ここ最近Lanceが気になっていて、Iceberg Meetupでのセッションをまとめてみた。見ていく中で改めて、マルチモーダル/ランダムアクセスに最適化されたファイル/テーブルフォーマットが必要とされていて、その解の一つがLanceなのではという期待が深まった
https://t.co/UMI4iZv5vZ

[べりんぐ @_Bassari]

Iceberg SummitでのEtleap, Snowflake, Databricks, Dremio, Ryft社の人々によるパネルディスカッションまとめです
https://t.co/zomi1EgVGQ

[べりんぐ @_Bassari]

"「オープン」であることは、Icebergが何を作ってきて、これから何を作り続けるべきかを理解するうえで欠かせません。<中略> (コンウェイの法則が示す通り)オープンに相互運用するコミュニティがなければ、オープンに相互運用するフォーマットを持つことも難しくなります"

[べりんぐ @_Bassari]

Iceberg Summit 2026の激エモな基調講演をまとめました。
表題は「バッチからストリーミング、そしてAIへ。みんなのための、みんなによるIceberg」
講演者はSnowflake所属のIceberg PMCであるRussell Spitzerです
https://t.co/qvx8BMgtsH

[べりんぐ @_Bassari]

>見落としてはならないのは、エージェントとAIの時代であっても、Iceberg を支えているのは依然として人間のコミュニティだという点です。だからこそ新しい要求やリクエストを受け止め、それに合わせてコミュニティとプロジェクトを変えていけます。時代が変わるなら、私たちもそれとともに変わります

[べりんぐ @_Bassari]

Iceberg Summit 2026の激エモな基調講演をまとめました。
表題は「バッチからストリーミング、そしてAIへ。みんなのための、みんなによるIceberg」
講演者はSnowflake所属のIceberg PMCであるRussell Spitzerです
https://t.co/qvx8BMgtsH

[べりんぐ @_Bassari]

>業界の要求が変わればテーブルフォーマットへの要求も変わります。Apache Iceberg はその新しい要求に合わせて作り直す必要があります。過去にも作り変えてきた以上、同じことはまたできます。Iceberg は私たちが必要とするものへ姿を変えられる、というわけです。

[べりんぐ @_Bassari]

@matsubara_tech ご安全に！！

[Takayuki Enomoto @tkykenmt]

OpenSearch Serverless の次世代バージョンがローンチしました。待機時のゼロコンピューティングを実現した他、アーキテクチャーの刷新によってスケール速度が最大で20倍高速化されています。 リリース記事の日本語版はこちらです。

https://t.co/XCJXIu5SLs

https://t.co/5HHitzuhmT

[べりんぐ @_Bassari]

@AcrobAtcoder Yamaguchi さんも、OSS貢献にとても精力的に取り組んでおられて、陰ながら大変尊敬しております。いつか社内でも何らかコラボできる日が来たらいいな〜と思っております！（部署的にはとてつもなく離れてますがw

[べりんぐ @_Bassari]

@myshmeh ありがとうございます！大変励みになります

[べりんぐ @_Bassari]

今年前半のOSS活動を振り返ってみました。分散クエリエンジン+検索エンジン関連の開発の話が中心ですが、Coding Agentもガッツリ使ってるので、AIを使ってOSS頑張るとこんな感じになる、というサンプルとしても読めるかも
https://t.co/Of7mVulBjV

[べりんぐ @_Bassari]

Icebergのページに「Guidelines for AI-assisted Contributions」が生えてるのに気づいた。内容にはとても賛同できて、自分自身のAIの使い方にも近いなと感じる
https://t.co/XzkdhJ5Uuo

[べりんぐ @_Bassari]

元記事はこちら
https://t.co/wrwQq2O2BD

[べりんぐ @_Bassari]

OpenSearchのAgentic MemoryをAIコールセンターに組み合わせて、エージェントによるパーソナライズされた応対を実現する記事が出ました(書くのを手伝いました)
OpenSearchはメモリ構築の補助や、ハイブリッド検索など便利な仕組みが色々あります。ぜひチェックしてください！
https://t.co/Xh3iCWK21V

[べりんぐ @_Bassari]

Keroberosだぞ！！！

[べりんぐ @_Bassari]

ケルベロスになりたくなってきた

[べりんぐ @_Bassari]

@_Tappuri おやすみなさい！

[べりんぐ @_Bassari]

@simosako @OutputSeq ご参考までに、再現検証用のコードを用意しました
https://t.co/naMvIvfsH0

[べりんぐ @_Bassari]

@simosako @OutputSeq 失礼しました、実機検証を交えてもう一段詳しく調べたところ、iceberg-goのリトライ実装は未完成であり、競合時は常にトランザクションが失敗する挙動であることがわかりました、、。まだまだ発展途上のようです
https://t.co/X5HNKHtwBe

[べりんぐ @_Bassari]

追跡調査と検証を重ねたところiceberg goのコミットリトライは機構自体が未完成であり、今の時点では正しく機能しないことがわかった（リトライコミットは常に拒否されるので、データが壊れることはない）
https://t.co/2E9LB070if
この状況については以下で言及されている
https://t.co/8EexeAanbK

[べりんぐ @_Bassari]

再現用のgist
https://t.co/naMvIvfsH0

[べりんぐ @_Bassari]

ふとiceberg-goの競合時のコミットリトライ実装を調べていて、リトライ時にメタデータを書き直してなさそうなことに気づいた。(Sparkは書き直してる)
ファイルを使い回す分レイテンシの観点では有利だけど、これってSpec的には問題ないんだろうか...?
https://t.co/iyYHEV9kcW

[べりんぐ @_Bassari]

追跡調査と検証を重ねたところiceberg goのコミットリトライは機構自体が未完成であり、今の時点では正しく機能しないことがわかった（リトライコミットは常に拒否されるので、データが壊れることはない）
https://t.co/2E9LB070if
この状況については以下で言及されている
https://t.co/8EexeAanbK