Takeshi Yamamuro

OSS engineer@R&D, Ph.D. in CS (Database Systems) - #ApacheSpark PMC&committer, #ApacheHivemall PPMC&commiter, #PostgreSQL enthusiast

[Takeshi Yamamuro @maropu]

happy to join the Spark community as a committer! https://t.co/3ioAgSd5uO #ApacheSpark

[すてィーろ @stilo]

Matzさん、Claude Opus 4.6ぐらいから、コードもGitのコミットもAIにまかせて、まったく書いていないとのこと #oscnagoya

[Takeshi Yamamuro @maropu]

@moritapo /extra-usage

[Takeshi Yamamuro @maropu]

Claude Codeで実装は10分、その後の論文読んで実装の内容の確認、実装の手直し、実験の取得で3-4日、明らかに人間がボトルネック

[Takeshi Yamamuro @maropu]

この前話題になっていたTurboQuantをpgvectorに組み込んで探索の枝刈りに使ってみたけど、128次元くらいだとPQに比べて結果があまり良くない、1k近い次元じゃないと精度でないのかな https://t.co/S3Mf9YqVKV

[Takeshi Yamamuro @maropu]

例えば、HNSWのグラフ構築の際に、グラフ構造がwork_memに収まる場合にはin-memory用のロジックで動いて、溢れたらon-diskのロジックに切り替わる部分が、後者の最適化部分が丸ごと消失していた、確かにその部分の振る舞いはテストに記述されていない

[Takeshi Yamamuro @maropu]

ClaudeのOpus4.6でコンパイラを作ったAnthropicのブログを読んで、Oracleが用意できる場合のコード生成の精度を確かめてみようと思い、Cで書かれたpgvectorのHNSW実装（~5000行程度）をRustに書き換えるタスクを似たような方法 (copilot-cli w/Opus4.6）で昨晩解かせてみた https://t.co/FrPOsNxMeY

[Takeshi Yamamuro @maropu]

生成されたRustのコードを確認してみたところ、 pgvectorで最適化されている部分が簡素化されていた、Agentに与えたプロンプトに移行のゴールとして統合テストにPASSすること、としたせいだと推測されるけど、なかなか面白い、whatだけではなくて引き継ぎたい部分はhowも書かないといけないか

[Takeshi Yamamuro @maropu]

@LazyShion 塩川教授、おめでとう！

[Takeshi Yamamuro @maropu]

PostgreSQL Advent Calendar 2025（シリーズ2）の4日目のエントリを今更ポストした、気づいたら12月に入って1週間が経過していた・・・ pgvector（HNSW）を探索候補の枝刈りで改良してみた https://t.co/a3X3H3eUmH

[Takeshi Yamamuro @maropu]

@moritapo ワロタ、昨晩も激戦でした、眠い

[Takeshi Yamamuro @maropu]

来週のIcebergのイベント、現地参加を予定してたけど突発的な私用が発生して、なくなくキャンセル...

[Takeshi Yamamuro @maropu]

夏休みにまとまった時間が取れたのでpgvectorをいろいろいじってみたが、高次元空間はなかなか難しい 　https://t.co/S3Mf9YqVKV

[Takeshi Yamamuro @maropu]

@moritapo w あのポストの正装なのかと思ってました

[Takeshi Yamamuro @maropu]

@moritapo なんでサンダル短パンじゃないんですか？

[JDMC @JDMC2011]

現在行われているDatabricksのイベントDATA+AI SUMMIT 2025にてLakebaseが発表されました。
Postgres互換のオープンソースDBであり、ストレージとコンピューティングを分離したアーキテクチャとのことです。
https://t.co/zrtvb4bhC1

[DuckDB @duckdb]

The DuckDB in Action book, authored by Mark Needham, Michael Hunger and Michael Simons, will be available in Japanese from late August.

[K. Ishizaki @kiszk]

@ozaさん 👏
> 最優秀論文賞
> GPU直接IOを用いた圧縮データに対するデータベース問合せ処理方式の検討小沢 健史1, 合田 和生11. 東京大学

[Takeshi Yamamuro @maropu]

@kiszk @moomindani @oza めでたい、わいわい

[Apache Spark @ApacheSpark]

[ANNOUNCEMENT] The Apache Spark 4.0.0™ release is here! 🎉

Congrats to the #ApacheSpark community! This milestone is a testament to tremendous collaboration, resolving over 5100 tickets with contributions from more than 390 individuals.

Try it out! ➡️ https://t.co/Q2RRnz6WOY