Toyokazu Uda

A Free Software Engineer

[Nagarehoshiko @nagarehoshiko1]

流れ星、見つけた!?
ハワイ時間：2024/11/09 05:00ごろ

ハワイ・マウナケア・星空ライブ
https://t.co/BhgLgi5PDm
国立天文台と朝日新聞社提供より

[Toyokazu Uda @ToyokazuUda]

@KinHase たしかに www

[Toyokazu Uda @ToyokazuUda]

Sudachi Core, Small だと、
三 名詞
大 接頭辞
流星群 名詞

Sudachi Full で、ようやく
三大流星群 名詞

三大○○とか、四大○○って、よくありそうだけど、
Core, Small の辞書にはないってことですよね・・・
日本語って、難しい～～

[Toyokazu Uda @ToyokazuUda]

@KinHase おおお〜、いろいろやられているんですね👍

[Toyokazu Uda @ToyokazuUda]

@KinHase おおっ、こんなところに専門家がいらしたんですね！
つぶやいてみるものですね wwww

'オリ', 'オン', '座', '流', '星', '群'　って分割されてしまうのは、辞書にないからでしょうか？
天文系など、専門エリアは難しいんですかね・・・

[Toyokazu Uda @ToyokazuUda]

Janome Tokenizer で、
いっか 名詞
くじゅう 名詞
座 名詞
α 記号
流星 名詞
群 名詞

Sudachi Tokenizer Small で、
いっかくじゅう座 名詞
α 記号
流星群 名詞
---------------
辞書の違いですかね・・・

[Toyokazu Uda @ToyokazuUda]

Llama index で学習させているのだけど、どうもちゃんとインデックスが生成されないので、Tokenizerを調べていたら、難しい・・・

[Toyokazu Uda @ToyokazuUda]

ようやく Gemini API で Function Calling 動いた。Google Colabo だとあっさり動くんだけど、ローカルだ動かなくって、はまりました。
もうちょっと、ドキュメント用意してよ >> Google.

[Toyokazu Uda @ToyokazuUda]

@KinHase Wow!!
すげ〜！

[Toyokazu Uda @ToyokazuUda]

ということで、運転疲れたので、晩酌中・・・

[Toyokazu Uda @ToyokazuUda]

本栖湖から、富士山が綺麗に見えました。

[Toyokazu Uda @ToyokazuUda]

山梨県　身延　久遠寺の枝垂れ桜

[Toyokazu Uda @ToyokazuUda]

久遠寺の枝垂れ桜

[Toyokazu Uda @ToyokazuUda]

山梨県久遠寺に来ました。

[Toyokazu Uda @ToyokazuUda]

だめだ、また落ちた。
仕方ないので、BIOS fan を Coolに変更。

[Toyokazu Uda @ToyokazuUda]

NUCの熱暴走対策でBIOSのイベントログを調べたら、Thermal Tripは発生していない。
ということは、SSDかな。
ということで、ケースを開けてみたら、SSDと天板のヒートシンクとの間の冷却シートが完全に密着していなかった。
とりあえず、サーマルグリスをしっかり塗布してみた。
これで様子見る。

[Toyokazu Uda @ToyokazuUda]

今日のお昼のおすすめは？
とGeminiに聞いたら・・・

自家用ヘリないんですけど ^o^

[Toyokazu Uda @ToyokazuUda]

これで、速度的には70%程度。
この設定をしないと、値は 0 ...つまりシステム最適値で、CPUを可能なところまで使ってしまう爆速設定のようです。

[Toyokazu Uda @ToyokazuUda]

ようやく、tensorflow の機械学習コードができた。
これまで、mac Metal 使っていたけど、リソースの関係で、NUC で動かそうとしているところ。
これまで metal のブラックボックスだったけど、畳み込みとかちょっと分かった気がしてきた。

[Toyokazu Uda @ToyokazuUda]

いろいろ調べていたら、tensorflow で、同時並行スレッド数を設定できることが判明。
これで、CPUを60%程度に抑えて、稼働中。
CPUファンがだいぶ静かになりました。

config.threading.set_inter_op_parallelism_threads(n)
config.threading.set_intra_op_parallelism_threads(n)