勉強会ネタとして、ゼロショットで実現できるテキストからの画像検索を書いてみる。使えば簡単に実現できそうで、日本語翻訳で学習させたJapanese-CLIPもあるので簡単に作れそうと思ってはいたけど、やっぱり簡単だった。良い日本語モデルを公開してくれているrinna社に感謝だ。このブログの記事画像6000枚の特徴ベクトル化にRTX3090で適当にやって20秒ぐらい。日本独自ドメインの単語はうまく検索できない事が多いが、大抵は良い感じに検索できる。このブログは静的なビルドで作られていて、画像を特徴ベクトル化するのはビルド時にやればよいが、検索クエリ文字列を特徴ベクトル化するのは動的な実行が必要となってしまうので、静的サイトに基本的には組み込めない。動くように変換してやっていたりするが、単純に量子化しても数十MBの重みになりそうで(demoではt5-small量子化した重みをダウンロードしているが、合計110MB強)、検索するときに重みをわざわざブラウザにダウンロードさせるのも重すぎるのだよな。芦野温泉に浸かり、その後道の駅に行くいつもの休日パターン。形で好きなのだよなぁ。昼食は道の駅のあんず館。このへんの道の駅の食堂は大抵どこもどれも美味しい。950円のヒレカツ定食、とんかつ専門店よりだいぶお安い値段だけど大満足。このホテルの温泉はモール温泉というらしく、初めて入ったのだけど気に入って昨晩から三回目の入浴。本当はサウナ推しのホテルなのだが、サウナよりもモール温泉の方が気に入ったなぁ。至る所に木彫りのクマ(写真は考えるクマ)が置いてあったのも可愛かったな。---帯広から...朝、朝食前に温泉に。このホテルの温泉はモール温泉というらしく、初めて入ったのだけど気に入って昨晩から三回目の入浴。