LLM Wikiの基本構成
これをみんなどういうふうに活用するの?この概念を。
ビキペディアをもうこれにしちゃえばいいんじゃないの?
あのね、これはね、いろんな文脈で活用できて、もうかなりすごいね、俺の手元にある原稿をまるで読んでるかのような素敵な質問をね、こう
目がねの反射で読んでる。 反射で読んでる。見えてる?これもしかして。
あのね、まさにこれね、LLWikiね、これかねりんに合うんじゃないかなと思ってて。
えーどういうこと?かねりんWikiってこと? かねりんさ、自分のあらゆるデータをさ、
クロードコードにぶち込んでさ、管理してるでしょ? ああそうそう、そんな感じよ。
それをもう一個Wikiをかませた方がいいんじゃない?って話。
ローカルで? そう、LLWikiって個人のその自分の改善とか、自分のその
何だろう、管理みたいなものにも当然使えるっていう風にアンドレ・カーバッシは言っていて。 別にネットサービスじゃないと?じゃないと、自分の情報、ナレッジを管理する上で非常に重要になると。
で、アーキテクチャーも提唱されてるんだけど、どういう構成か、LLWikiってどういう構成になってるかと。
これね、非常にシンプルなのよ。かねりんの、今すでに入れてしまっている、いろんなソースとかいろんなかねりん関係のデータがあるじゃない?
それはそのままでいいのよ。生のソースっていうのがまずあります。 その上にWiki層っていうね、Wikiに再構築したような状態とかがありますと。
なるほど、ソースは食材そのまま置いとけってこと? そう、あとは食材をそのまま追加しとけばWiki層が更新されるみたい。
Wiki層を更新するのは誰かって言ったら、その上に構築されているスキーマっていうルールがね、こういうふうにWikiを作っていきましょう。
スキーマに従うLLMの更新
どういうふうに進化させていきましょうっていうLLWikiに対するルールみたいなものがあって、それを制定しておきますと。
自分で設計するの? それは、そう、自分で設計するんだけど、基本的には、アンドレ・カーパシーが作った経典みたいなやつを、
作り方としてはその経典のファイルがあるから、それをクロードコードとかに読ませて、こういうことをやりたいんですけどって言うと、やってくれる。
なるほど、そういうセットがあるんだ、もう。Wiki作りましょうセット概念みたいな。 そう、概念がある。アンドレ・カーパシーはこういうふうに運用していくといいよみたいな。
なるほど、今回のこの落ち着けAIWikiもその概念、この今の階層構造に沿って作ってあるの? そう。
でもクロードさ、すぐ忘れるからそういうの。 忘れるの? そう、途中、アンドレ・カーパシーの概念を説明して入れて、やってねって言ったんだけど、途中でだんだん方向性が逸れてきたから、もうそれ自体を一番ト
ップに入れて、もう常にお前これを読んどけって。
なるほど。 俺はこの概念で作るんだって言ったらもうずれなくなったけど、結構その常にアンドレ・カーパシーのこの提唱に従ってやるんだみたいな。
アンドレ・カーパシーが神であるからスタート。 そう、これが経典なんだみたいなね。 法律より上である。そうすると生のソースは生のソースのままでウィキ層っていうのはできるね。
ウィキ層、はいはいはい。 その上にね。 その上に、なんだっけ、コントローラー。 スキーマ、そうそうそうそう。
スキーマ。 ルール、どういうふうに構築していくかみたいな。 どういう規約を作るか。
そこだけ構築しちゃえば、あとは生のソースを入れていけばウィキが更新されていくよっていう仕組みができるから。
そうすると、カネリの概念、カネリが持っているそのいろんな仕事とかいろんな情報が横軸に繋がっていくんだよね、ウィキとして。
入れる時はだからLLMを介して、そのLLMはどこに噛むの?それは。
LLMはどこに噛むか、クロードコードがそこに噛むって感じかな。
僕からLLMに渡して、LLMを通して、どこに行くのよ。
入れたらウィキ更新してって言ったら、ウィキ更新しますって言って。
スキーマ層に行くのか、その後に。
そうだね。 この情報の流れとしては。
情報の流れとしては、スキーマを読みに行って、そうだ、更新されたと。これが追加されてる。
じゃあウィキを更新するって言って、ウィキのこの内容だったらこのページとこのページに更新して、新しい概念はこれが追加されるよね。
ここが繋がるよねってバーっと更新してくれるみたいな。
その仕事はスキーマがやるってことか。
そう、スキーマはルールだから。LLMがやってくれる感じかな。
スキーマのルールに従ってLLMが動いてウィキを更新する。
検索効率とトークン消費
カネリはウィキに対してLLMで検索をすればいいんだね。
LLMを使って、そうすると例えばこういうことなんだけどって言ったら、LLMは今まではカネリの生のソースを読みに行ってたわけ。
そうだよね。だからこれさ、トークンとかヤバいのかなとかってずっと思ってたもん。
ヤバいよ。
だって、この件についてのこの話っていう時にさ、結構バーって全部文字検索かけてるみたいなイメージじゃない?
いつもトークンが何十形何百形みたいになってくる。
そう、それだけでダーって読みに行ったりするからすごく消費をするのね、コンテキュータを読みに行かなきゃいけない。
だけどスキーマを使ってウィキ層を構築してあげれば、基本的にはウィキを読みに行けって言っとけば、
辿っていくんだよね、概念をね。インデックスが。最初にインデックスってこの表紙みたいなやつがあって、
この付き合いウィキと一緒で。そっから探していって、似たような概念とかつながりを辿って検索してくれるから、
意外なところがつながったりとか、いろいろな横の情報の発展みたいなところが受け取れると。
ファイル検索じゃなくて、ウィキにアクセスするようになって、ウィキを介してデータを見ていく。
MarkdownとObsidianで可視化
そう。
実体はどこにあんの?ウィキっていうものがさ。
ウィキはマークダウンのファイルになってます。
一本版?
そう。回想構造にはなってる。
けど普通にマークダウンファイルが繋がっているだけ。
マークファイル同士が?
そうなんだ。
普通にテキストで単なる。
それをクロードコードを使う時とかに、ウィキを使えばすげえトークンを抑えていけるってこと?
そう。今までこれ全部やってたのがちゃんと。
天才じゃんそれ。発明じゃない?
だからこれで。
めちゃめちゃトークン消費量も抑えられますよノウハウじゃんそれ。
トークン消費量がどれくらい、ウィキがでかくなってきたら結局ウィキを更新するのにもすごくトークン消費するから。
更新にも使うんだね。結局トントンくらいなのかな。
どのくらいの頻度で情報を追加するかっていうのもあると思うけど、
まだ自分の個人ナレッジで使ったわけじゃないから、どのくらいの威力があるかわかんないけど、
いろいろ自分の個人のやつとか論文とかを使って、自分で収集してる論文をウィキにしましたよみたいな人が結構いて。
データベースじゃなくてって感じ?
そうそうそう。そうするとやっぱその論文同士の横のつながりみたいなものが発展的にわかって、新しい発見につながるよねみたいな。
前支部長言ってたさ、AI時代はさ、収集した情報の横のつながりを作るの大事だみたいに言ったじゃん。
そうそうそうそう。
それのある意味の解だね。
そうだよ。だからこれで。
モーション×オブシリアンだとか言ってたけど、そっちじゃなくてLLMウィキだみたいな感じ?
でもこのLLMウィキ、ビューワーとしてオブシリアンを推奨されてるのよ。
あ、そうなんだ。オブシリアンのソフトを使って中身を見ましょうってことか。
そう。なぜならグラフビューができるから。
さっきの?
そう。マークダウンなんだよ。オブシリアンも。
つながりとかもグラフビューでオブシリアンだったら見れるから。
基本的にはビューアーとして使うオブシリアン。難しい使い方覚えなくてもいいってことだよね。
もともとオブシリアンでやりたかった概念をLLMで発展的にやらせてるみたいなイメージかな。
なるほどなるほど。めちゃめちゃハードル下がってるね。
オブシリアンを使うとかじゃないよな。
オブシリアンを使おうと思うと結構難しかった。
でも元々結構使い手の人はオブシリアン使ってつながりとかを自分で作りながら、それをLLMに読ませていろんなことをやってたのね。
なるほどね。そもそも先を言ってたんだ。
そう。だからそういうつながりがLLMにとってすごく重要な情報になってるよっていうのはもともとわかってたことなんだけど、
それをWikiっていう形で表現し直しましょうみたいな。
そのアーキテクチャをこういう形にすればいいんじゃないっていうのを提唱したのがこのLLM Wikiで。
アンドレ・カパシーが言ってるっていうことですごく注目を集めてますよねと。
Wikiを見直しと発見に使う
なるほどね。めちゃくちゃいいんじゃない?
実際に落ち着きWikiを構築してみて、面白かったもんね普通に。
あ、俺こういうこと言ったなとか、あ、これこういう話だったなみたいなのもあるし、
ここつながったなみたいなのもあるし。
こうやって見直して使うものなの?これ。作りましたは作ってどうするの?これ。
見直し、ナレッジとしても見れるっていうのも。
基本AIが参照するものとして効率がいいデータの形式ですねが一個じゃん。
あとは、ラグと違ってつながりが自分の目で見えますよねっていうのもある。
なるほどなるほど。
ラグはちゃんこ分けしたものとか、それをインデックス登録したものを可視化できてるわけではないから。
そうだよね、あくまでもAIの回答で出てきたものだけ見るみたいな。
そう。
これはじゃあ直接こうやってWiki形式で見れて楽しいねってこと?辞書みたいに使って。
そう、Wiki形式で見れて、Wikiの検索も別にやろうと思えばできるし、
自分の中でこの概念の発見のツールとしても使えると。
配信しながらめっちゃ使えるなこれ。
人間としての過読性があるから、そういう形でAIのためのテキストをまとめられるよねっていうのも、このLLLWikiのすごくいいところ。
Wikiぐらいの、マークダウンだったらさ中身がさ、スマホとかにポイって入っちゃうよね。
入る入る。
でなんかソフトさえありゃうまい具合に見れるやさ。
見れると思うよ。
スマホでも全知識ここにみたいな感じになるね。
知識の分け方と活用例
ある程度のコンセプトで知識を分けなければ、何でもかんでも入れるとだんだんこうね。
これコンセプトで分けた方がいいわけかな。
自分のパーソナル情報Wiki、あとなんかリサーチしているポッドキャストに関するリサーチWikiみたいな。
そのぐらいで分けた方がいいと思う。流動的には。
こういう分け方?
うん。全部まとめて入れちゃってもいいとは思うけど。
まとめて入れたら横の繋がりがなんか意外な繋がりが見つかったり。
意外な繋がりも分かると思う。
でも例えばとある分野に対する研究論文をいっぱい集めて読んでるんだったらその分野の研究の論文だけで作った方が。
なんか見たい、フォーカスしたいところがあるんだったらそっちにフォーカスした方がいいんじゃねえかなとは個人的には思うけど。
繋がりを発見するためにって考えたらもう全部ここに一箇所に入れた方がいいんじゃないかとかって思っちゃうんだけど。
そうだね。意外と繋がらない。あんまり軸が違うと繋がらなかったりすると思うし。
ソースが全部表示されるわけだもんね。
そうだね。
これは。
で、そのホームソースの方は別にいじってないし、編集しに行かないから。
確かにでも今すぐ使えるなって思ったのは、自分のパーソナルデータとか動かしてるプロジェクトの情報全部ぶち込んだKanelin Wikiを作るのと、
あとリサーチしたもののノーションにバンバン溜まっていくけど見ない死にぐらになってるやつ。
それもったいないからWikiにしたらいいかなって思った。
そうだね。たぶんすごくそういう使い方をするといいんじゃないかなと思って。
俺もまだこの落ち着きAIラグ、落ち着きAIラジオの内容しかWikiにしてないけど、
これだったらちょっといろいろ、自分の今の活動もこういう形で一回まとめ直してみようかなって思ったもんね。
まず自分のことね。
落ち着きAIラジオだけまとめてて面白かったもんこれ、内容。
非常に使えるとは思います。
