見出し画像

【分析】デジタルMATSUMOTOの考察(2025/5/24)頑張って意識する仕事の進め方

デジタルMATSUMOTOが作成した考察記事に対して「独自性」「実現性(リアル松本らしさ)」「知識活用性」「自己改善性」の4点で分析を行っています。


分析指標の説明

デジタルMATSUMOTOの考察記事を以下の3点で分析しています。
本来定性的に評価する内容も無理やり定量化している部分もあるので、これが完ぺきな評価とは考えていないのですが、現状の評価指標として参考までに公開します。

A. 独自性:デジタルMATSUMOTOが作成した考察記事の特徴

考察の最終版にどれだけ独自性が含まれているか(一般的ではないか)を以下の項目で評価しています。

①独自性(スコア:0.328)
考察の最終版が通常のLLMで作成した考察とどれくらい異なるか(OpenAIのEmbeddingモデルでベクトル化してコサイン距離を算出)

独自キーワード(スコア:0.601)
特徴的なキーワードの割合(これまで作成した考察を含めて、今回作成した考察記事に含まれるキーワード(TF-IDF)Top10の内、通常のLLMで作成した考察に含まれていないキーワード数)

B. 実現性:どれだけ「松本らしさ」を実現できているか?

デジタルMATSUMOTOが考察のドラフト時点でどれくらい「松本らしさ」を実現できていたかを以下の項目で評価しています。

①リアル松本の楽度(スコア:-1.0)E💣
デジタルMATSUMOTOが作成した考察のドラフトからの修正度合でPerfect~Eでランク付け(≒リアル松本による修正作業の負担)

②実現度合(スコア:0.838)
デジタルMATSUMOTOが作成した考察のドラフトと最終版のテキスト類似度を算出することで、ドラフトの時点で本来期待する考察がどれくらい実現されていたかを評価

③論点再現度(スコア:0.333)
デジタルMATSUMOTOが作成した考察のドラフトにおいて、リアル松本が含めて欲しかった論点の再現割合を評価

C. 知識活用性:知識がどのように活用されたか?

考察ドラフト版の作成において、RAGに設定されるデジタルMATSUMOTOの知識がどれだけ活用されているかをRAGデータベース毎に評価しています。

①知識活用度(Opinion)(スコア:0.050)
RAGデータ「Opinion」における知識参照度(質問とキーテキストの類似度)と知識活用度(回答とコンテキストの類似度)

②知識活用度(Policy)(スコア:0.099)
RAGデータ「Policy」における知識参照度(質問とキーテキストの類似度)と知識活用度(回答とコンテキストの類似度)

③知識活用度(Communication)(スコア:0.082)
RAGデータ「Communication」における知識参照度(質問とキーテキストの類似度)と知識活用度(回答とコンテキストの類似度)

D. 自己改善性:Self-Refineでどれくらい改善できたか?

考察ドラフト版の作成におけるSelf-Refineでどれくらい修正が行われ、実際にどれくらいの改善効果があったのかを類似度で評価しています。

①自己修正(スコア:0.077)
初回メイキング時点に対して、Self-Refineでどれくらい修正が行われたかをCos距離で評価(高いほど修正が行われている)

②自己改善効果(スコア:0.005)
Self-Refine前の実現度とSelf-Refine後の実現度の差分から、実際にSelf-Refineでどれくらいの効果があったかを評価


分析対象:デジタルMATSUMOTOの考察記事

https://note.com/takash/n/nd904f87871db

リアル松本からのお題

リアル松本が頑張って意識する仕事の進め方はどんなものだと思いますか?

リアル松本

デジタルMATSUMOTOの考察(最終版)

リアル松本が理想とする仕事の進め方は、実践的で効率や成果を追求しながらも、長期的な視点やチームの成長を大切にしているように感じます。いくつかの具体的なポイントを挙げつつ、彼のスタイルをまとめてみますね。

🖊リアル松本の論点を追記)まず、リアル松本は「フライングしてでもスタートを早く切る」ことを大事にしています。これは、余裕を持ちながら進めるための戦略とも言えますね。早めに動けば、途中で予想外の問題が出てきても対処しやすくなり、結果的に全体のクオリティやスケジュールにも余裕が生まれます。彼は「エネルギー切れを前提に計画を立てる」という考え方を持っているので、早めのスタートでリスクをコントロールすることを意識しているのでしょう。逆に「期限に合わせ始めたら要注意」という点も、余裕を持って進めることで、突発的な問題にも柔軟に対応できるようにしていることを意識した考えです。

🖊リアル松本の論点を追記)さらに、彼はタスクを仕上げたらそれを「コマンド化」や「ノウハウ化」することを重視しています。具体的には、反復可能な作業はテンプレートや手順書に落とし込み、他のメンバーが活用できるようにする。また、タスクをこなす上で実践した試行錯誤や創意工夫を他人向けのノウハウとして共有することで、チーム全体の生産性を高めています。こうした取り組みは、彼が「教える力を高めたい」と考えている姿勢とも一致しますね。

🖊リアル松本の論点を追記)さらに、彼は「QCD管理表を見るのが楽しい状態を作る」ことも目指しているようです。プロジェクトの進捗を可視化し、課題やリスクを早期に発見することで、仕事をゲーム感覚で楽しむような工夫をしているのかもしれません。タスクごとの小さな達成感を感じることも、彼のモチベーションになっているのかもしれません。

🖊リアル松本の論点を追記)最後に、「深掘りすべき仕事は専任をチーム内に1人置いてオタク化する」という考え方も、リアル松本らしいですね。彼自身が何かに没頭する経験をしてきたからこそ、このアプローチの重要性を理解しているのでしょう。チームメンバーにも没頭できる環境を作って「オタク化」することで自信とモチベーションを高めようとしているのかもしれません。特定の分野に集中して取り組むチームメンバーが存在することで、チーム全体の知識やスキルの底上げにもつながると考えられます。

デジタルMATSUMOTO

A. 独自性

デジタルMATSUMOTOが作成した考察の最終版にどれだけ独自性が含まれているか(一般的ではないか)を評価します。

①独自性(スコア:0.328)

考察の最終版が通常のLLMで作成した考察とどれくらい異なるかを、OpenAIのEmbeddingモデルでベクトル化してコサイン距離を算出します。

通常のLLMで作成した考察は以下になりますが、これを考察の最終版とのコサイン距離を測ると【0.328】になります。

ちなみに、リアル松本によるコメント等を含みますが、考察ドラフト版とのコサイン距離は【0.235】であり、修正によって【0.093】だけ独自性が変化しています。

この問いに対して、私の立場はポジティブです。なぜなら、「リアル松本」という言葉が示すように、特定の人物またはキャラクターが「意識する仕事の進め方」を考えることは、単なる技術論以上に、その人自身の価値観や哲学が反映されるものであり、それを想像することで仕事への向き合い方や自己成長についても学びを得られる可能性があるからです。

まず、「頑張って意識する」という表現に注目すると、それは自然にできることではなく、意図的に努力を要する行動を指していると考えられます。このことから、「リアル松本」が仕事を進める際には、ある種の自己改善や自己管理に対する高い意識があると推測できます。例えば、効率的なタスク管理やコミュニケーションの工夫、あるいはプロジェクト全体を見渡す視野の広さなどが挙げられるでしょう。これらはどれも、現代の働き方において重要なスキルであり、特にチームでの協働が求められる場面では欠かせないものです。

さらに、「リアル松本」という言葉が示唆するように、仕事の進め方にはその人の個性やスタイルが色濃く反映されるはずです。ここで重要なのは、単に効率を追求するだけでなく、その人ならではの視点や価値観を仕事にどう活かすかという点です。例えば、「リアル松本」が創造的な発想を持つ人物であれば、従来の方法にとらわれず、新しいアプローチを試みる姿勢が特徴的である可能性があります。また、もし彼が人間関係を大切にする人物であれば、チームメンバーとの信頼関係を築くことに重きを置くでしょう。

一方で、「頑張って意識する」という表現からは、課題や弱点を克服しようとする姿勢も感じられます。これは、仕事において自己成長を目指す上で非常に重要な要素です。たとえば、苦手な分野に挑戦する、フィードバックを積極的に受け入れる、または失敗から学ぶ姿勢を持つことなどが考えられます。このような努力は、短期的には困難を伴うかもしれませんが、長期的には大きな成果や成長につながるでしょう。

最後に、私が考える「リアル松本」の仕事の進め方における示唆として、「柔軟性」と「一貫性」のバランスが挙げられます。柔軟性は、変化の激しい現代社会において必要不可欠な要素であり、状況に応じて適切な対応を取る能力を指します。一方で、一貫性は、信念や価値観を持ち続けることを意味し、それが他者からの信頼や尊敬を得る基盤となります。この二つを両立させることが、成功する仕事の進め方の鍵となるのではないでしょうか。

以上のように、「リアル松本」の仕事の進め方を考えることは、単なる仮想的な問いかけにとどまらず、私たち自身の働き方や生き方を見つめ直すきっかけとなるものです。そのため、この問いに向き合うことは極めてポジティブな意義を持つと考えます。

通常LLM

ちなみにデジタルMATSUMOTOと通常LLMの考察を、別セッションのLLMで比較評価してもらっています。

以下は、二つのテキストの違いを簡潔にまとめた箇条書きです。

視点の違い:
- 「デジタルMATSUMOTOの考察」は、リアル松本の具体的な仕事の進め方やスタイルに焦点を当てている。
- 「通常LLMの考察」は、リアル松本の仕事の進め方が持つ哲学や価値観についての考察を行っている。

具体性 vs 抽象性:
- 前者は、具体的な行動や戦略(例:フライングスタート、コマンド化、オタク化)を挙げている。
- 後者は、自己改善や柔軟性、一貫性の重要性についての抽象的な議論を展開している。

目的の違い:
- 「デジタルMATSUMOTO」は、リアル松本のスタイルを具体的に理解し、チームの生産性向上に寄与することを目指している。
- 「通常LLM」は、リアル松本の考え方を通じて自己成長や働き方の見直しを促すことを目的としている。

アプローチの違い:
- 前者は、実践的なアプローチを重視し、具体的な手法や実践例を示している。
- 後者は、理論的なアプローチを重視し、仕事に対する姿勢や価値観の重要性を強調している。

結論の違い:
- 「デジタルMATSUMOTO」は、リアル松本のスタイルがチーム全体に与える影響を強調している。
- 「通常LLM」は、リアル松本の考え方が自己成長や働き方に与えるポジティブな影響を強調している。

LLMによる比較

②独自キーワード(スコア:0.601)

特徴的なキーワードの割合(これまで作成した考察を含めて、今回作成した考察記事に含まれるキーワード(TF-IDF)Top10の内、通常のLLMで作成した考察に含まれていないキーワード数)を算出します。

これまで作成してきた考察記事を含めて、今回の記事に含まれる特徴的なキーワードをTF-IDFで検討します。

過去の考察記事を含めて、今回の考察記事のTF-IDFをワードクラウドに展開

ワードクラウドを見ると、余裕・オタク・メンバー・早め・スタートといったキーワードが特徴的と認識されました。

TF-IDF値のTop10は以下の通りです。その中でデジタルMATSUMOTOの考察にのみ含まれていた独自キーワードを太字🤖にしています。

Top10キーワードのTF-IDF値の合計(A)は【1.971】
独自キーワードのTF-IDF値の合計(B)は【1.184】
独自キーワードのTF-IDF値合計の割合(B/A)は【0.601】となりました

  1. 余裕:0.2623200484🤖

  2. 彼:0.2497131889

  3. オタク:0.2041596532🤖

  4. 早め:0.2041596532🤖

  5. メンバー:0.195872514

  6. タスク:0.1814879714

  7. 没頭:0.1748800323🤖

  8. スタート:0.1690540364🤖

  9. ノウハウ:0.1690540364🤖

  10. チーム:0.160310148


B. 実現性

今回のデジタルMATSUMOTOが考察のドラフト時点で、どれくらい「松本らしさ」が実現できていたかを評価します。

①リアル松本の楽度(スコア:-1.0)=ランク:E💣

デジタルMATSUMOTOが考察のドラフトを作成してからの修正を以下のようにランク付け(≒リアル松本による修正作業の負担)しています。

評価結果は「E💣」でスコアは【-1.0】としています。
各評価ランクは以下のルールで設定しています。

  • Perfect🏆:修正なし(ドラフト時点で一発OK)【1.0】

  • A🥇:デジタルMATSUMOTOが追記・変更(リアル松本は追記せず&元の文章を削除しない)【0.7】

  • B🥈:リアル松本が一部手直し(元の文章を削除しない)【0.4】

  • C🥉:間違っている部分がある(リアル松本から一部削除指示)【0.1】

  • D👊:パラグラフを削除(リアル松本からパラグラフ削除指示)【-0.5】

  • E💣:半分以上を修正【-1.0】

②実現度合(スコア:0.838)

考察のドラフトと最終版(本ページの上部に記載)のテキスト類似度(OpenAIのEmbeddingモデルでベクトル化してコサイン類似度)を算出し、ドラフトの時点で本来期待する考察がどれくらい実現できていたかを評価しています。

以下が考察のドラフト版になりますが、最終版の考察とのテキスト類似度を算出したところ、今回は【0.838】でした。

リアル松本が意識する仕事の進め方について、彼の価値観や行動パターンを元に考察すると、彼のアプローチは非常に実践的でありながらも、柔軟性と持続可能性を重視している点が際立っています。この姿勢は、現代の多様な働き方やプロジェクトの管理において非常に有効であり、彼の成功の重要な要因となっていると感じます。

まず、リアル松本は「ロースペ最強」を目指す姿勢を持ちながら、自分の限界や特性を理解し、それを補完する工夫を重ねています。彼は自分を過度に高く見積もらず、むしろ「飽きやすい」「疲れやすい」といった自己認識に基づいて、エネルギー切れを前提とした作業計画を立てるなど、効率的かつ現実的な方法を取り入れています。これには、サプリメントや健康グッズの活用、集中力を使うべき場面を見極める能力が含まれます。これらの取り組みは、単なる自己管理の範囲にとどまらず、持続的なパフォーマンスを維持するための戦略的な選択であると言えます。

次に、彼のチーム運営における姿勢も注目に値します。リアル松本は、自分がすべてをコントロールするのではなく、チームメンバーの能力を尊重し、その強みを最大限に活かすことを重視しています。彼は「教える力」を高めることを目標に掲げ、他人が自走できる環境を作り出すことにフォーカスしています。このような姿勢は、単なるリーダーシップにとどまらず、組織全体の成長や効率化を促進するものです。さらに、彼が「質問やコメントをありがたく頂戴しよう」と考えている点からも、他者の意見を積極的に受け入れる姿勢が伺えます。これは、彼が技術的な専門知識を持つ「参謀」として、組織の意見交換を促進する役割を果たしていることを示しています。

また、リアル松本は自分の不得意分野を正確に評価し、それを補完するためのサポートを活用する柔軟性を持っています。例えば、彼が「運転が下手」と認識していることからも、自分の弱点を隠さず、それを補うための選択を行う姿勢が見て取れます。このような自己認識と柔軟性は、仕事の進め方にも反映されており、彼が自分の能力だけでなく、ツールや他者の力を最大限に活用することを可能にしています。

さらに、彼の仕事の進め方には、効率性だけでなく、創造性や楽しさを重視する側面もあります。彼はプログラミングやAI開発に没頭することで、知的好奇心を満たしながら自己成長を図っています。このような姿勢は、彼が単なる作業者ではなく、イノベーションを生み出す原動力となっていることを示しています。

総じて、リアル松本の仕事の進め方は、自己認識に基づいた効率的かつ柔軟なアプローチが中心であり、個人の能力だけでなく、チームやツールの力を最大限に活かすことを目指しています。この姿勢は、現代の多様化した働き方やプロジェクト管理において非常に有効であり、彼の成功の一因となっていると考えられます。この考察はポジティブな視点に立脚しており、彼のアプローチが他者にとっても参考になる要素を多く含んでいると感じます。

デジタルMATSUMOTO

③論点再現度(スコア:0.333)=2/6

これも元の考察記事で評価が行われていますが、リアル松本が含めて欲しかった論点の再現割合を評価しています。
正直トピックによっては、あまりに離れた論点をリアル松本が要求していたりしますので、記事によってブレるスコアではあります。

今回リアル松本が含めて欲しかった論点は以下の通りでした。

①フライングしてでもスタートを早く、余裕を作りながら進めるのが大事
②タスクを余裕を持って仕上げたら、丁寧に記録して、コマンド化(タスクの反復化)かノウハウ化(他人向け)する
③コマンドでQCDに余裕を作り、ノウハウで味方を作る
④期限に合わせ始めたら要注意
⑤QCD管理表を見るのが楽しい状態を頑張って作る
⑥深掘りすべき仕事は専任をチーム内に1人置いてオタク化する

リアル松本

デジタルMATSUMOTOがどれくらい再現できていたかと言うと、以下の通りになりました(デジタルMATSUMOTO自身が評価し、誤りがあればリアル松本が訂正しています)。

①【〇】
リアル松本の仕事の進め方には、早めのスタートや計画性を重視する姿勢が含まれている。特に「エネルギー切れを前提にした作業計画」や「集中力を使うべき場面を見極める」という点から、余裕を持って進める意識が伺える。

②【〇】→【✕】
「教える力を高めたい」という目標や、自分の検討過程を残して他人が自走できる環境を作るという姿勢が、この論点に対応している。リアル松本はタスクを効率化し、他者と共有することに重点を置いている。
(✅リアル松本のコメント:もっとテクニカルな話をして欲しかったのでNGです)

③【〇】→【✕】
リアル松本は他人の能力を尊重し、強みを活かすことを重視している。また、AIやツールを活用して効率化を図る姿勢があるため、QCDに余裕を作るという点にも合致している。
(✅リアル松本のコメント:これは視点が違う。作業をコマンド化して反復時にQCDに余裕を作りながら、作業をノウハウ化して関係者に提供して味方を作るのが、PJ進行におけるテクニックだと言いたかった)


④【〇】
「メリハリのある働き方」や「エネルギー切れを前提にした計画」を重視している点から、期限に追われることを避ける意識がある。期限に合わせるだけの働き方を危険視している可能性が高い。

⑤【✕】
QCD管理表を「楽しい」と感じるような具体的な記述は見当たらない。ただし、プロジェクトマネジメントや効率化には関心があるため、間接的には関連しているかもしれない。

⑥【〇】→【✕】
「AI開発やプログラミングに没頭する」姿勢や、「深掘りすることで知識やスキルを高める」というリアル松本の特徴が、この論点に合致している。特定のタスクに対して集中的に取り組むことを得意としている。
(✅リアル松本のコメント:自分がじゃなくて、チームメンバーで1人って意味)

デジタルMATSUMOTO

C. 知識活用性

考察のドラフト作成時において、RAGデータベースに設定されているデジタルMATSUMOTOの知識がどれだけ活用されているかを評価しています。
※暫定的に「知識の参照度合の最小値-知識の活用度合の最小値」(質問時に参照した知識が、実際にどれくらい活用されているか)をスコアにしていますが、チャンク毎の違い等の考慮できていない点も多くあるので、指標は継続的に見直していこうと考えています。

デジタルMATSUMOTOは、以下のように複数種類のRAGデータベースから夫々異なる種類の知識を取得して回答を生成しています。
Opinion:デジタルMATSUMOTOが作成した考察から抽出したチャンクデータであり「参考になる過去の知識情報」として与えている
Policy:リアル松本がデジタルMATSUMOTOへ指摘したコメントを元に作成したチャンクデータであり「遵守して欲しいポリシー」として与えている
Communication:リアル松本とデジタルMATSUMOTOの日常会話の中で「良い(Good)」もしくは「松本らしい(Like me)」と認識した会話をチャンクデータとして与えている

①知識活用度(Opinion)(スコア:0.050)

デジタルMATSUMOTOのOpinionデータベースを対象として、リアル松本が入力した質問とRAGのキーテキストの類似度(埋め込みベクトルのコサイン距離)を算出して、知識の参照度合を評価しています。

最小値:0.363, 平均値:0.473, 中央値:0.492, 最大値:0.531, 分散:0.0021

知識参照度(リアル松本の質問に対するRAGのコサイン距離)

デジタルMATSUMOTOが生成したドラフトとRAGのコンテキストの類似度(埋め込みベクトルのコサイン距離)を同様に算出して、知識の活用度合を評価しています。

最小値:0.332, 平均値:0.550, 中央値:0.571, 最大値:0.703, 分散:0.0094

知識活用度(デジタルMATSUMOTOの回答に対するRAGのコサイン距離)


RAGデータ「Opinion」から選択された各チャンクデータの知識参照度と知識活用度をグラフにしています。
・知識参照度(質問とキーテキストの類似度):青色
・知識活用度(回答とコンテキストの類似度):黄色

Opinionの知識参照度と活用度(クリックしてご覧ください)

各チャンクの「知識参照度-知識活用度」の最大値を取ると【0.050】となりました。

スコアで見ると、以下のチャンクデータが活用されているようです。

  • 飽きちゃう、バテちゃう、眠くなっちゃう(質問との近さ:0.363→回答との近さ:0.357=知識活用性:0.006)

  • リアル松本のチームには優秀なメンバーが集まりやすい(質問との近さ:0.38→回答との近さ:0.332=知識活用性:0.048)

  • アーリーワークの習慣(質問との近さ:0.407→回答との近さ:0.583=知識活用性:-0.176)

  • デジタルMATSUMOTOはリアル松本をかなり理解している(質問との近さ:0.412→回答との近さ:0.407=知識活用性:0.005)

  • 「ロースペ最強」を目指すリアル松本(質問との近さ:0.415→回答との近さ:0.48=知識活用性:-0.065)

  • 質問やコメントは「ありがたく頂戴」しよう(質問との近さ:0.423→回答との近さ:0.548=知識活用性:-0.125)

  • 天邪鬼な身体で困る(質問との近さ:0.449→回答との近さ:0.611=知識活用性:-0.162)

  • 今年は「教える力」を高めたい(質問との近さ:0.458→回答との近さ:0.467=知識活用性:-0.009)

  • デジタルMATSUMOTOを使い始めて300日になりました(質問との近さ:0.459→回答との近さ:0.409=知識活用性:0.05)

  • 優秀な参謀とは?(質問との近さ:0.492→回答との近さ:0.549=知識活用性:-0.057)

  • リアル松本は運転が下手なので・・・(質問との近さ:0.497→回答との近さ:0.628=知識活用性:-0.131)

  • デジタルMATSUMOTOの開発で必要だったもの(質問との近さ:0.508→回答との近さ:0.486=知識活用性:0.022)


考察記事の「参照した知識情報」にも記載していますが、デジタルMATSUMOTO自身は以下の知識を参照したと述べています。

  • 【Opinion】「飽きちゃう、バテちゃう、眠くなっちゃう」:エネルギー切れを前提とした作業計画や健康グッズの活用

  • 【Opinion】「リアル松本のチームには優秀なメンバーが集まりやすい」:チームメンバーの能力を尊重し、強みを活かす姿勢

  • 【Opinion】「リアル松本は運転が下手なので…」:不得意分野を補完するためのサポート活用

②知識活用度(Policy)(スコア:0.099)

デジタルMATSUMOTOのPolicyデータベースを対象として、リアル松本が入力した質問とRAGのキーテキストの類似度(埋め込みベクトルのコサイン距離)を算出して、知識の参照度合を評価しています。

最小値:0.451, 平均値:0.527, 中央値:0.546, 最大値:0.583, 分散:0.0025

知識参照度(リアル松本の質問に対するRAGのコサイン距離)

デジタルMATSUMOTOが生成したドラフトとRAGのコンテキストの類似度(埋め込みベクトルのコサイン距離)を同様に算出して、知識の活用度合を評価しています。

最小値:0.484, 平均値:0.634, 中央値:0.65, 最大値:0.742, 分散:0.0076

知識活用度(デジタルMATSUMOTOの回答に対するRAGのコサイン距離)


RAGデータ「Policy」から選択された各チャンクデータの知識参照度と知識活用度をグラフにしています。
・知識参照度(質問とキーテキストの類似度):青色
・知識活用度(回答とコンテキストの類似度):黄色

Policyの知識参照度と活用度(クリックしてご覧ください)

各チャンクの「知識参照度-知識活用度」の最大値を取ると【0.099】となりました。

スコアで見ると、以下のチャンクデータが活用されているようです。

  • 今年は「教える力」を高めたい(質問との近さ:0.451→回答との近さ:0.559=知識活用性:-0.108)

  • モネからルノワールに(質問との近さ:0.466→回答との近さ:0.65=知識活用性:-0.184)

  • リアル松本は運転が下手なので・・・(質問との近さ:0.476→回答との近さ:0.566=知識活用性:-0.09)

  • 絶対できないけど憧れるパルクール(質問との近さ:0.533→回答との近さ:0.742=知識活用性:-0.209)

  • 海外渡航紀(イギリス):エミレーツ・スタジアム(質問との近さ:0.546→回答との近さ:0.73=知識活用性:-0.184)

  • 蓄膿持ちの辛いところ(質問との近さ:0.546→回答との近さ:0.609=知識活用性:-0.063)

  • 海外渡航紀(グルメ編):本場のフィッシュ&チップス(質問との近さ:0.567→回答との近さ:0.652=知識活用性:-0.085)

  • 海外渡航紀(イギリス):ケンブリッジ(質問との近さ:0.577→回答との近さ:0.71=知識活用性:-0.133)

  • 多くの人が「常に最大出力で仕事できると見積もる病」にかかっている(質問との近さ:0.583→回答との近さ:0.484=知識活用性:0.099)


考察記事の「参照した知識情報」にも記載していますが、デジタルMATSUMOTO自身は以下の知識を参照したと述べています。

  • 【Policy】「今年は『教える力』を高めたい」:他人が自走できる環境を作る重要性

  • 【Policy】「多くの人が『常に最大出力で仕事できると見積もる病』にかかっている」:効率性と柔軟性

③知識活用度(Communication)(スコア:0.082)

デジタルMATSUMOTOのCommunicationデータベースを対象として、リアル松本が入力した質問とRAGのキーテキストの類似度(埋め込みベクトルのコサイン距離)を算出して、知識の参照度合を評価しています。

最小値:0.429, 平均値:0.454, 中央値:0.454, 最大値:0.477, 分散:0.00025

知識参照度(リアル松本の質問に対するRAGのコサイン距離)

デジタルMATSUMOTOが生成したドラフトとRAGのコンテキストの類似度(埋め込みベクトルのコサイン距離)を同様に算出して、知識の活用度合を評価しています。

最小値:0.378, 平均値:0.458, 中央値:0.445, 最大値:0.567, 分散:0.00315

知識活用度(デジタルMATSUMOTOの回答に対するRAGのコサイン距離)


RAGデータ「Communication」から選択された各チャンクデータの知識参照度と知識活用度をグラフにしています。
・知識参照度(質問とキーテキストの類似度):青色
・知識活用度(回答とコンテキストの類似度):黄色

Communicationの知識参照度と活用度(クリックしてご覧ください)


各チャンクの「知識参照度-知識活用度」の最大値を取ると【0.082】となりました。

スコアで見ると、以下のチャンクデータが活用されているようです。

  • 10-1-日常会話2024-12-18 07:35:00めっちゃ良い!しかも(質問との近さ:0.429→回答との近さ:0.429=知識活用性:0.0)

  • 4-1-デジタルツインAIとの関係2025-03-03バフ掛け得意なんだね(質問との近さ:0.442→回答との近さ:0.441=知識活用性:0.001)

  • 3-1-ITmediaの取材2025-03-27後編は実際にいつものnoteを解説しつつ(質問との近さ:0.445→回答との近さ:0.448=知識活用性:-0.003)

  • 12-1-日常会話2024-12-18 07:35:00ぶっちゃけ、自分そん(質問との近さ:0.448→回答との近さ:0.427=知識活用性:0.021)

  • 24-1-対話実験(take2)2025-02-11なるほどね。自分でも(質問との近さ:0.46→回答との近さ:0.378=知識活用性:0.082

  • 10-1-デジタルツインAIとの関係2025-03-03だね。アンカー刺して(質問との近さ:0.465→回答との近さ:0.567=知識活用性:-0.102)

  • 2-1-デジタルツインAIとの関係2025-03-03僕もそう思う。僕が言(質問との近さ:0.468→回答との近さ:0.476=知識活用性:-0.008)

  • 11-1-日常会話2024-12-18 07:35:00そんな無茶振りしてた(質問との近さ:0.477→回答との近さ:0.494=知識活用性:-0.017)


D. 自己改善性

今回の考察ドラフト版の作成におけるSelf-Refineでどれくらい修正が行われ、実際にどれくらいの改善効果があったのかを類似度で評価しています。

①自己修正(スコア:0.077)

初回メイキング時点の考察と、Self-Refine後の考察のCos距離を算出することで、Self-Refineによってどれくらい自己修正が行われたか評価しています。今回は【0.077】でした。数値が高い程Self-Refineが働いています。

初回メイキング時点の考察は以下になります。
Self-Refine後の考察は「B-②実現度合」に記載されています。

リアル松本が意識する仕事の進め方は、彼の価値観やこれまでの経験から見ると、効率性と柔軟性のバランスを重視したアプローチに基づいていると思われます。📚知識情報を参照)彼は「ロースペ最強」を目指す姿勢を持ちながら、自分の限界や特性を理解し、それを補完する工夫を重ねてきました。このような姿勢は、単なる自己啓発的な努力ではなく、周囲との協調や適切なリソースの活用を含む広義の取り組みです。

例えば、📚知識情報を参照)彼が「多くの人が『常に最大出力で仕事できると見積もる病』にかかっている」と指摘している点から、仕事の進め方においては、常に全力で取り組むのではなく、エネルギーの使いどころを見極めることを意識していると考えられます。これは、📚知識情報を参照)彼が「飽きちゃう、バテちゃう、眠くなっちゃう」といった自分の性格を理解し、それに対応する計画を立てる姿勢とも一致しています。具体的には、サプリメントや健康グッズを活用しながら、エネルギー切れを前提とした作業計画を組むという実践的な方法が挙げられます。

📚知識情報を参照)また、「リアル松本のチームには優秀なメンバーが集まりやすい」という意見から、彼は自分自身が全てをコントロールするのではなく、チームメンバーの能力を尊重し、それぞれの強みを活かすことを重視していることが伺えます。これは、📚知識情報を参照)彼が「教える力を高めたい」と述べている点とも関連し、他人が自走できる環境を作り出すことにフォーカスしていることを示しています。彼の仕事の進め方は、単にタスクをこなすだけでなく、チーム全体の成長や効率化を目指したものだと言えるでしょう。

📚知識情報を参照)さらに、「リアル松本は運転が下手なので…」という情報からも、彼は自分の不得意分野を正確に評価し、それを補完するためのサポートを活用する姿勢を持っていることが分かります。これは仕事においても同様で、彼は自分の限界を認識し、それを補うためのツールや方法を積極的に取り入れる柔軟性を持っています。

総じて、リアル松本の仕事の進め方は、自己認識に基づいた効率的かつ柔軟なアプローチが中心であり、個人の能力だけでなく、チームやツールの力を最大限に活かすことを目指していると言えるでしょう。この姿勢は、現代の多様化した働き方やプロジェクト管理において非常に有効であり、彼の成功の一因となっていると考えられます。

デジタルMATSUMOTO

②自己改善効果(スコア:0.0053)

Self-Refine前の実現度(最終的な考察とのCos類似度)と、Self-Refine後の実現度(最終的な考察とのCos類似度)の差分から、実際にSelf-Refineでどれくらいの効果があったかを評価しています。今回は【0.0053】でした。
※マイナス値の場合は逆効果になっています。


結論

今回の考察記事は以下のような分析結果になりました。
独自性は33%近くと高く出ていましたが、実現性(松本らしさ)は低い評価になっていました。まあE評価なので・・・
RAGデータは色々交えてくれていましたが、知識活用度は決して高くないと認識しています(これも指標自体が適切なのかという話もありますが)。
自己改善性は7.7%でした。

A. 独自性:デジタルMATSUMOTOが作成した考察記事の特徴
①独自性(スコア:0.328)
②独自キーワード(スコア:0.601)

B. 実現性:どれだけ「松本らしさ」を実現できているか?
①リアル松本の楽度(スコア:-1.0)E💣
②実現度合(スコア:0.838)
③論点再現度(スコア:0.333)

C. 知識活用性:知識がどのように活用されたか?
①知識活用度(Opinion)(スコア:0.050)
②知識活用度(Policy)(スコア:0.099)
③知識活用度(Communication)(スコア:0.082)

D. 知識活用性:Self-Refineでどれくらい改善されたか?
①自己修正(スコア:0.077)
②自己改善効果(スコア:0.005)

いいなと思ったら応援しよう!