MENU/ ボスの展望台/ボスのTwitter/物理学/人工知能/生成AIの思考力 |
![]() ![]() 生成AIの思考力 オウム以上 → フクロウ以下 ![]() ![]() ![]() ![]() ![]() ![]() ![]() |
トップページ/New Page Wave/Hot Spot/Menu/最新のアップロード/ 担当: ボス= 岡田 健吉 |
2025年10月 |
|
10月 2日 |
《生成AI の・・・思考力》 (1) 【プロローグ】 (1)
『日経サイエンス…2023・10』 ■ 特集/大規模言語モデル・・・科学を変えるAI (人工知能 “An AI Mystery”) ● オウム以上フクロウ未満? 生成AI の “思考力” <★ ★ 生成AI は、事前に教えていない事を・・・
どういうわか、理解している様だ。いったい、何故なのか?>
【プロローグ】 (2) “参考文献”/『日経サイエンス・・・2023・10』 ■ 特集/大規模言語モデル・・・科学を変えるAI (人工知能 “An AI Mystery”) の、 最初に、掲載されていましたが… ここでは… 1番最後に持ってきました。理由は、単純で、この論文記事を読むには、多少の予備知識 が必要と思ったからです。 さあ… そう言うわけで、予備知識も蓄えた所で、また同じメンバーで、最後まで考察したいと思い ます。 ええ、今回は… <AI 開発の・・・現場> と言うより、その背後の <学術的な・・・考察> になります。 従って、ここでは厨川アンさんに、伺(うかが)うことが多くなるかと思います。アン、よろしくお 願いします…」 「はい…」アンが、眼鏡の隅を、そっと指で押した。「私の… 専門分野ではありませんが、科学者としての立場から、答える事が出来るかと思います」 「はい…」茜が、うなづいた。「よろしくお願いします…」
【オウム以上 → フクロウ以下?】 (1) <オープンAI(社)> の <ChatGPT> や、同種の <生成AI/人工知能> が… 今後世界を、どの様に変えることになるのか、まだ、誰にも分からない状況の様です。これ は…
何が起こっているのかを・・・誰も理解していない事が・・・ 一因! ”
これらの、システムの中には…
何故… そんな事になるのかについては、当の、<AIを・・・発明 ・ 開発している人達 > も、困 惑している様子です」 「はい…」アンが、アゴに手を当てた。「これらの <AI システム> が… 人間の脳と同様に… <実世界のモデル を・・・内部に作り出している・・・> ことを示す、“試験結果” が、増 えている、様ですね。モデル構築の仕方は異なるものの、私達の脳に、通じる所がある様 です。
(/ネットより画像借用)
|
10月 3日 |
《生成AI の・・・思考力》 (4) ![]() ![]() 米/ブラウン大学 (/ネットより画像借用) 【オウム以上 → フクロウ以下?】 (2)
米/ブラウン大学(Brown University/・・・アメリカ/ロードアイランド州/プロビデンスに本部を置く私立大学。アイビ ー・リーグを構成する、伝統的な名門校の1つ。)のパヴリツク(Ellie Pavlick)は、この様に言っていますわ。
「これらの <AI> が・・・ どう機能しているかを知らずに、<AI> をより良く、より安全なものにするために、
何かの工夫をしようと言うのは、バカげていると思う。」
彼は、<AI> が示す、説明のつかない能力に、説明をつけようと取り組んでいる、研究者 の1人ですね」 「うーむ…」高杉が、腕組みをした。「バカげていると、その研究者は言いますが… “より良く・・・より安全にするために・・・” ではなく… <致死兵器システム・・・戦争玩具!> への、組込みは、すでに始まっているわけです ねえ。それを、戦場に実戦投入しているウクライナが、最先端にあるとも聞きます。西側の 、軍需産業が入っているのでしょう」 「そうですね…」北原が、うなづいた。 <致死兵器システム・・・戦争玩具!> (/ネットより画像借用)
《生成AI の・・・思考力》 (5) ![]() ![]() ![]() 【オウム以上 → フクロウ以下?】 (3)
パヴリックら、研究者たちは… あるレベルでは、<GPT/= 事前訓練済み ・ 生成的トランスフォーマー> や、他の、 <LLM/・・・大規模言語モデル> を、完全に理解している、と言います。 <LLM> は、<ニューラルネットワーク> いう、<機械学習システム> に、基づいて るわけですね。 そして… その <ニューラルネット> は… <人間の脳の・・・神経細胞の接続を・・・大雑把にモデル化した構造> の様ですね。 この <ニューラルネット> のプログラムは、比較的簡単な様子です。コンピューター画 面表示にして、数画面程度の様です。 これが… <★ 一種の・・・自己修正アルゴリズムを・・・構成!> して…
次に出現する、確率が最も大きそうな単語を・・・ インターネット上にある・・・ 数百ギガバイトのテキストの海から・・・ 膨大な統計解析に基づいて・・・選び出す! >
そして… さらに訓練を加えることで、システムはこの選択結果を、<ユーザーとの対話形式> で、 提示できる様になる、というわけです」
《生成AI の・・・思考力》 (6) ![]() ![]() 【オウム以上 → フクロウ以下?】 (4)
「でも…」アンが、赤毛を指で梳(す)き上げた。「この意味では… <AI> は、学習したコトを、”単に・・・吐き戻している” だけですわ。“思考” は、していま せん」 「そうですね…」支折が言った。 「この意味では…」アンが、重ねて言った。「ワシントン大学/シアトル校の… 言語学者/ベンダー(Emily Bender)の言葉を借りれば、<AI は・・・確率論的なオウム> と、いうコトになります」 「あ…」支折が、顔を和ませた。「挿絵(さしえ)にある、オウムですね?」 「そうです…」アンも、口元をゆるめた。「でも、<LLM/・・・大規模言語モデル> は… 何故か… “司法試験でも・・・優秀な成績を取り” 、“ユーザーの婚姻関係を・・・ブチ壊すたくらみ” ま で、考案する様ですね。 <単純な・・・自己修正アルゴリズム!> が、こんな広範な能力を獲得するとは、ほとん どの人は、予想していなかった、と言います。 「うーん…」支折が、大きく、上体を揺らした。「ここが、まさに、大問題なわけですね!
」
<AI/人工知能> (/ネットより画像借用)
|
10月 6日 |
【オウム以上 → フクロウ以下?】 (8)
ないのも、そういうコトかしら?」 「まあ…」高杉が、頭に手を置いた。「軽々なコトは、言えませんが… 物理学/【量子力学】 が… <コペンハーゲン解釈の・・・波束の収束> 以来、<観測者/主体・・・の大問題!> を、放置して来たのも、事実です。それを放置し、ひたすら波動関数を計算し、科学技術文 明を、推進してたわけですねえ。 <エンタングルメント・エントロピー/EE (エンタングルメント/=量子もつれの、度合い/強度を表す指 標。物理量)> などの、指標を使っても、<非局所性(/物理学、特に量子力学において、物体の性質や状 態が、直接的な物理的接触や局所的な相互作用を介さずに、遠隔地の物体に影響を及ぼす現象。/= 量子もつれ)> が、 回避されるわけでは、ありません」 「<AI> は…」アンが言った。「つまり… <LLM/大規模言語モデル> による、<生成AI> は… 発明・開発した人達も当惑し、理解できない領域がある、と言いますね。でも、実は、電子 工学機器の方も、【量子力学】 の、<重ね合せ状態 → 観測 → 波束の収束> を、理 解できないままに、棚上げし、ここまで、学技術文明が進展して来たわけです。
(/ネットより画像借用)
【オウム以上 → フクロウ以下?】 (9)
暗黒物質・候補/<アクシオン(/強い相互作用における、CP対称性の破れの問題を解決するために1977年 に提案されました。)> や、<WIMP(ウインプ/・・・重力や弱い核力のみを通じて、通常の物質と相互作用する重い 粒子)> が見つからないのも、【量子力学】 の、この ”未解決問題” が、いよいよ、結晶化 /析出して来たと、推測しているわけですね?」 「そうです…」高杉が、小さく、強く、うなづいた。「【量子力学】 の… ”観測者問題” は… デカルトが、<この世を・・・物の領域と、心の領域に・・・分割> し、科学技術文明で放 置されて来た、<心の領域> に、属するものです。 デカルトの場合は… この世を、2つに分割しても、<神> がそれを、問題なく統合しました。しかし、物理学の 場合は、そうはいきません。ハハ、それでは、<神という・・・物理数/物理量?> でも、 導入するのでしょうか?」 「ホホ…」アンが、口に手をやった。「<神という・・・物理数??> ですか。電荷やスピン と、同じように?」 「まあ…」高杉が、口を押さえた。「<西欧の神/アブラハム系の神> は…
アブラハムの神 (アブラハムは・・・ 旧約聖書に登場するイスラエルの民の祖。イスラムでは、アラブ族の祖。テラの子。イサクの父。 神に対する絶対的信頼と服従により、「信仰の父」 と呼ばれる。ユダヤ教 ・キリスト教 ・イスラム教でも、模範的な篤信者とし て尊崇される。 ちなみに・・・ 第1次米トランプ政権の ”アブラハム合意(/アラブ首長国連邦とイスラエル国間における平和条約及び国交正常化。これを 皮切りに、多くの国が、イスラエルとの国交正常化に動き出した。)” は、彼の名に、ちなむものです。)、
アブラハムの神は… ユダヤ教 、キリスト教 、イスラム教において、共通する神であり、全知 ・ 全能 ・ 全善と いう、3つの絶対的な属性を持つとされ 、唯一無二の、完全な存在として、信じられてきた。 ユダヤ教では… この神を 「ヤハウェ」 と呼び、天地創造から、イスラエル民族の選別に至るまで、歴史の 中で選民を導く存在として描く。 キリスト教では… その神の愛を、体現する者として、「神の子・・・イエス・キリスト」 が登場し、神は “父” と して、より人格的に、捉えられるようになる。 イスラム教においては… 「アッラー」 と呼ばれ、すべてを支配する唯一の存在として、厳格かつ慈悲深い姿で語られ る。しかし、聖典の記述を追っていくと、この神は単なる “完全な機械的存在” というよりも、 むしろ、深く人格的で、感情を持った存在、として描かれている。
… 一神教で、一面、怖い存在ですが、<日本の・・・八百万の神々(やおよろずの・)かみがみ/・・・ 『古事記/上巻・・・天あまの岩戸 の段』 で、八百万の神が集まったとされます。「八百万」 は、極端に数が多いという意味。 森羅万象の、あらゆる所に神々を感じるのは、日本人の自然崇拝のDNAかも知れません。> は、そんなに、怖くは ありませんから、」 「だから…」アンが、笑いながら、言った。「物理数に使うと…」 「ともかく…」高杉が、言った。「私は… <物の領域と、心の領域の・・・再統合!! >
予想を立てています。これは、コペルニクスの <地動説> から、再び、<天動説> に 、 回帰する様なコトかも知れません」 「ふーん…」アンが、口に指を当てた。 (/ネットより画像借用) <神という・・・物理数??>
《生成AIの・・・思考力》 (12) 【自分で計算・・・ルールを理解!】 (1)
2023年3月に… ニューヨーク大学で開かれた学会で、コロンビア大学の哲学者/ミリエール(Raphael Milliele) は、<大規模言語モデル> が、成しうる事について、“仰天物の・・・実例” を、もう1つ、 報告した、と言います。 <大規模言語モデル> が… コンピューター ・ プログラムを、書けることは… すでに、示されていましたが、これはそれほど、驚くには、当たらない様ですね。インターネ ット上には、多くのプログラムが公開されていて、それを真似ることができるからです。 ミリエールらは… ここから、さらに1歩、踏み込んで、<GPT> が、プログラムの実行も、できるコトを、示し ました」 「ふーん…」支折が、腕組みをした。「それが、そんなに、驚くコト、なのかしら?」 「ともかく…」茜が言った。「説明しますわ…」 「はい…」支折が、うなづいた。
コロンビア大学/ニューヨーク州ニューヨーク市に本部を置く・・・アメリカの私立大学。 各種大学ランキングで、上位に位置する、全米有数の名門校。 アイビーリーグの1校。 (/ネットより画像借用) |
10月 8日 |
《生成 AI の・・・思考力》 (13) 【自分で計算・・・ルールを理解!】 (2)
フィボナッチ数列(/フィボナッチ数列は、前の2つの数を足して、次の数を生成する数列。1, 1, 2, 3, 5, 8, 13, 21, 34, .. という形で続く。最初の2つの項は1であり、それ以降の項は、前の2つの項の和として計算されます。自然界の 様々な所に、この数列を見出すことができます。)の、83番目の項を、計算する様に、書き込んだ、と言い ます。 彼は…
そして、このボット(bot/robot (ロボット) から派生した言葉。指定された、作業処理を自動化するプログラムや、ア プリケーションを総称して、ボットと呼びます。)は、見事に、それをやってのけたそうです。 しかし…
「はい…」支折が、うなづいた。 「これは…」茜が言った。「このシステムが… 単に、インターネットの内容を、“ かがわせる、と言います。 むしろ… “ ます」 「うーん…」支折が、神妙に、うなづいた。「間違ったコトが… かえって、コピペ(/コピー&ペースト) したのではない、と、分かったわけかしら?」
<フィボナッチ数列> (/ネットより画像借用)
【自分で計算・・・ルールを理解!】 (3)
コンピューター上で走っていますが、それ自体は、コンピューターではありません。作業記 憶などの、計算に必要な要素を、欠いているからです。 従って…
それで… <GPT> を開発した、<オープンAI(社)> では、プログラムを実行できるようにするた めに、<特別な・・・プラグイン(/アプリケーション ・ソフトウェアの、機能を拡張するために、追加することのでき る、プログラム ・モジュールの1種。)> を、導入したという事です。 <ChatGPT> は、質問に答える時に、このツールを使っている、という事ですわ」 「うーん…」支折が、神妙に、ユックリと、うなづいた。「はい…」 「でも…」茜が言った。「ミリエールの、実験では… こうしたプラグインは、使っていない、と言います。つまり、コレが、言いたかった、わけです。
プラグインに頼るのではなく・・・ 文脈にしたがって単語を解釈する・・・自身の仕組みを利用することによって・・・ 1種の記憶を、その場で、作り上げたのだろう・・・>
「はい…」支折が、今度は、シッカリと、うなづいた。
《生成 AI の・・・思考力》 (15)
【自分で計算・・・ルールを理解!】 (4)
別の目的のために、流用することがあります。それと、似ている、と言っていますわ。 この… 即興的・能力は… <大規模言語モデル> が、表面的な統計解析をはるかに超えた、内的複雑さを、発達さ せている証拠、と、言えるのだ、そうです。 これらのシステムは… 学習内容に関する、本当の理解を獲得している様子で、その例が、研究で、見つかってい る、そうですね、」 「はい…」支折が、用意されていた、スクリーン・ボードの方を眺めた。 茜が、ボードのコントローラーを取り上げた。 「ええ…」茜が、画像の1つを、拡大した。「2023年5月に… 表現学習・国際学会(ICLR)で…発表された、ある研究では… ええと… 米/ハーバード大学/博士課程の大学院生/リー(Kenneth Li)と、その共同研究者達… あ… ここに、共同研究者が、記載されていますね…
(David Bau)…それから、ハーバード大学の、ビエガス(Fernanda Viegas)と、フィスター (Hanspecter Pfister)と、ヴァッテンベルク(Martin Wattenberg)…
独自に…
< られるようにした” と、いう事ですわ」
ハーバード大学 (/ネットより画像借用)
|