『米OpenAIは、Webサイト管理者が同社のWebクローラー「GPTBot」によるサイトのデータ収集を回避する方法を紹介した。』
いやいやいや、やっぱWebのデータを学習に使ってる！
AIが作成したかもしれないWebのデータをAIが学習するとどうなっていくのか……GPT-4を見て推して知るべし。
--------
tsutaya0225あっとgmail.com
嘘を嘘と見抜けない人は（AIを使うのは）難しい。
その分野に詳しくなければ嘘だと分からないような尤もらしい文章を生成するからね。あと、従来のフェイクデータに加えてAIが作成したフェイクデータもWebに溢れてるし。
これからの時代、Webのデータをそのまま機械学習に利用するのは非常に危険、GPT-4がどんどんアホになっている（意訳）という話が真しやかに囁かれてるくらいだし。
ChatGTPが登場したのが2022年11月30日。これ以降の学習モデルには、文章なら「間違いがある／ない」「フェイクである／ない」「人間が書いた／AIが作成した」、論文なら「査読済みである／ない」「実証済みである／ない」「フェイクである／ない」、画像なら「オリジナルである／2次創作である／フェイクである」「人間が描いた／AIが作成した」を示すパラメータまで含めたデータを学習させなきゃ、とんでもない能力低下を招く。
てかもう低下してる。たまにBingと押し問答してる笑
でもそれを確認するのは人間でも難しい訳で、簡単な話ではない。AIで判別しつつ学習できるようになればいいんだけど、現状では鶏が先か卵が状態に陥っている。
まぁBingはネットの検索結果をそのまま使っているからそういう問題が起こっているだけで、元となっている言語モデル（GTP-3.5）自体は汚染されてないけど、ChatGTP以降の言語モデルはどうやってデータが学習に適しているかどうかを判別しているのか気になる。
その結果はどの言語モデルが優秀かで分かる訳だけど、可能であればそのプロセスこそが知りたい。企業秘密だから100％無理なんだろうけど。
--------
tsutaya0225あっとgmail.com
2023年7月19日
マイクロソフトは日本時間7月19日未明から開催中のパートナー向け年次イベント「Microsoft Inspire 2023」において、AI分野におけるMetaとの協業を拡大し、Metaがリリースした最新の大規模言語モデル「Llama 2」を、Microsoft AzureとWindowsでサポートすると発表しました。
MetaのAIを使うとMicrosoftにお布施←new！
--------
tsutaya0225あっとgmail.com
OpenAI ChatGPTに課金→Microsoftへお布施
ChatGTP APIに課金→Microsoftへお布施
GitHub Copilotに課金→Microsoftへお布施
Microsoft 365 Copilotを使わせる←いまここ
大元は同じじゃね？何重に支払えばええねん！
そもそもMicrosoft 365を使う→お布施
気にしている人少ないけどWindowsもお布施
Call of Duty……
--------
tsutaya0225あっとgmail.com