ruto on Nostr: ...
仮に今後また何かあってOpenAIのメンバーが全員Microsoftに移籍した場合、GPT-4相当のLLMを作るのにどのくらい時間がかかるんだろうか。RLHFの手続きはやり直しだろうから結構時間かかりそう。
事前学習用のデータもオープンなデータが多いとはいえ、そうでないデータもそれなりにあるだろうからその代わりの確保も必要そう。
Published at
2023-11-22 11:12:02Event JSON
{
"id": "2f1fe2095a8790488540abecb0fac8632c68179f79837b06e326ef9179c501db",
"pubkey": "2888961a564e080dfe35ad8fc6517b920d2fcd2b7830c73f7c3f9f2abae90ea9",
"created_at": 1700651522,
"kind": 1,
"tags": [],
"content": "仮に今後また何かあってOpenAIのメンバーが全員Microsoftに移籍した場合、GPT-4相当のLLMを作るのにどのくらい時間がかかるんだろうか。RLHFの手続きはやり直しだろうから結構時間かかりそう。\n事前学習用のデータもオープンなデータが多いとはいえ、そうでないデータもそれなりにあるだろうからその代わりの確保も必要そう。",
"sig": "41f4a44a17cbc675d045a5f592d19555c05a7421547215eff0b6c548f9bcbd281a7e8113142af3cf8928db4293a995a1ad020c75974d34759419b2c7c83dd061"
}