選択する埋め込みモデルは、LLMよりも重要です ノート

選択する埋め込みモデルは、LLMよりも重要です

不快な真実あなたはLLMのプロンプトエンジニアリングに何日も費やした。ClaudeとGPTをベンチマークした。Mixtralを使うべきかどうか議論した。しかし、あなたのRAGパイプラインは依然としてゴミのような回答を返し、あなたは間違ったコンポーネントを責めている。LLMは、受け取るコンテキストと同じくらいしか良くならない。コンテキストの質は、リトリーバルによって完全に決定される。リトリーバルの質は、あなたの埋め込みモデルによって完全に決定される。一番下を修正すれば、一番上は自然に修正される。