A/Bテストは、Aとビの2つのバージョンを用意して、どちらが効果的かを統計的に比較する手法です。Webサイトのボタン色、メールの件名、広告文など、単一の要素を変更して検証します。科学的で厳密な比較が特徴です。
スプリットテストは、ユーザーを複数のグループに分割して異なるバージョンを提供し、結果を比較する手法です。A/Bテストを含む、より広い概念を指すことが多く、複数パターン(A/B/C/D)の同時検証も可能です。柔軟性が高い手法です。
A/Bテストは2つのバージョン比較に特化し、統計学的に厳密な検証に向いています。スプリットテストはより柔軟で、複数パターンの同時実験や段階的な検証に適しています。業界や文脈によって定義が異なり、日本ではA/Bテストとスプリットテストをほぼ同義で使う場合も多いです。米国ではスプリットテストの方が一般的な用語です。
シンプルな2択比較ならA/Bテスト、複数パターン同時検証なら明確にスプリットテストと言うのが推奨です。ただし日本ではほぼ同じ意味で使われるため、文脈と相手に合わせた表現が重要。統計的厳密性を強調したい場合はA/Bテストが適切です。