自動車保険の夫婦限定について教えてください

保険の見直しを検討していて、夫婦限定にしようと思ってます。
夫婦限定にすると、夫婦のみしか運転してはいけないという認識ですが…
旦那は、他人でもその人が自分で自動車保険に加入していれば、うちの車を運転しても、もし事故を起こしてもその人の保険があるから大丈夫だといいます。

そういう事なんですか？