1週間で仕事辞めちゃう

私の部署は8人いて1人補充してるのですが、今まで続けて3人、入って1週間程度で辞めてしまいました。
辞める理由は共通して、仕事が難しい覚えられない、社員多くて覚えられない、社風が苦手、などです。
面接の時に、ちょっとした事務作業とは違って、処理も煩雑で頭使うし得意先も仕入先も多い、社員は70人だと伝えてます。他社より待遇良いから、お気楽な事務だと思わないでほしいとか、すぐ辞めるなら最初から入らないでほしいなど、むかつくこともあえて言います。
3人とも、大丈夫ですって言います。
私や会社が悪いのはわかっていますが、もうどうして良いかわからずお手上げ状態です。
私が採用の面接していて、何人か絞ってから専務が最終判断します。
些細なことでも良いのでアドバイスください！