自衛官の奥様方、103万と130万の壁

先日、パートを始めました。
扶養内で働くことは前提なのですが、103万と130万について旦那に会計係の人に聞いてもらった所、「130万を越えたらアウトだけど、103万を越えてもなんの問題もない」と言われたそうです。
103万を越えたら所得税？住民税？を払わなければならないんですよね？けれど、それほど問題がないのであれば、私のパートの方も少し頑張って年間110～120万くらいで働ければな～と思っています。
実際はどうなのでしょうか？扶養内で働いている自衛官の奥様方に聞いてみようかと思ってトピ立てました。よろしくお願いします。