ここでいくら主さんは悪くない。自分家の庭で縄跳びぐらい。怒鳴り込んでくる方がおかしい。と擁護されても、お向かいさんの考え方が変わるわけじゃないから。
世間一般では許される範囲のことが許されない残念な人に当たってしまった。不運と思ってトラブルや嫌がらせに発展しないように気をつけて行くしかないよ。