おそらく「違法」という文言のとらえ方と思いますが、民法の定めですから、一応ルールは決めるね、喧嘩になったら、それを参考に双方話し合い(訴訟や調停という法的な手続きも含めて)してね。という事であり、そのルール(今回は外壁後退５０ｃｍルール)を逸脱したから、自動的に誰かが誰かを罰するとかの意味ではなかろうと思います。ですから、実際に５０?以下でも、双方許容できているなら、それで構わない事で、実際に、そのような建物は数限りなくあります。

本件、例えば確認申請上も、お話をお聞きする限り、グレーゾーンですが、とはいえ、それで行政が積極的に動いてくれるような事案でもなさそうですね。

あなた様が許容できないというなら、その通りであり、直接、お話し合いになるか、それが不調であれば、弁護士を通じて申し入れするなり、法的な手続きをお取りになるなりするしか、解決できないのかな？と感じます。

法律の専門家ではありませんが、今までの経験上、そのように思いました。