Человек из-за недопонимания испортил мне репутацию. Как исправить дело?

Правильно говорит, Татьяна Борисовна, это не друг и не враг, а так.

И мать Вашего знакомого, человек по идее взрослый, бросающийся такими словами в домофон - похоже сама с собой не в ладах.

И соседи какие-то примитивные, выслушавшие одну сторону и все для себя решившие.

Стоит ли дорожить мнением и своей репутацией, сложившейся в головах таких людей?

Вы, я так понимаю, тоже не ребенок, уже женаты. Имеется сложившаяся ячейка общества. Этим и дорожите. Чтобы мнение Вашей жены о Вас всегда было в Вашу пользу. Мама и сестра на Вашей стороне - это дорогого стоит. С таким багажом можно обойтись и без признания соседей. Хотя на самом деле, через некоторое время они подзабудут что их так возмущало в Вас и их отношение постепенно станет ровным, как и к остальным людям.