Нужно ли оформлять реконструкцию без изменения назначения строения?

Добрый вечер, проконсультируйте, пожалуйста, купили дом, где пристройка прям впритык к соседскому забору, у старых хозяев там была баня, мы разобрали деревянную пристройку и прям на фундамент старый поставили ванну и туалет, по документам так и стоит все то же самое, сосед же пугает, что если мы будем препятствовать его заезду через наш проезд к дому, он подаст в суд за постройку, но она же у нас по плану, не мы же так строили.