czy ktoś wie jak przeprowadzić budynek gospodarczy na mieszkalny

witam, mam pytanie odnośnie prawa budowlanego. Mamy przepisany budynek gospodarczy na działce. Zrobiliśmy sobie z tego normalny dom, tylko wiadomo, bez papierów. Teraz chcemy to jakoś odkręcić ale się chyba nie da... Notariusz mówił ze jak jesr już tak przepisany to nic nie można zrobić. Moze ktoś z Was się zna????