Der einzige Weg, hier Klarheit zu erlangen führt über das Bauamt. Die drei weiteren Häuser können schon Außenbereich sein, und sind da z.B. aufgrund Landwirtschaft privilegiert (gewesen). Der dörfliche Bebauungszusammenhang wird üblicherweise recht streng dahingehend ausgelegt, dass man ein Band um die Rückseiten der Häuser der letzten noch im unmittelbaren Zusammenhang gebauten Häuser legt. Wobei dieses Band dann aber an den beiden äußeren Ecken festgemacht wird. D.h. es gibt da durchaus die Möglichkeit von Einschnürungen und Rücksprüngen.
Habe hier selbst ein hässliches Beispiel für eine solche Situation. Es gibt die Einfallstraße ins Dorf, entlang der bebaut ist. Hinter den Häusern liegen die Gärten und zwei Pferdewiesen, dahinter dann die Gärten meiner Straße. Die Bebauung beider Straßen reicht ungefähr gleich weit Richtung Ortsgrenze. D.h. man würde erwarten, dass das erste Haus der einen und das erste Haus der anderen Straße den Bebauungszusammenhang ergeben würden. Pustekuchen! Als wir nach hinten anbauen wollten, mussten wir uns anhören, dass die Bebauungsgrenze hinter den Hinterseiten der Häusern der Einfallstraße bis zu der Stelle zurückspringt, wo diese im Ortskern mündet, und dann entlang der weiteren Bebauung dann wieder entlang der Rückseiten der Häuser in unserer Straße zur Ortsgrenze führt. D.h. man hat da ein an sich ins Dorfbild gehörende Dreieck zwischen den beiden Straßen raus geschnitten.
Und ansonsten gilt: Gibt es einen qualifizierten Bebauungsplan darfst Du genau das bauen, was da drin steht, und Ferienimmobilien sind in reinen Wohngebieten schon mal Essig. Fehlt ein B-Plan muss sich die Nutzung in Art und Umfang in die Umgebung einfügen. D.h. wenn da nicht schon Ferienimmobilien stehen, ist es wieder Essig. Auch dazu habe ich gerade neulich negative Erfahrungen gemacht, als ich angesichts diverser Ferienimmobilien rund um ein interessantes Haus dann beim Bauamt erfuhr, dass die mit der Nutzung allesamt nicht genehmigt seien, und ich mir einen entsprechenden Bauantrag sparen könne. Klar, hätte man jetzt trotzdem kaufen und wie die Nachbarn unter der Hand vermieten können, aber ich schlafe gerne gut, und habe keinen Bock darauf, dass dann doch irgendwann mal jemand hellhörig wird, und es dann in einer Katastrophe endet.