Finanzielle Unterstützung vom Schwiegervater - kann er die Schenkung bei einer Scheidung zurückforde

Hallo,
meine Frage:Kann mein Schwiegervater das Geld von mir zurückverlangen?

Ich habe zusammen mit meiner Frau vor 10 Jahren ein Haus gebaut, dazu haben wir gemeinsam verschiedene Kredite aufgenommen. Wir sind auch beide als Grundstückseigentümer und Hauseigentümer zu gleichen Hälften eingetragen. Auch bei den Krediten sind wir beide als Schuldner eingetragen. Gezahlt habe aber ich alleine, da meine Frau überwiegend für die Kindeserziehung zu Hause war.
Als Bürgen für den Betrag beim Grundstückskauf hatten wir den Vater meiner Frau eingesetzt. Er hat uns dann auch finanziell unterstützt, indem er mir jährlich einen Betrag gab, der für die Zurückzahlung des Kredits für das Grundstück verwendet wurde(bar von mir entgegengenommen und eingezahlt). Der Kredit wurde heuer im Frühjahr getilgt, so dass nur noch ein Kredit für das Haus zu zahlen ist.
Jetzt möchte sich meine Frau scheiden lassen, wir haben 4 Kinder, so dass meine Frau das Haus haben möchte. Wir hatten auch schon einige Anhörungen vor dem Familiengericht, wobei das Sorgerecht und das Aufenthaltsbestimmungsrecht besprochen wurde. (Sorgerecht haben wir beide, das Aufenthaltsbe-stimmungsrecht meine Frau alleine). Jetzt möchte meine Frau das Haus für sich und die Kinder haben, dagegen hätte ich unter gewissen Umständen, (z. B. höhere Summe als Abfindung)nichts einzuwenden, sie möchte mir aber einen geringeren Betrag zahlen, weil ihr Vater den Kredit für das Grundstück bezahlt hat und er sagt das sei eine Schenkung an seine Tochter gewesen.

Kann mein Schwiedervater das Geld nun zur Hälfte von mir zurückverlangen, wie er behauptet?

Es wurde nie von einer Schenkung an meine Frau alleine gesprochen, sondern immer von einer Schenkung an uns, und eine Schriftsache ist niemals niedergeschrieben worden.

Besten Dank