Räumungsklage wegen vorgetäuschtem Eigenbedarf

Hallo,
wir sind mittlerweile sehr verzweifelt. Wir leben nun seit 6 Jahren in der Wohnung und stehen kurz vor dem Hausbau. 2012 erhielten wir eine gefälschte Nebenkostenabrechnung ( unser Vermieter nahm eine alte Rechnung einer Abrechnungsfirma und "frisierte" die Zahlen, alles sehr unstimmig und falsch, zudem zu seinen Gunsten. Daraufhin einigten wir uns schriftlich auf eine Pauschalmiete und Nebenkosten. 2013 erhöhte er die Miete und senkte die NK, weil wir weniger verbrauchten.
Letztes Jahr Ende April verlangte er eine Mieterhöhung ab Mai, obwohl wir einen schriftlichen Vertrag von 2013 haben, dass wir keine Mieterhöhung mehr bekommen werden (er wusste, dass wir bauen wollen). Wir widersprachen fristgemäß mit dem Hinweis auf unseren Vertrag und baten um Nachweis, warum er die NK neben der Miete erhöhen will. Daraufhin rief er an und beschimpfte und beleidigte uns, drohte sogar, meinem Mann den Hals umzudrehen, wenn wir nicht zahlen oder wahlweise freiwillig ausziehen (er würde sonst auch dafür sorgen, dass wir ausziehen - andere Mieter ekelte er schon mit Methoden wir Heizung und Warmwasser abstellen im Winter, Schlüsselaustausch etc. raus).
Wir waren ziemlich verängstigt (wir haben zudem ein kleines Kind) und riefen die Polizei und baten um Rat. Diese rieten uns, eine Anzeige wegen Bedrohung zu stellen, was wir auch taten. Wir hatten die Hoffnung, dass der Warnschuss ausreichend wäre und verfolgten die Anzeige nicht weiter. Daraufhin kam im Juni die Kündigung wegen Eigenbedarf für seine Töchter. Auch hier widersprachen wir, da wir wussten, dass seine Töchter hier nicht mehr hinziehen wollen, die eine studiert und die andere geht gerne auf Reisen (beide Anfang 20). Unser Vermieter schaltete dann einen Mediator ein, der mit uns verhandeln sollte und zog seine Kündigung zurück. Wir boten an, freiwillig mehr Miete zu zahlen, dafür aber in Ruhe gelassen zu werden bis zu unserem Auszug, vorraussichtlich Ende 2017 / Mitte 2018. Der Mediator unterbeitete ihm unseren Vorschlag, jedoch rastete unser Vermieter dann aus und bedrohte den Mediator und drohte vor ihm auch wieder, meinen Mann um die Ecke bringen zu lassen / kalt zu machen. Zudem verfolgte er meinen Mann nachts um 23.30 Uhr bis nach Hause mit dem Auto ohne Licht und filmte ihm dann, als er sich vor sein Auto stellte, so dass mein Mann nicht aussteigen konnte (im Video gab er zu, ihn zu stalken).
Daraufhin gingen wir erneut zur Polizei und baten um Rat, da wir um die Aggresivität unseres Vermieters wussten (im Übrigen wohnt er nicht mehr mit im Haus und anfänglich war unser Verhältnis auch freundschaftlich).
Die Polizei riet uns zu Gewaltschutzanträgen, was wir auch wahrnahmen und die auch bewilligt wurden am gleichen Tag.
Es kam dann im Januar diesen Jahres zur Anhörung, wo wir einen Vergleich aushandelten, dass wir uns gegenseitig in Ruhe lassen. Die Richterin meinte auch, dass wir uns ja nicht begegnen müssen, da wir nicht in einem Haus wohnen und Korrespondenz läuft über Anwälte (mehr wollten wir ja von Anfang an nicht).
Im November letzten Jahres kündigte er uns erneut mit Hilfe eines Anwalts, wieder auf Eigenbedarf. In der Zwischenzeit erfuhren wir vom Mediator, dass unser Vermieter ihm anfangs vertraulich mitteilte, der Eigenbedarf sei nur vorgetäuscht um uns aus der Wohnung zu bekommen, dies bestätigten auch die Töchter.

Nun haben wir heute die Räumungsklage erhalten, wieder wegen Eigenbedarfs und der von uns gestellten Strafanzeige.
Uns wird nachgesagt, dass wir die Drohungen von ihm nur erfunden hätten (obwohl es auch Zeugen gibt) und ihm das zerrüttete Mietverhältnis nicht zuzumuten sei (wobei er die Zerrütung verursacht hat).

Wir haben immer in den ganzen Jahren versucht diplomatisch mit ihm umzugehen und Lösungen zu finden (meist zu seinen Gunsten), nur sind wir jetzt am Ende.
Ich bin selbständig, habe mein Büro zuhause, zudem bin ich junge Mutter und wir stehen kurz vor dem Hausbau (vorraussichtlich im Herbst diesen Jahres).
Kann uns da wirklich ein Umzug zugemutet werden?? Wir haben immer unsere Miete bezahlt, gehen sehr pfleglich mit der Wohnung um und sind leise. Wir haben uns nie etwas zuschulden kommen lassen.
Unser Vermieter sagt auch ganz klar, dass ihn deutsche Gesetze und deutsches Recht nicht interessieren. Er will uns nur raushaben, weil wir nicht das gemacht haben was er wollte ( Mieterhöhung, trotz vertraglicher Einigung).

Was können wir tun? Haben wir eine Chance bei Gericht?

Für Tips wäre ich sehr dankbar...

LG, Phoenix1004