Handwerker will für mündl Angebot bei nichterteiltem Auftrag Geld

Guten Tag,
vor etwa 4 Wochen anfang Mai hatten wir einen Handwerker vor Ort um ein Angebot für die Sanierung der Terrassenaussenwand und Treppenfundament zu erhalten.
Neben viel Jammern über die körperlich schwere Arbeit und das er das nur zum Festpreis machen würde, bot er erst 1450 Eur,dann 1250 Eur an,billiger würde es nur ohne Rechnung dann 1150Eur.
Er stellte ausserdem fest,das wir ja eine Baywa in er Nähe haben wo er Material besorgen könnte.
Er sagte ausserdem, er könne wenn erst Anfang Juni,da würde er uns dazwischen schieben.
Wir verblieben, das wenn der Auftrag mit Rechnung erfolgt und das wir nochmal per Whatsapp dazu schreiben, " müssen Sie sagen ob ichs machen soll".

Nun haben wir beschlossen,das vorher eine Kellerwandaussensanierung wg Feuchtigkeit besser wäre,da nach Abschluss seiner angebotenen Arbeit da kein Herankommen mehr wäre (Kelleraussensanierung hatten wir erwähnt als er zur Besichtigung da war, sowas macht er aber nicht,er wollte uns eine teure Steinteppichlösung, der sei auch oben dicht,verkaufen), die Beauftragung zu verschieben.
Es erfolgte seit dem Besuchstermin mit mündl Angebot und ohne definitive Zusage dass er das ausführen soll keine weitere Kommunikation mehr.
Noch bevor ich ihn davon informieren konnte, kam von ihm die Nachricht "Guten Morgen ich wollte sie informieren das ich am Dienstag nächste Woche früh zu ihnen komme."
Von mir erfolgte dann die Antwort,"Guten Morgen zurück; wir müssten das (auf erstmal unbestimmte Zeit) verschieben, werden jetzt doch den Keller aussen freilegen wg zu feucht. Viele Grüsse !" daraufhin kam von ihm "Warum haben sie mir das nicht jeher gesagt ich hatte sie eingeplant" ..
von mir "ist noch nicht so alt der Entschluss.. tut mir leid."
Von ihm "Naja das Problem ist ja das ich das Material schon da habe für ihr Projekt. Normal muss ich jetzt Aufwand pauschale verlangen denn das ist auch meine Zeit die ich investiert habe. Wenn sie sich für jemand anderen entschieden haben dann sagen sie das einfach sowas tut man nicht Frau M. denn sie haben gewusst das ich am Monatsende komme."
Von mir "Herr X., wir haben niemand anderes. der Entschluss ist nichtmal ne Woche alt. Ich ging von Anfang Juni aus und hätte Sie dieses We informiert."
Von ihm "Wie kann das sein wenn wir ausgemacht haben das ich Ende Mai komme. Hiermit möchte ich Ihnen mitteilen das ich denn Auftrag nicht mehr will und das nicht machen werde.Ich werde ihnen eine Pauschal Rechnung schicken für denn Aufwand. Denn so wie ich das Material besorgt habe und wieder zurück bringen muss das ist meine Zeit die ich anwenden muss um das zu erledigen".

Die Rechnung erhielt ich heute, 10% des angebotenen Festpreises,genannt "Aufwandspauschale"- und ich finde das für einen Besichtigungstermin durchaus zu hoch, zudem er den Auftrag abgelehnt hat (wir wollten nur verschieben..). Muss ich das zahlen?