Ha kaptam előleget, elkezdtem a munkát, de visszamondják, visszatarthatom a részem?

Akadt egy borzalmas ügyfelem, megbeszéltünk mindent, erre 1 héttel az elkészülés előtt elkezd módosítgatni, és háborogni, hogy hát ő mindenből a drágát rendelte, és hát ugye minden benne van az olcsó árában. Konkrétan, mintha rezet fizetett volna, és utána felhívna, hogy hogy áll az arany szobra. (Ráadásul a kedvencem: 1 nap alatt elkészült-e már...) Úgy vagyok vele, hogy eddig is csak a gond volt vele, hagyjuk egymást békén, visszaadom az előlegét. Viszont fektettem már a munkába, vettem meg hozzávalókat, illetve időm és energiám ment el rá.

Szerződésünk van, de abban csak a körvonalak vannak, anyagra nem tértünk ki, előlegszámla készült.

A kérdés: ha megállapodunk, hogy nem készítem el a munkát, megkapja az eddig beszerzett anyagokat, és levonom a munkadíjamat, a többit visszaadom, ez így reális? Van valami törvény erre? Soha nem fordult még elő ilyen, nem vagyok jártas a témában.