Családi pótlék igénylés ezen formájában lehet utólagosan büntetésre számítani?

4-5 éven keresztül egyedülállóként vettem igénybe a családi pótlékot két gyermekemre. A két gyerekkel és a mamával külön lakcímen voltunk a férjemtől. El nem váltunk, de az ő beleegyezésével történt a dolog. Eközben se veled se nélküled kapcsolatot éltünk. Legtöbbet nála éltünk életvitel szerűen. Ha valaki bejelentette, hogy egyedülállóként több családi pótlékot kaptam, akkor számíthatok büntetésre?