Und vollkommen zurecht. 
Ich hatte ähnliche Probleme mit der Wallbox in meiner gemieteten Tiefgarage, und habe ca. 18 Monate lang ausschließlich an öffentlichen Ladesäulen geladen:
Die Sorgen meiner Nachbarn...
Solange man kein E-Auto hat, ist diese Vorstellung etwas unheimlich, aber de facto war es letztlich überhaupt kein Problem! Hätte ich nicht prinzipielle Gründe gehabt, den Wallbox-Kampf bis zu Ende auszufechten, hätte ich es auch lassen können. Rein praktisch bringt mir die eigene Wallbox kaum einen zusätzlichen Nutzen.
Das gilt natürlich nur deshalb, weil ich zufällig an einer Ecke wohne, wo es mehrere Ladesäulen von verschiedenen Betreibern in Laufweite von der Wohnung gibt. Das war schon ein besonderer Glücksfall, aber vielleicht lohnt es sich, mal zu gucken, was Du so für Ladesäulen in der Nähe hast? GoingElectric ist dafür eine brauchbare Anlaufstelle:
goingelectric.de/stromtankstellen/