Dieses "Sonntagnachmittags-Gefühl" hatte ich selbst bei Berufen manchmal, die mir richtig viel Spaß gemacht haben. Es war dieses "Oh Gott, es ist schon 5 und morgen muss wieder dorthin".
An deiner Stelle würde ich über kurz oder lang über eine andere Arbeitsstelle nachdenken, denn es klingt sehr belastend, wie du dich fühlst. Es gibt auch Stellen im Einzelhandel, zum Beispiel Fachgeschäfte, wo die Arbeitszeiten angenehmer sind.
Ich verstehe auch dein Problem mit der Arbeitszeit: Viele Menschen, auch ich, können nicht so gut damit umgehen, wenn der Vormittag "umsonst" ist, weil man die ganze Zeit schon wieder an die Arbeit am Nachmittag denkt. Ich glaube, das wirst du über kurz oder lang ändern müssen, um im Job wieder ganz glücklich zu sein.