Abrikozenboompje verdort

Wij hebben sinds een jaar of twee een abrikozenboompje in een pot. In de zomer staat hij buiten in de zon, in de winter binnen op zolder. Hij heeft het nooit echt goed gedaan, maar de laatste tijd gaat het in rap tempo steeds slechter. Er zitten geen zichtbare beestjes in. Hij maakt wel nieuwe scheuten met blaadjes er aan, maar die verdorren zeer snel en de scheuten zijn ook erg slap (zie foto's).
Heeft iemand een idee of:

- er misschien toch een ziekte in zit?
- of de plant te veel of te weinig water krijgt?
- of (en zo ja hoe) ik 'm misschien fors terug moet snoeien om hem een nieuwe kans te geven?

Ik ben benieuwd naar suggesties!
Alvast bedankt!