A、当重力对物体做正功时,说明物体下降,故重力势能减小,重力对物体做功越多,物体的重力势能减小的越大,不是重力势能越小,故A错误;B、物体克服重力做功,说明重力做负功,物体上升,故重力势能增大,B错误;C、重力对物体不做功,物体的重力势能不变,故C错误;C、重力势能与重力是否做功无关,故D正确;故选:D.