Eliminar archivo urgente.

Hola grupo, tengo un lio en este momento porque tengo un archivo, una
imagen PNG que cree para colocarla en un documento, es asi que lo inserte
en un documento de word pero resulta que me equivoque del nombre del
archivo y es asi que quite la imagen insertada en word y por el explorador
de windows, voy a eliminar el archivo y me sale un anuncio diciendo que no
se puede eliminar porque esta siendo utilizado por otro usuario o programa
pero ya cerre word que era donde lo estaba usando pero aun sigue saliendo,,
como puedo hacer para eliminar el archivo definitivamente sin tener que
reiniciar el PC ?