Клик по нему переносит срузу же на страничку Google Play.

Чтобы этого не произошло, перед удалением передайте право владения кому-либо ещё.