He tenido un problema similar a este antes. Lo que hice fue cargar el shell de Python, importar el módulo y luego imprimir su __file__
atributo. Desde allí, simplemente eliminaría la carpeta o el archivo que se estaba asociando.
Es posible que desee analizar el uso de virtualenv, este sistema le permite crear una instancia de Python separada de su sistema. Cualquier módulo que instale o utilice en esta instancia es autónomo, incluida la versión del módulo.
Ahora guardo todos mis proyectos dentro de su propio virtualenv contenido, lo que me permite instalar y usar los módulos que quiera sin preocuparme por arruinar los módulos de otros proyectos.
pip
u otro administrador con capacidad de desinstalación para administrar paquetes de Python.