Estimado Sergio82,
Puede quedarse una copia, lo que no puede hacer es usarla, es decir, no tiene derecho a entrar en la vivienda mientras tú habites allí.
Si te quedas más tranquilo, cambia la cerradura y dale tú al casero las llaves cuando te vayas. Al fin y al cabo, nunca podrías estar seguro de que el casero te dió todas las copias que tenía...
Esperando haber resuelto su consulta, reciba un cordial saludo.
Quedo a su disposición en mi página web para cualquier cuestíon adicional que necesite.
Salvo mejor opinión fundada en Derecho
Ignacio Sanz
http://www.sanzycabrejas.com/