Apartamento já estava em uso: devo renovar a pintura para devolver?

Boa tarde. Alugo um apartamento há 4 anos direto com o dono e sem contrato. Entrei no apartamento para dividir com mais 3 meninas que moravam nele. Essas três meninas saíram um ano depois e coloquei outras três no lugar. Portanto, peguei o apartamento já em uso e continuei nele, mas quando essas meninas que alugavam saíram, eu cheguei a levar meus documentos para o proprietário e fiquei esperando que ele fizesse uma nova vistoria e novo contrato. O novo contrato nunca foi feito e nenhuma pintura foi renovada pelo proprietário desde que entrei. Agora estou saindo e ele quer que eu renove toda a pintura, pois quem fez contrato com ele antes de eu entrar, pegou a pintura nova (porém o contrato dessa pessoa já venceu e eu estou morando sem contrato, sem nova pintura e sem nova vistoria) e, segundo ele, como peguei o apartamento em uso, tenho que arcar com essa reforma. Eu não concordo, acho que tenho que devolver como EU peguei, e não como quem estava antes de mim pegou, mesmo que eu tenha pegado em uso. Peguei sem pintura, com vários furos na parede e no teto já, com o chão "estragado de cera", como ele disse... Como não temos contrato e eu peguei já em uso, não sei quem tem razão. Porque se ele tivesse me dado um contrato para assinar, dizendo que eu devia renovar a pintura de um apartamento que peguei sem pintar, e renovando um piso "estragado de cera" que já peguei estragado, eu jamais teria assinado. Não teria ficado nesse apartamento. Podem me ajudar?