Arriendo local para fines comerciales sin contrato

Mi consulta es, arrendé un local comercial y lo legalice ante notario público para poner un restaurante y después hacer los trámites respectivos para poder funcionar, pero me encontré con la sorpresa que este local tiene muebles en su interior pertenecientes a la persona que lo tenía ocupado anteriormente, la cual no cuenta con un contrato de arriendo y sólo funcionaba de palabra.

Además de estar trabajando varios meses evadiendo impuestos de iva, tampoco tenía patente comercial ni resolución sanitaria del local para funcionar.
Mi pregunta es: Mi arrendador como responsable legal del local ¿puede retirar los muebles del local o tiene que hacerlo vía judicial? Ya que nunca se formalizo un contrato de arriendo.
El dueño de los muebles sólo le dice que no tiene dónde dejar sus cosas.

Freddy