Pérdida de patria potestad

Tengo un hijo de 2 años 3 meses, desde que estuve embarazada hasta el día de hoy el padre de mi hijo nunca ha dado ni un peso por el. Fui a mediación por pensión de alimentos hace ya casi un año y nunca se llegue a acuerdo. El padre de mi hijo no ve al niño hace ya casi1 aaño. Rl día de hoy fue un tipo del juzgado de familia a preguntar por mi a la csa de mi madre, ella dijo que no sabe dónde vivo, es la verdad no sabe la dirección (yo vivo actualmente con mi marido quién ha sido el padre para mi hijo) mi consulta es porque un tipo va varias veces a la casa de mi mamá a mirar como acechando y lo otro es puedo demandar yo por perdida de patria potestad? Me gustaría que me guiaran que camino tomar.

Si me demanda el tiene más beneficios? Puede quitarme a mi hijo? Si le conceden visita debería pagar retroactivos desde que el niño nació? Mi marido puede hacer algo para que el niño pase a ser legalmente de el?

Paula