Como deve ser realizado o pernoite? A partir de quantos anos?

Boa tarde, resumidamente, tenho um filho de dois anos e seis meses, quando o mesmo tinha apenas 4 meses o Pai solicitou regulamentação de visitas, e ficou decidido pelo Juiz que ele poderia apenas visitar em casa, depois que meu filho completou mais de um ano e meio, eu por vontade própria sem consultar advogados liberei para que ele buscasse no domingo de manhã e devolvesse no final da tarde, um sim e o outro não, raramente ele aparecia, muitas vezes falava que ia buscar e não ia, agora ele quer a criança passe a dormir na casa dele, lembrando que nosso filho tem 2 anos e 6 meses, e disse que vai abrir processo! Como devo agir? Ele realmente ja pode dormir fora? Quais os horários? Att,