O direito não é seu nem dela, é da criança. De qualquer forma, você pode pedir a guarda provisória, até que o judiciário decida qual dos lares é melhor para ela. Lembrando que a guarda compartilhada é regra e só não acontece se um não pode ou não quer ficar com a filha. Mas pense muito bem. O melhor para a criança, nesse momento, é ficar longe da mãe? Ela já desmamou? Você está disposto e preparado para cuidar sozinho? Sei que tem pais por aí que cuidam tão bem ou até melhor que a mãe. Você é assim?

Nem vc e nem a genitora tem direitos sobre outro ser humano. Essa cirança é um ser humano, uma pessoa, cidadão que PRO MERO ACASO é filho de vcs.

Os direitos são da criança em conviver tanto com o pai quanto com a mãe. A guarda será preferencialmente compartilhada com alternância de lar. Vc não pode impedir que a genitora saia de casa com o filho que tmb é dela, pois até que a justiça determine alguma coisa a guarda do filho é de ambos, e ao impedir que a genitora saia de casa com a criança vc está ferindo o direito dela de ir e vir e praticando contra a criança cárcere privado por estaria cerceando o direito deste cidadão, seu filho, de conviver com a mãe dele.

Se tem problemas com a mãe de seu filho, resolva com ela, deixe a criança de fora ou quem vai ficar impedido de conviver com ele será vc.