Tanto o pai quanto a mãe tem o direito (e o dever) de conviver com seus filhos. Em caso de conflito, disputas e divergências, o que se deve fazer é buscar a solução amigável ou judicial, sem interferir na tranquilidade das crianças. Se você não se separou na justiça, mesmo que seja uma união estável 'sem papel', procure o judiciário para pedir a separação. Neste documento, vocês dois estipulam, entre outras coisas, a guarda e o regime de visitas dos filhos. Se não tem condições de contratar um advogado, procure o serviço público da Defensoria de sua cidade ou ainda os serviços gratuitos prestados pelas Universidades. O importante, contudo, em relação a sua pergunta é saber que nenhum dos pais deve afastar a criança do convívio com o outro. A criança precisa dos dois para crescer mental e psicologicamente saudável. Um pai ou mãe só pode ser afastado de seu filho por ordem judicial com bons motivos. Por exemplo. se coloca a criança em risco, seja por ter algum vício ou agir de modo irresponsável.

obrigado pela resposta...me ajudo muito... mais e se eu quise levar ele pra pasear...??

Passear onde? Quala idade dela? Se é uma criança com certa autonomia, não é mais um bebê e se você não vai sair da cidade dele, não tem problemas. Se for criança muito pequena que demanda cuidados frequentes da mãe, aí seu passeio terá que ser de curta duração e mais próximo e/ou com a presença da mãe.Tudo é questão de bom senso e de diálogo com a mãe da criança. Para se deslocar da cidade ou passar períodos maiores, peça autorização àmãe paraevitar discussões desgastantes e até alguma providência judicial por parte dela, o que será nocivo para a criança. Lembre-se que um princípio do direito quando há crianças envolvidas, é que o bem-estar da criança é o que deve prevalecer. Sempre.