事实经过：
目前与太太 两小孩(6岁和1岁)共4人同住。我与太太都在上班。
近期与太太在生活上有许多意见不合，
由于太太娘家非常保护她和小孩，在太太不愿意花时间心力沟通解决的情况下，每到周五
下班时间就不接电话，直接请岳父母把两小孩和她自己接回娘家过夜，周六晚或周日晚才
送回。
在回娘家的这超过24小时内，不接电话也不回复，甚至岳父母态度也一样。
问题：
这样子在法律上是否有问题? 我是爸爸，剥夺了我和小孩相处的时间，严重影响对6岁小
孩的教育。
先感谢各位帮 小弟/小妹 解惑或提出建议，如内容尚有不足，盼请提出需补充之处。