爸爸家庭暴力的样子，我从小看到大的，十多年，脾气超不好，经常因为小事打妈妈。例如:上次我们跟妈妈外出，去玩，比预定时间回来晚了一个小时，他不让我们进门，后来还出来揪着妈妈的头发，还打，又踹了一脚，妈妈晕过去了，他就在那边看着，要不是我喊小叔过来的，不然都去不了诊所了。从小到大，十多年他都是这样，经常因小事打骂妈妈，心里都有个阴影，没跟他正正经经说过一次话，他要求的事，我们几个没说过不。他不让我们吃饭，我们就不敢，否则扇耳光，饿了一晚上，弟弟在那明天还要期末考的，完全没有顾及我们的感受。六年级的时候，妈妈还被他赶走了一个学期，初一才回来。请问律师，这样的情况，离婚的话，孩子跟着谁的？我15岁，弟弟13，还有两个姐姐。我们意见都是一致跟着妈妈的。请问会怎么判决？