Детей не сможет в выписать пока им не исполниться 18 лет. Вас может выписать исключительно в судебном порядке и при условии, что вы там не будете проживать более 6 месяцев.
Если в суде докажите (документально), что владелец дома препятствовал вашему проживанию по вашей прописке, то суд вас не выпишет из данного жилья.
Пока жив отец детей, ни вы ни ваши дети не имеете имущественных прав на данное жилье (то есть при продаже дома вы не можете претендовать на часть суммы) но так как вы и дети там прописаны, имеете полное право все там проживать, а владелец дома не имеет право вас выгонять.
Смело пишите заявление в полицию ссылаясь, на Вашу прописку в данном доме.