Некорректный вопрос

Опека - форма устройства малолетних граждан (не достигших возраста четырнадцати лет несовершеннолетних граждан) и признанных судом недееспособными граждан, при которой назначенные органом опеки и попечительства граждане (опекуны) являются законными представителями подопечных и совершают от их имени и в их интересах все юридически значимые действия.
Опека или попечительство устанавливаются над детьми, оставшимися без попечения родителей, в целях их содержания, воспитания и образования, а также для защиты их прав и интересов.
Двое детей, я так понимаю, общие и Ваш брат является отцом этих детей. Опека в данном случае именно поэтому невозможна.
Развод, любовники его жены и проч не оказывают правового влияния на права и обязанности родителей.