Вам нужно подавать на развод по обычной процедуре - обратиться с исковым заявлением в суд о расторжении брака.
После этого суд будет вызывать мужа повесткой и, если он не будет является, разведет без его присутствия.
Процесс развода с без вести пропавшим несколько отличается, но будем надеяться, что с Вашим мужем все в порядке.
Если муж не помогает ребенку материально, у Вас имеются все основания для того, чтобы обратиться в суд.
Подробнее про установление и взыскание алиментов можно прочитать на нашем форуме.
Что касается выезда с ребенком за границу, то здесь все несколько сложнее.
Пока у ребенка есть отец, Вам потребуется получить разрешение отца на вывоз ребенка за пределы Украины.