Я думаю, что Вы прочитали Синодальный перевод Библии, а я Вам дам еще иные переводы этого же места, что-бы полнее раскрыть обсуждаемый вопрос:
"31 - Вам было сказано: "Кто разводится с женой, тот должен выдать ей разводное письмо".
32 Я же говорю вам, что кто разводится с женой не по причине ее измены, тот толкает ее к нарушению супружеской верности, и кто женится на женщине, оставившей своего мужа, тоже нарушает супружескую верность. " Матф.5:31-32 (пер. IBS)
"31 Было сказано: "Тот, кто разводится с женой, обязан дать ей разводное свидетельство".
32 А Я говорю вам: всякий, кто разводится с женой, если только не по причине измены, толкает жену на грех неверности, и тот, кто женится на разведенной, совершает тот же грех." Матф. 5:31-32 (пер. Радостная Весть)
А теперь Ваш вопрос:

Здесь разговор не ведётся о том, что нельзя второй раз женится.
Разговор ведётся о том, что нельзя вступать в брак с человеком (мужчина/женщина), которые были уличены в прелюбодеянии.
Здесь также ведётся разговор о том, что прежде чем развестись, вспомни что говорил Господь:
"24 Потому оставит человек отца своего и мать свою и прилепится к жене своей; и будут одна плоть. " Бытие 2:24
Поэтому Иисус (а не Матфей) сказал именно эти слова "только по ричине измены" возможен развод!!!
А там выбирайте сами.