Оказалось, что это происходит из за параметра
ring detect-timeout.

Между двумя звонками порт успевает сбросить plar коннест, и если поднять в этот момент трубку, то телефон подключается к адпаку, а при очередном звонке на FXO уже занято.

* комментарий ap200:
нужно настроить на шлюзе с FXO портом, в данном случае,
ring detect-timeout 70 (например, т.е. увеличить его).