IP-адрес для выхода в интернет у Вас один. Он настроен на терминале в кабинете А. Все остальное это внутренняя адресация, в том числе все то, что настроено на роутере в кабинете Б.
К сути: Если Вам статический ip адрес нужен для того, чтоб получать доступ к какому-то удаленному сервису (к примеру, не редко бывает, в панель управления хостингом сайта организации может быть настроен административный доступ только с определенного перечня ip адресов, а именно в качестве разрешенного ip адреса указан статический адрес в офисе организации) - в данном случае все будет работать не зависимо от количества включенных роутеров в основной терминал оператора. Настраивать дополнительно ничего не нужно. Если интернет работает - доступ есть.
Если же Вы хотите, к примеру, получить доступ к своему компьютеру в кабинете Б из дома - тут все сложнее. Необходима настройка каждого устройства в каскаде (пробросы портов, настройка NAT и так далее.).
Но опять же ответ на вопрос: Да, у Вас будет статический адрес. Все остальное зависит от целей и настроек оборудования.