Виктор Халанский подал в отставку с поста руководителя ГУ ЦБ по Санкт-Петербургу в феврале 1996 года. По этому поводу в городе выдвигали несколько версий.
Некоторые банкиры исходили из того, что после ухода Виктора Геращенко отношения Халанского с советом директоров ЦБ складывались непросто. В частности, настойчивые попытки Халанского спасти Северный торговый банк были негативно восприняты и. о. председателя ЦБ Татьяной Парамоновой — сторонницей жесткой линии в отношении банков-банкротов.
По другой версии, отставка Виктора Халанского связана с декабрьским кризисом в банковской системе города. Существует даже письмо петербургского управления по борьбе с экономическими преступлениями (УБЭП) о неудовлетворительной работе ГУ. По мнению УБЭП, на управлении ЦБ лежит часть вины за то, что пострадали вкладчики нескольких банков.
Третья версия состояла в том, что Виктор Халанский пал жертвой соперничества двух главных банковских группировок города — питерского Промстройбанка и Межбанковского альянса (группа банка "Санкт-Петербург"). В декабре 1995 года банки альянса в резкой форме потребовали отстранить Халанского от должности, так как он, по их словам, пытался заставить их присоединиться к Промстройбанку.
Кроме того, Халанский не ладил с городским правительством. Он обвинял председателя комитета экономики и финансов мэрии Алексея Кудрина (ныне заместитель главы администрации президента РФ и начальник Главного контрольного управления) в развале финансовой системы города.
Несмотря на отставку, в марте 1996 года Виктор Халанский занял в ГУ ЦБ почетное кресло советника.