Особенно много времени в это время у Кетлинского отнимала отработка системы управления централизованной стрельбой. Дело это было по тем временам новое, однако весьма перспективное, так как сулило настоящую революцию в организации морского боя. На «Ретвизане» система управления централизованной стрельбы включала в себя дальномер Барра и Струда, микрометры Люжоля, позволявшие достаточно точно определять дистанции по углу к высоте мачт корабля противника. Затем замеренная дистанция должна была поступать в боевую рубку на главный дальномерный циферблат, где уже старший артиллерийский офицер выставлял на специальном циферблате ту осредненную дистанцию, какую он считал правильной. Там же, в боевой рубке, находились и боевой указатель, определяющий курсовой угол цели, и снарядный циферблат, указывающий тип снаряда. Вся эта информация с помощью синхронной электрической связи поступала от старшего артиллериста на принимающие циферблаты в башнях, батареях и погребах. Система централизованного управления стрельбой требовала не только высокой квалификации и офицеров, и матросов, но еще и высокой согласованности в их действиях. К тому же система центрального управления еще только внедрялась, а потому была весьма несовершенной и очень капризной. Часто происходили различные сбои, нередки были и короткие замыкания, которые выводили всю систему из строя. Да и образованность матросов желала много лучшего. Больше половины комендоров не знали десятичных дробей, а потому не могли даже правильно пользоваться таблицами стрельбы. По этой причине забот у старшего артиллериста «Ретвизана» хватало. Надо было быть не только командиром, рационализатором, но и учителем. И здесь Кетлинский показал себя как настоящий новатор. Еще на переходе от Кронштадта в Порт-Артур в свободное от службы время он начал конструировать специальный прибор для обучения комендоров, самих же подчиненных усиленно обучал общей грамоте, и прежде всего математике.

Идея «прибора Кетлинского» (под таким названием он стал известен на кораблях Тихоокеанской эскадры) заключалась в том, что непосредственно перед орудием устанавливался щит, изображающий цель, а к стволу орудия крепились электромагнит и шпилька, делающая укол в щите при замыкании контакта после прицеливания. К сожалению, этот прибор был изготовлен в единственном экземпляре и оказать серьезного влияния на уровень подготовки артиллеристов всей эскадры не мог. И все же на «Ретвизане» стреляли лучше, чем на каком-либо другом корабле эскадры. В этом была несомненная заслуга лейтенанта Кетлинского.

В августе 1903 года эскадра перешла во Владивосток, где все броненосцы прошли докование. Что касается «Ретвизана», то он настолько пришелся по душе Старку, что тот часто держал на нем свой флаг. В конце октября в целях экономии средств броненосец был выведен в вооруженный резерв.

Между тем внешнеполитическая обстановка на Дальнем Востоке ухудшалась с каждым днем Япония уже открыто провоцировала вооруженный конфликт с Россией. В этих условиях «Ретвизан» был снова выведен из вооруженного резерва. 19 января 1904 года во время прилива большие корабли вышли на внешний рейд Порт-Артура. Затем эскадра отправилась к полуострову Шангунг, отрабатывая совместное маневрирование, а затем вернулась в Порт-Артур.

Этот выход русской эскадры «в неизвестном направлении» вызвал настоящую панику в Японии. Опасаясь нарушения своих планов начала войны, там решили, не теряя времени, спровоцировать ее самим, не дожидаясь упреждающего хода северного соседа. 22 января последовал разрыв дипломатических отношений с Россией, а на следующий день командующий Соединенным флотом Японии вице-адмирал Того получил приказ о начале боевых действий против России.

Весьма любопытен в дневнике А.А. Денисова разговор между Кетлинским и мичманом С.В. Шереметевым с крейсера «Паллада».