Vytautas Rimavičius gimė 1942 m. gruodžio 24 d. Lazdijų rajone, Šeštokuose. Baigė Lietuvos konservatorijos Klaipėdos fakultetą – kultūros ir švietimo darbo organizavimą.Jis buvo žinomas literatas, išleidęs ne vieną savo kūrybos knygą.
Begalinė Vytauto Rimavičiaus meilė Klaipėdos kraštui, Gargždams. 1968 m. sukūrė dainą „Gargždai – mano miestas“, kuri tapo neoficialiu miesto himnu. Dar vėliau su įvairiais to meto kompozitoriais sukūrė dar keliasdešimt kitų dainų.
Išleido šias knygas: „Negęstanti mano meilė“ (1990), „Ievos Simonaitytės penktojo sūnaus prisiminimai“ (1992), „Gyvenime, būk geras visiems“ (1996) ir dar daugybę kitų. Parašė pjeses „Mes tikime meile“, „Girgždutė“, „Skinija“, „Žvelsa“, periodikoje ir almanachuose paskelbė eilėraščių, apsakymų. Buvo ne vienos literatūrinės – respublikinės ir rajoninės – šventės iniciatorius, įvairių švenčių Klaipėdos rajone sumanytojas bei organizatorius.
Jam suteiktas Lietuvos nusipelniusio kultūros darbuotojo vardas, o už Mažosios Lietuvos kultūros puoselėjimą Vytautas Rimavičius 1997 m. tapo Ievos Simonaitytės premijos laureatu.
Gargždų miesto Garbės piliečio vardas Vytautui Rimavičiui už Lietuvos kultūros puoselėjimą suteiktas 2010 m.