Vít Olmers Mutter starb, als er acht Jahre alt war. Bis zu seinem Studium an der Theaterfakultät der Akademie der Musischen Künste in Prag (DAMU) lebte er mit seinem Vater alleine in Prag. Sein Studium schloss er 1964 ab, doch bereits zuvor spielte er am Theater und debütierte 1961 in dem von Václav Krška inszenierten Drama Junge Liebe als Filmschauspieler auf der Leinwand. Anschließend begann er ein Regiestudium an der FAMU (Film- und Fernsehfakultät der Akademie der Musischen Künste), welches er 1966 mit seinem Diplomfilm Houslista abschloss. Bis Mitte der 1980er Jahre war Olmer noch vermehrt als Schauspieler unterwegs. Seitdem schrieb und inszenierte er fast ausschließlich nur noch Spielfilme wie Der Boss kennt auch den Staatsanwalt, Das reinste Drama und Unser tschechisches Liedchen.
Olmer ist zum zweiten Mal verheiratet. Er hatte zwei Söhne aus erster Ehe, von denen einer verstarb. Mit seiner zweiten Ehefrau, der Kostümbildnerin und Schauspielerin Simona Chytrová, hat er einen gemeinsamen Sohn.
Filmografie (Auswahl)
Schauspiel
1961: Junge Liebe (Osení)
1962: Der Mann aus dem 1. Jahrhundert (Muž z prvního století)
1962: Die Teufelsfalle (Ďáblova past)
1963: Goldener Farn (Zlaté kapradí)
1964: Nachmittags im Park (Vysoká zed)
1965: Es lebe die Republik (Ať žije republika)
1965: Mord vor der Kamera (Pět miliónů svědků)
1966: Das Phantom von Morrisville (Fantom Morrisvillu)