Vesa-Matti Loiri syntyi tammikuussa 1945 Lily ja Taito Loirin esikoisena. Tööläläisperheessä harrastettiin keskivertoa enemmän taiteita: piirrettiin, maalattiin, soitettiin ja laulettiin sekä luettiin paljon kirjoja. Veljekset Vesa-Matti ja Veli-Pekka lauloivat Cantores Minores -kuorossa. Veli-Pekka sai vanhemmiltaan kitaran ja Vesa-Matti nokkahuilun.
Vesa-Matti Loiri innosti pihan poikaporukan näyttelemään elokuvien taistelukohtauksia, ja kun perhe muutti Haagaan, Loiri oli mukana perustamassa sinne lasten kesäteatteria.