Karol Pádivý sa narodil 10. septembra 1908 v Dolní Cerekvi pri Jihlave. Po skončení meštianskej školy v Jihlave vo veku 14 rokov sa stal elévom (učňom) vo Vojenskej hudbe v Jihlave.