凡松·卡塞的父亲是法国著名演员让-皮埃尔·卡塞尔,他的母亲是一名记者,他出生于巴黎的蒙马特市区。1980年他的父母离婚,凡松·卡塞很早就显示出他的反叛性格,多个寄宿学校因此将他开除。17岁时他进入一座马戏团学校。他的父母劝他不要去当演员,因此他一开始没有向这方面发展。最后他去美国著名的纽约演员学校学习。20岁时他回到法国,著名的话剧导演让-路易·巴伦特收纳了他。他参加了多部巴伦特导演的戏。