曹妙达的世系可以上追到祖父一辈。《旧唐书·音乐志》载：“后魏有曹婆罗门，受龟兹琵琶于商人，世传其业，至孙妙达，尤为北齐高洋（即文宣帝，550～559在位）所重，常自击胡鼓以和之。”他的父亲曹僧奴进献善弹琵琶的女儿给北齐后主高纬（565～576在位），贵为昭仪(宫廷女官)，因此被封为日南王。