肺腑之言：

指出于内心的真诚的话，也可以用来形容开玩笑时说的真心话。

推心置腹：

意为把赤诚的心交给人家，比喻真心待人，也可以用来形容开玩笑时说的真心话。

直抒胸臆：

直率地抒发自己的思想感情，也可以用来形容开玩笑时说的真心话。

半真半假：

一半真情，一半假意，形容人不是真心实意的态度，也可以用来形容开玩笑时说的部分真心话。

希望这些成语能帮助你以玩笑的方式表达真心话。