常衮登第后由太子正字授补阙起居郎，永泰元年（765年）授中书舍人。大历十二年（777年）拜相，杨绾病故后，独揽朝政。以文辞出众而又登科第为用人标准，堵塞买官之路。对朝中众官俸禄亦视其好恶而酌定。封河内郡公。德宗即位后，被贬为河南少尹，又贬为潮州刺史。不久为福建观察使。常衮注重教育，增设乡校，亲自讲授，闽地文风为之一振。建中四年（785年）死于任上。享年五十五岁，追赠为尚书左仆射。
可怜云木丛，满禁碧濛濛。色润灵泉近，阴清辇路通。
玉坛标八桂，金井识双桐。交映凝寒露，相和起夜风。
数枝盘石上，几叶落云中。燕拂宜秋霁，蝉鸣觉昼空。
翠屏更隐见，珠缀共玲珑。雷雨生成早，樵苏禁令雄。
野藤高助绿，仙果迥呈红。惆怅缭坦暮，兹山闻暗虫。
云辟御筵张，山呼圣寿长。玉阑丰瑞草，金陛立神羊。
台鼎资庖膳，天星奉酒浆。蛮夷陪作位，犀象舞成行。
网已祛三面，歌因守四方。千秋不可极，花发满宫香。
云戟曙沈沈，轩墀清且深。家传成栋美，尧宠结茅心。
玉佩多依石，油幢亦在林。炉香诸洞暖，殿影众山阴。
草奏风生笔，筵开雪满琴。客从龙阙至，僧自虎溪寻。
潇洒延清赏，周流会素襟。终朝惜尘步，一醉见华簪。
纷然丧乱际，见此忠孝门。蜀中寇亦甚，柏氏功弥存。
深诚补王室，戮力自元昆。三止锦江沸，独清玉垒昏。
高名入竹帛，新渥照乾坤。子弟先卒伍，芝兰叠玙璠.
同心注师律，洒血在戎轩。丝纶实具载，绂冕已殊恩。
奉公举骨肉，诛叛经寒温。金甲雪犹冻，朱旗尘不翻。
每闻战场说，欻激懦气奔。圣主国多盗，贤臣官则尊。
方当节钺用，必绝祲沴根。吾病日回首，云台谁再论。
作歌挹盛事，推毂期孤鶱.
执契静三边，持衡临万姓。玉彩辉关烛，金华流日镜。
无为宇宙清，有美璇玑正。皎佩星连景，飘衣云结庆。
戢武耀七德，升文辉九功。烟波澄旧碧，尘火息前红。
霜野韬莲剑，关城罢月弓。钱缀榆天合，新城柳塞空。
花销葱岭雪，縠尽流沙雾。秋驾转兢怀，春冰弥轸虑。
书绝龙庭羽，烽休凤穴戍。衣宵寝二难，食旰餐三惧。
翦暴兴先废，除凶存昔亡。圆盖归天壤，方舆入地荒。
孔海池京邑，双河沼帝乡。循躬思励己，抚俗愧时康。
元首伫盐梅，股肱惟辅弼。羽贤崆岭四，翼圣襄城七。
浇俗庶反淳，替文聊就质。已知隆至道，共欢区宇一。
佳人绝代歌，独立发皓齿。满堂惨不乐，响下清虚里。
江城带素月，况乃清夜起。老夫悲暮年，壮士泪如水。
玉杯久寂寞，金管迷宫徵。勿云听者疲，愚智心尽死。
古来杰出士，岂待一知己。吾闻昔秦青，倾侧天下耳。