韦渠牟卒于长安，年五十三。

《全唐诗》卷三一四录其诗二一首，卷七八八又录其与颜真卿等联句一首，署名尘外。《全唐诗补编•续拾》卷一九补题一首。《全唐文》卷六二三存其文一篇。权德舆作《韦渠牟墓志铭》，另作有《右谏议大夫韦君集序》云：“寻献七百字诗一章，词华彬蔚，诏旨优答，浃日授秘书郎。踰月，迁右补阙。未半岁，拜右谏议大夫。其余以文发身，以直事君，言语侍从，论思讽议，贾生当受厘之问，方朔擅不穷之智，近臣渥命，荣冠一时，荐绅竞劝，岩谷皆耸。初君年十一，尝赋铜雀台绝句，右拾遗李白见而大骇，因授以古乐府之学，且以瓌奇轶拔为己任。至弱冠，乃喟然曰：‘四始五际，今既远矣，会情灵者，因于物象；穷比兴者，在于声律。盖辩以丽，丽以则，得于无间，合于天倪者，其在是乎?彼惠休称谢永嘉如芙蓉出水，钟嵘谓范尚书如流风回雪，吾知之矣’。遂苦心藻虑，俪词比事，纤密清巧，度越群伦。尝著天竹寺六十韵，鲁郡文忠公序引而和之，使画工图于仁祠，摘句配境，偕为胜绝。又于江南著卧疾二十韵，晋国忠肃公手翰以美之，曰：卓尔独立，其在我韦生乎?其为名臣宗公所称赏如此。又与竟陵陆鸿渐、杼山僧皎然为方外之侣，沉冥博约，为日最久，而不名一行，不滞一方。故其曳羽衣也，则曰遗名；摄方袍也，则曰尘外；被儒服也，则今之名字著焉。周流三教，出入无际，寄词诣理，必于斯文。自贞元五年，始以晋公从事至京师，迨今十年，所著凡三百篇。”【赠窦五判官】《瀛奎律髓汇评》卷四二：“方回评：渠牟自称重表兄弟窦庠。此诗极工。冯班评：工丽。查慎行评：既‘真金’便应‘披沙’，何‘难’之有?当作‘谁’字。似寓慨有味。纪昀评：此竟似后人应酬语。不署姓名，不知其为唐诗矣。”