后来阳城因为讲义气，将一个被贬远方后悄悄潜回的官员朋友藏在家里，被唐德宗贬为道州刺史。阳城到道州后，励精图治，关心民情。史载他“治民如治家，宜罚罚之，宜赏赏之”。他生活非常俭朴，月俸除留足吃用外，其余全归官府所有，并常常把官府规定给自己食用的鱼肉等放在道旁，与民共享。另一方面，对于朝廷摊派的税收，他经常抵制，并因此得罪朝廷，只好请辞回家。
道州人中多有侏儒，朝廷曾要求当地官员每年进贡几名到宫里做官奴。阳城在任时，上书唐德宗要求废除这项不人道的制度，并愤然直言：“我们这里只有个子矮的百姓，但没有个子矮的奴才”。唐德宗看后十分惭愧，废除了该制度。
道州百姓感怀阳城的恩德，纷纷以阳城的名字给子孙起名，后来又将之作为神灵供奉起来，称其为道州的福神。此后民间各地纷纷传开，道教也就顺应民意，将他推上福神宝座。
