求放任南竹省林桂州江漓县任知县，得到吏部的同意。当时江漓县正缺县令，杨绵民很快就被吏部放任江漓县令。其实杨县令早就羡慕林桂的山河异秀，打算将林桂的奇峰异水尽收画中。考中进士出身后，就盯着林桂官场，并将自己的求望告达吏部，待有官缺即求放任。正好江漓县缺县令，而林桂江漓这种偏远穷蛮之地并无人抢来为官，所以杨绵民的要求很快达成，可说双方皆大欢喜。

    林桂江漓这个地方虽然偏僻，但山清水秀，民风纯良，正适合沉迷画作的杨绵民。自此，杨绵民除了政务要事亲自处理之外，大部分时间都沉于游玩和画作之中。不久之后，林桂州当地都知道有一个画家杨县令，他的画作和政绩一样，传颂于林桂州一带，很多画作被人们争相购买和收藏，画家的名望一时盖过了县令的名望。以至在江离县甚至林桂州，人们只知有杨画师而不闻杨县令了。