下西山村位于龙游县北部。下西山村现有原下西山村、溪边村２个行政村撤并而成，村域总面积2.05平方公里。2007年底，全村总户数397户，总人口1215人。

下西山村与西方坞村、天池村、志棠村、塔下叶村、腰塘边村、河宗村、上向徐村、白鹤桥村、横山村、上宾村、下宅村、八石坂村、余岗村、项家村、脉元村、贤求棚村、后徐村、会泽里村相邻。

下西山村附近有绍衣堂和横山塔等旅游景点。