榆树林子镇小房身村行政区划上隶属于辽宁省朝阳市建平县，榆树林子镇小房身村的下属街道自然村居委会及其地理管辖范围内的企业事业单位也属于辽宁省朝阳市建平县。