হরিপুর জমিদারবাড়ি, হরিপুর উপজেলা