স্যার জেমস গ্রাহাম, ২য় ব্যারোনেট