James Madison, Américain