Brown sinh ra ở Cambridge, Anh, là con trai của Heather R. và John F. W. Brown. Ông sống ở Portsmouth cho đến năm bảy tuổi, sau đó chuyển tới East Sussex và theo học trường Lewes Priory tại đây.