جیمز داگلاس موریسون هشتم دسامبر 1943 در ملبورن (شهری کوچک در ایالت فلوریدا) به دنیا آمد. پدرش استیون جورج موریسون، افسر نیروی دریایی ایالات متحده بود و به همین علت بیشتر مواقع خانه نبود. مادرش کلارا کلارک، به قول جیمز (غرغروی سلطه طلب) بود. خانواده ی موریسون اسباب کشی های بسیاری می کردند و در نتیجه جیمز به سختی می توانست دوستانش را حفظ کند و در جایی ریشه بدواند. این طور بود که او علاقه ی بسیاری به کتاب خواندن پیدا کرد. جیمز در این باره می گوید: "یکی از معلمان دبیرستانم عقیده داشت، من احتمالا از همه ی بچه های کلاس بیشتر کتاب خوانده ام. اما قضیه به این راحتی ها هم پذیرفته شده نبود. معلم دیگری هم داشتم که به کتابخانه ی کنگره می رفت تا ببیند کتاب هایی که می گفتم برای درسم خوانده ام، واقعا وجود دارد یا نه!"...