Bununla beraber, Byron' ın hayranlarının saçlarına karşı özel bir ilgisi vardı. Doğum günü kartını bir kenara atan ve hediyeyi açmaya girişen bir çocuk gibi Byron da hayran mektuplarını talan eder, düzenli olarak gelen hayran mektuplarının içinden çıkacak kadın saçı tutamları arardı. Titizlikle, üstünde kadınların adlarının yazılı olduğu zarfların içinden çıkan yüzden fazla kadının saçını sakladı.
Byron' ın "şaşaa, içki ve hayranlarla seks" dolu yaşam tarzının evlilik hayatıyla uyumsuz kaçması şaşırtıcı olmasa gerek. Eşi ilk ve tek çocuklarını dünyaya getirdiğinde Byron' ın mutsuzluğu doruk noktasına ulaştı ve ünlü şair cehennemde yaşadığını dile getirdi.
"İnsanlar, hayatın kısalığıdan şikayet ediyor. Asıl, uzunluğundan şikayet etmeleri gerekmez mi? Zira hazları daha yolun yarısına varmadan çok önce biter. Tabii eğer kişi genç yaşta ölecek kadar şanslı değilse. "