কদাচিত্ মাতৃস্নেহ,দত্তবাড়ির চাকর-বাকরদের তদারকি আর কপোতাক্ষ নদের তীরবর্তী অপরিমেয় সবুজের সুষমায় অতিবাহিত হয় মধুসূদনের শেশব।তত্কালীন সমাজে নারীকে মূল্যায়ন করা হতো তাঁর সন্তান ধারণ ক্ষমতার বিচারে। জাহ্নবী দেবীর অবস্থান দত্ত পরিবারে সুসংহত ছিল কেননা মধুসূদন যখন এক বছর বয়সের শিশু তখন তাঁর মায়ের কোলে আগমন ঘটে আর এক পুত্র শিশুর।নাম প্রসন্ন কুমার দত্ত।১৮২৬ খ্রিস্টাব্দে তার মৃত্যু হয়।