লতিফুর রহমানের জন্ম ১৯৪৫ সালের ২৮ আগস্ট জলপাইগুড়িতে। ঢাকার সেন্ট ফ্রান্সিস স্কুলে তার শিক্ষাজীবন শুরু। ১৯৫৬ সালে শিলংয়ের সেন্ট এডমন্ডস স্কুলে ভর্তি হন। পরে কলকাতার সেন্ট জেভিয়ার্স কলেজ থেকে সিনিয়র কেমব্রিজ পরীক্ষা দেন।