เรื่องราวของชนชั้นสูงชาวอังกฤษ Crowley ผู้เป็นเจ้าของปราสาท Downton Abbey อันใหญ่โต โดยมีหัวหน้าครอบครัวคือ Earl of Grantham รวมถึงภรรยาและลูกสาวอีก 3 คน แต่ในยุคสมัยนั้นของอังกฤษ ตามกฏหมายแล้ว ตำแหน่งและสมบัติต่างๆจะต้องตกทอดให้ทายาทผู้ชายเท่านั้น และญาติคนเดียวที่เป็นผู้ชายของตระกูลกลับเป็นทนายความในระดับชนชั้นกลาง Lady Grantham จึงต้องคิดหาทางกับแม่ของสามีว่าจะทำอย่างไรไม่ให้ทรัพย์สมบัติรวมถึงปราสาท Downton Abbey ต้องตกไปอยู่ในมือคนอื่น