همانطور که از نامش پیداست این قلعه متعلق به خاندان نصوری است که به دستور شیخ جبار دوم (پدر بزرگ شیخ ناصر نصوری) که حاکم وقت بوشهر بود، در سال 1224 هجری قمری ساخته شده است. براساس تاریخ قلعه نصوری بیش از 216 سال قدمت دارد که به اوایل دوره قاجار برمی گردد.
قلعه شیخ جبار نصوری در بندر سیراف (تا سال 1387 بندر سیراف به بندر طاهری معروف بود) شهرستان کنگان و 250کیلومتری شرق شهر بوشهر واقع شده است. قلعه نصوری توسط معمار چیره دست، علی اصغر شیرازی با مصالحی مانند سنگ های کوچک و بزرگ و گل و گچ ساخته شده است.
ساختمان قلعه روی تپه ای مسلط به دریا بنا شده بود، به طوری که در بزرگ ضلع جنوبی قلعه رو به خلیج فارس باز می شد. درون قلعه تابلو های گچبری شده شاهنامه وجود دارد.گفته شده خاندان نصوری تا سال 1356 در این عمارت زندگی می کردند.
