داستان خانه‌ خاموش ماجرای سفر بازماندگان یک خانواده (دو برادر و یک خواهر) به خانه‌ی مادربزرگ در یک تعطیلات تابستانی به شهری ساحلی با نام «جنت حصار» است. خانه‌ای قدیمی که زادگاه این برادران و خواهرشان نیز هست. مادربزرگ که سالخورده و بیمار است، همراه خدمتکار وفادار خود به نام «رجب» در این خانه‌ی قدیمی و بزرگ زندگی می‌کند و هر سال چشم به راه سفر نوه‌های خود است. رمان توسط پنج راوی روایت می‌شود. فاروق (برادر بزرگ‌تر) که یک محقق و تاریخ‌نگار است، متین (برادر کوچک) که دوره‌ی کالج را به پایان برده و می‌خواهد به آمریکا سفر کند، مادربزرگ، رجب (خدمتکار مادربزرگ) و حسن (برادرزاده‌ی رجب) که دانش‌آموز تنبلی بوده و بلیط بخت‌آزمایی می‌فروخته و حالا به‌عنوان یک ناسیونالیست دوآتشه فعالیت دارد. با این وجود نیلگون (خواهر فاروق و متین) با این‌که یکی از شخصیت‌های اصلی رمان است در میان راوی‌ها جایی ندارد و در کلام و سخن دیگر راویان روایت می‌شود.