يقع برج الرابي فوق أحد الجبال الشاهقة التي تشتهر بها مدينة خورفكان، وهو الجبل المحاذي لمنطقتي الخبة والشرق، ويقع على ارتفاع حوال 200متر، وتبرز للناظر من البرج مشاهد المدينة رأسياً متمثلة في الشاطئ الجميل الذي يشبه حرف النون، والكورنيش الذي تزينه الحدائق والأزقة الضيقة للبيوت العربية القديمة، ومزارع النخيل والفاكهة المنتشرة في أحضان الأودية، وسلسلة الجبال التي تمثل سوراً طبيعياً للمدينة، والحركة العمرانية التي أسهم الموقع الطبيعي في إبرازها، فصارت كاالقلاع التي ميزتها عبر التاريخ والموزعة على التلال الجبلية وفي السهول ، وهناك أنواع أخرى من التحصينات العسكرية المسماة باالمقابض، والمنتشرة بكثرة في جبال المدينة، وهي بمثابة الخنادق العسكرية في الجيوش النظامية الحديثة، حيث شيدت من صخور الجبال بأشكال مختلفة . . مربعة ودائرية، وذكرها الكاتب مؤيد الشيباني في كتابه ( عــزف علــى خـشــب الســـدر ) .

وتعد تلك القلاع من العقبات التي منعت البرتغاليين من الوصول إلى مسقط، وفي إحدى المعارك الكبرى التي دارت في القرن 16الميلادي هدموها، ومن ثم وصلوا إليها، وعلى أنقاضها شيد برج الرابيالذيروعي في تصميمه الدقة والاتقان وهو مكون من طابقين الأول سداسي الأضلاع والثاني دائري، ومبني فوق قاعدة مستطيلة من الصخور الجبلية يبلغ ارتفاعها مترين ليعلو عليها شامخاً من موقعه الذي يشرف على مناطق المدينة، ومن مزاياه الأخرى وجود فتحات صغيرة على جدرانه تسدد من خلالها البنادق وتسمى ( مـــرامــي )، وأخرى تستخدم للمراقبة وسكب الزيت المغلي على المهاجمين، وباب الصباح لايتعدى ارتفاعه المتـــر ولأنه أعلى من مستوى السطح بكثير لايدخله إلا الأشداء باالتسلق بواسطة حبل مثبت به لأسباب أمنية، وتاريخ البناء محفور على صخرة صلدة تشير إلى التقويم الهجري، وهو أيضاً مؤمن ببركة ماء دائرية الشكل تتجمع فيها مياه السيول التي تنساب من تساقط المطر، وفي الوقت الحاضر ينظر إلى برج الرابي على أنه من المعالم التاريخية والسياحية المتميزة، فاالزوار الذين يأتون إليه من كل حدب وصوب وهو يقصدون المدينة في المناسبات يصلون إليه على أقدامهم بسبب الانحدار الجبلي، حيث يضطر الآخرون إلى التجمع قريباً منه أسفل الوادي، وللإستفادة من هذا المعلم سياحياً يستحسن أن تجرى له تعديلات ليسهل الوصول إليه وتوفير سبل الراحة للإستمتاع باالمشاهد الخلابة التي يوليها الزوار اهتماماً كبيراً .