يقسم برج الرابي في خورفكان إلى ثلاثة أجزاء الطبقة الأولى القاعدة وهي مربعة الشكل يجلس عليها البرج، والثانية الجدران ذات الشكل السداسي. ومن فوق «السطح» كجزء ثالث يأخذ شكلا دائريا متوجا بفتحات كأنها تيجان، كما أنه مسقوف من الأعلى وفيه بروز بارتفاع المتر من السطح، هذا بالإضافة إلى أن فيه مداخل وفتحات للبنادق والتهوية ومرافع «رمانة» لوضع لأسلحة والأمتعة عليه.
والأدوات المستخدمة في البناء هي حجارة الجبل الحارة والطين المحروق والجص، ودخول بعض الأخشاب «خشب الكندل» والحبال. فيما السقف مصنوع من المنقور أو ما يطلق عليه «الدكن» وهي أخشاب قصب السكر.
وأكد الباحث محمد خميس النقبي أن تبين بناء على أبحاثه التاريخية التي امتدت على مدى 25 سنة حول دراسة تاريخ خورفكان، أن برج الرابي قد شيد قبل ما لا يقل عن 97 سنة من قبل النقبيين في عهد الشيخ سعيد بن حمد بن ماجد القاسمي والمتوفى في عام 1937 وطبقا للصخرة التي عثر مكتوبا عليها بخط عربي قديم «بنينا برج الرابي في جمادى الآخر 1333 ه». مستذكراً نشيداً يتداوله كبار السن من أهالي المنطقة، يروي تفاصيل بنائه جاء فيه: «أمرنا الشيخ نبني الرابي ... والطين عندنا والحصى بنصابي»