يشتق اسم ساكسايهوامان أو ساكسايهوامان من كلمتين في لغة الكيتشوا: "ساكساي" التي تعني الشبع، و"وامان" التي تعني الصقر؛ ومعناهما معًا "تناول طعامك حتى الشبع، أيها الصقر". هذا المعنى المحير يشير إلى حقيقة أن الطيور كانت حماةً إلهيةً للإنكا وكتائبهم العسكرية.
يُعتقد أن حوالي 20,000 رجل عملوا على قطع ونقل الحجارة الضخمة من هواكوتو وروميكولكا وبناء هذه القلعة الاحتفالية الإنكية. ساكسايهوامان هو عمل معماري بجدران ضخمة مصنوعة من حجارة يمكن أن يتراوح وزنها بين 99 إلى 138 طنًا. تختلف أحجام الحجارة وبعضها يحتوي على أكثر من مائة زاوية، كل منها مثبت ومتلائم مع الآخر دون أي نوع من الملاط.