التحق هرثمة بن سلمى بمعسكر ابن زياد ولما انتهى الى كربلاء تذكر حديثا مضت عليه حفنة من السنين فنساه فقد كان مع الامام امير المؤمنين في غزوة له وقد مر على كربلاء فنزل إلى شجرة وصلى تحت ظلالها فلما فرغ من صلاته أخذ قبضة من تلك الأرض وشمها وأخذ يقول : واها لك من تربة ليقتلن بك قوم يدخلون الجنة بغير حساب!! ومضى هرثمة إلى الحسين مسرعا فحدثه بما سمعه من أبيه فقال (عليه السلام) له : معنا أو علينا؟

- لا معك ولا عليك تركت عيالا , وساق له الامام نصيحته فأمره بمغادرة كربلاء لئلا يشهد واعية أهل البيت قائلا له : ول في الأرض فو الذي نفس حسين بيده لا يشهد قتلنا اليوم رجل إلا دخل جهنم.

وانهزم هرثمة من كربلاء حتى وافته الأنباء بمقتل الامام  وقد حرم من الشهادة بين يدي ريحانة رسول اللّه (صلى الله عليه واله).