Рассказ пойманного англичанина Джонатана Смолла переносит читателя в Агру времён восстания сипаев. Смолл вместе с тремя сикхами (Мохаммедом Сингхом, Достом Акбаром и Абдуллой Ханом), убив купца Ахмета, завладевают сокровищами, которые богатый раджа с помощью убитого пытался спасти от охватившего колониальную Индию восстания. Убийцы прячут клад и приносят клятву верности друг другу и тайне, но их ловят и обрекают на вечную каторгу на Андаманских островах. Ради спасения они посвящают в тайну сокровища охранников каторжного поселения майора Шолто и капитана Морстена, однако Шолто нарушает данную им клятву: завладевает сокровищами, но пленников не освобождает. С помощью туземца Тонги Смоллу удаётся бежать, и он мстит Шолто, оставляя «знак четырёх».