События, описанные в этом рассказе, происходят в Лондоне и его окрестностях за 12 лет до окончания 19 века. Шерлок Холмс и доктор Ватсон скучают в своей квартире на Бейкер стрит. Великий сыщик откровенно хандрит, его мозг скучает без работы. Он взбадривает себя наркотиками.
Ватсон задает ему небольшие задачи, которые он щелкает как орешки, играючи. Ему бы какое-нибудь дело сейчас. И оно появилось в лице прелестной мисс Морстен. Она дочь английского офицера, который служил верой и правдой Британской короне в одной из ее многочисленных колоний. И таинственно исчез.
Каждый год в день рождения ей по почте приходит жемчужина. Девушка знает лишь, что у отца был друг Тадеуш Шолто. И его сын живет где-то в окрестностях Лондона. Сама она не решается его искать. Да это и не прилично было делать в те времена.
Мисс Морстен дала Холмсу те документы, которые у нее были. И поиски начались. Но Тадеуш ведет себя как-то странно, как будто кого-то боится. Он сообщает девушке прискорбную весть о смерти ее отца. И таинственно добавляет, что в ее отношении допущена несправедливость, и он хочет ее исправить.
Их родители, когда служили в Индии, стали обладателями огромного сокровища Агры. Но они не смогли разделить его и поругались. У Морстена случился сердечный приступ, и он тут же умер. Старый Шолто спрятал тело своего сослуживца.
Он вернулся в Англию, но постоянно озирался по сторонам, словно боялся кого-то. Превратил дом в неприступную крепость. Перед своей смертью он поведал сыновьям часть тайны. Он сожалел о содеянном и просил их исправить эту несправедливость.
Компания отправляется к брату Тадеуша Бартоломью, но он мертв. Полиция арестовывает Тадеуша Шолто. Шерлок Холмс находит интересные улики: следы маленького человечка, почти ребенка, мужчины, у которого одна деревянная, запаску на столе.
Холмс привлек к работе окрестных мальчишек. Они выследили убийц. Ими оказались беглый каторжник Джонотан Смолл и дикарь маленького роста. Он и убил Бартоломью отравленным ядовитым дротиком, который местное население Юго-Восточной Азии использует для охоты.
Джонатан Смолл забрал ларец с драгоценностями. Он рассказал историю этих сокровищ Агры. Они должны были быть разделены между четырьмя людьми, которые заключили союз четырех. Но отец Шолто вероломно нарушил договор и забрал все сокровища себе. Поэтому и был убит.
Джонатан стал уходить от полиции на паровом катере по Темзе. Когда увидел, что от полиции ему не уйти, он выбросил сокровища в реку по ходу движения катера. Мисс Морстен осталась без сокровищ. Но теперь доктор Ватсон смог сделать ей предложение руки и сердца.
В ходе задержания дикаря убивают, а Смолл прячет сокровища на дне Темзы.
Хотя сокровища Агры и были утеряны, доктор Ватсон нашел свое сокровище в лице мисс Морстен.
Читательский дневник.