По возвращении в Англию Конан Дойл приступил к написанию «Долины страха», взяв за основу для второй части (истории «Метельщиков» и Берди Эдвардса) книгу Аллана Пинкертона «‘Молли Магвайрс’ и детективы», выпущенную в 1877 году и переизданную в 1886-м. Генеральный директор Агентства Пинкертонов Ральф Дадли утверждал в интервью, данном тому же Джеймсу Хорану, что Уильям Пинкертон пришел в ярость, прочитав «Долину страха». «Сперва он говорил, что подаст иск против Дойла, но затем остыл. Его рассердило, что Дойл, пусть даже и беллетризовавший эту историю, не посчитал нужным спросить разрешение у Пинкертона использовать его записки. Прежде они были хорошими друзьями, но с того дня их отношения стали натянутыми. Мистер Дойл послал несколько писем, пробуя уладить дело, и хотя У. А. П. посылал ему учтивые ответы, он больше не относился к мистеру Дойлу с прежней теплотой». Возможно, у Пинкертона был еще один повод для недовольства: наверное, он счел, что в первой части повести Дойл использовал уже его собственный труд — брошюру 1904 года «Адам Уорт по прозвищу Маленький Адам», в которой излагалась история Уорта.

Действительно, в «Долине страха» Конан Дойл опять прибегает к истории Адама Уорта (к эпизоду с кражей картины Гейнсборо) — в разговоре сыщика с инспектором Макдоналдом о профессоре Мориарти. Холмс спрашивает полицейского, заметил ли он картину Жана Батиста Грёза, висевшую в кабинете профессора. В ответ на недоумение инспектора по поводу того, как связано дело, которое они обсуждают, с картиной, Холмс сообщает следующее:

Даже такой прозаический факт, что в 1865 году картина Грёза «Девушка с ягненком» была продана на аукционе Портали за один миллион двести тысяч франков (что равняется более чем сорока тысячам фунтов), может подтолкнуть ваши мысли в новом направлении