进整整一艘诺亚方舟，并且能随意地从动物的灰烬中唤起它完好时的模样；而通过相似的方法利用人类灰烬中的精盐，一个哲人或许能够，在不借助任何罪恶的死灵巫术的情况下，在尸体被焚化的地方从灰烬中召唤出任何一位死去的祖先的模样。”
不过，在所有与约瑟夫·柯温有关的传说中，最为糟糕可怕的还是那些生活在镇中大街南部、码头附近的人们口中所咕哝的闲言碎语。水手都是些迷信的人；不管是那些满载着朗姆酒、奴隶与糖蜜的单桅纵帆船上的老道水手，还是那些私掠船上的放荡海盗，或者布朗家族、克劳福特家族以及蒂林哈斯特家族的双桅大帆船上的海员，只要有人看见那个顶着一头金发、略有些驼背、看似年轻的瘦削身影走进多布隆街上属于柯温的仓库，或是站在柯温的商船频繁往返的长码头上与船长及押运人交谈，他们就会偷偷做出奇怪的手势来保护自己。就连柯温自己的雇员和船长也对他又恨又怕，而他所有的水手都是些从马提尼克岛、圣尤斯特歇斯、哈瓦那和罗亚尔港召来的杂种贱民。这些水手总是频繁地被新的船员替换掉，从某种方面来说，也造就了人们对于这个老人最强烈，也是最实际有形的恐惧。在获准离船的假期里，这些海员们往往会一哄而散，其中一些船员有时也会被指派上各式各样的差事；而当他们再度集合起来的时候，几乎一定会少上一两个人。而柯温指派给他们的许多差事大多与波塔克西特路上的农场有关，而很多人都记得，再也没有人看见其中的一小部分水手从那个地方折返回来；因此，渐渐地柯温开始很难再招揽到足够的、组成混杂到有些古怪的手下。只要船员们在普罗维登斯的码头上听说过这些流言蜚语，很快便会出现几个擅离职守的逃跑者，而对于这个神秘的商人来说，想在西印度群岛再招募到人手填补上空缺已经变得越来越困难了。
等到1760年，约瑟夫·柯温实际上已经被人们驱逐了。人们怀疑他与某些含混不清的恐怖有关，又或者有着魔鬼的同盟，而由于他们无法言说、理解，甚至无法证明这些事情，所以这一切反而显得更加险恶恐怖了。而造就这一切的最后一根稻草或许与1758年那些失踪的士兵有关。那年三月到四月间，有两个皇家步兵团被调派到了新法兰西。他们经过普罗维登斯的时候被分成了四支队伍，然后在经历过一个不可思议的过程后，这支军队因为远远超过正常水平的逃兵率而迅速溃散了。根据谣言的详细描述，当时的人们经常看见柯温与那些穿着红色制服的陌生人交谈；然后当有些人莫名其妙地失踪之后，人们想到了那些发生在柯温的水手身上的事情。如果军队没有接到命令继续前进
