史密斯还测量了小岛的位置。经过一系列复杂的计算，他推算出，小岛的纬度在南纬37°左右，经度在西经152°左右。小岛离美国西海岸至少有七千千米，距最近的岛也有将近两千千米。
到了隆冬季节，他们决定找一个比“石窟”更舒服、更安全的地方住下来。于是，他们用自制的炸药炸开了下面山洞的石壁，让山洞里的湖水从石壁的缺口处流出。然后，他们走进洞里，布置起新居——“花岗石宫”。他们把“石宫”的右面分成几间小屋，在迎面的石壁上凿开几扇窗口和一道门，另外又开了一扇向外凸出的大窗和几个椭圆形的小孔。因为“石宫”的入口在高地的半山腰间，因此，他们又做了一道绳梯，供人进出，并在门上拴了一个滑轮，充当运输重物的工具。一切布置收拾停当，他们又在“石宫”里储藏了大量的食品。
荒岛的6月好像北半球的12月，寒冷夹着暴风雨向他们袭来，他们却在“花岗石宫”里平安无事。但新的事情发生了。这年10月，他们像往常一样，到岛上去打猎，看看岛上其余还没有去过的地方。10月24日夜晚，他们在“花岗石宫”的“餐厅”里吃饭时，潘克洛夫突然大叫一声，他的一颗牙齿在吃烤小猪时崩掉了。他伸手从嘴里拿出了一个硬物——铅弹。
