顾炎武确实有记载为生来双瞳的描述，但需结合权威性和时效性综合判断：

权威记载依据

《清史稿·顾炎武传》明确记载：“顾炎武，生而双瞳，中白边黑。读书目十行下。”这是目前最直接、权威的历史文献佐证。

其他相关传说与描述

- 香港民间传说称其双瞳可捉鬼魂，类似道士黄初平的“巫之眼”；

- 部分资料提到他幼年因痘疹导致左眼视力受损，但未否定其天生双瞳的记载。

历史争议与补充说明

- 部分低权威性资料提到其他历史人物（如李煜、仓颉等）也有“双瞳”描述，但缺乏权威文献佐证；

- 现代医学角度，双瞳在人类中极为罕见，但古代文献多以神话或传说形式记载此类特征。

综上，顾炎武生来双瞳的描述以《清史稿》为最可靠依据，其他说法多源于民间传说或补充性记载。