隋文帝杨坚从小被僧人抚养
我是学历史学出身的，我来说一下自己的看法吧！ 首先，根据史书的记载，杨坚的出身确实非常卑贱，连个姓都没有，用名字称呼他的时候都要加上一个“无”字（如杨无既）。但是，我们翻阅史书时会发现一个问题，就是关于杨坚的这段记载似乎出现了歧异——在《隋书·卷二》中，记述此事的言辞是“其先汉太保冯平之裔也。父和，周上柱国、随国公。母赵，隋朝太祖高祖元贞皇后之一。”而在《北史·卷十八》中载，杨坚的父亲叫做杨忠……这问题可就大了，如果杨坚的父辈是随国公的话，那他就是随国公的孩子；可是如果他的父亲是柱国大将军杨忠的话，那他是柱国大将军杨忠之子。
这两种说法明显是矛盾的，那么问题出在哪里呢？我想可能是两种记载分别以杨坚父亲任官最高和最显赫的时候来作为标识，而杨坚父亲的官职和爵位不是一成不变的，所以导致了一些记录上的纰漏。我个人比较倾向于是后一种情况，原因如下：第一，这种错误只是官职与爵位的记录颠倒了，其他内容都是正确的；第二，这种错乱只出现在杨坚这一支的纪传当中，其他章节的内容都是正确的。第三，这种错乱的记载出现的时间点不太合适，因为这两种记载都出现在同一章节之下，如果是作者或编者偷懒话，应该整段抄录，不会出现时间差的问题。所以应该是作者查阅资料时不小心搞错了。这个问题也不难解决，只要把《隋书》与《北史》对照着看就明白了。
现在来说说题主提到的“养父母”的问题。我觉得这可能又是史料记载的问题。按照正史的记载，杨坚幼年失恃，由伯父杨烈抚养。但是在隋文帝开皇九年（公元589年）时，杨坚却以皇帝的身份回到他的老家弘农郡华阴县，为他死了的老爹修筑了一座庙宇，命名为“世阐”。这座庙宇在历史上确有其事，而且规模也很大。
那么问题就来了，按说杨坚少年时代应该是由伯父一家抚养的，但是他在晚年时却为去世多年的父亲建立庙宇，这中间缺了一个给伯父养老送终的过程，这个空缺怎么填补呢？我觉得可能正史的记载出了误差，杨坚其实是承继了母亲的姓氏——“弘农尹氏”。他很可能由母亲一方亲人抚养，到了年纪后才改姓杨，这样他就可以名正言顺地为自己的父亲立庙了。（当然，这种补充可能还是多余，因为这刚好可以解释为什么没有记载伯父家对杨坚的养育之恩。）