传闻安以轩家庭背景很硬，黑白两道通吃。
对于自己黑帮公主的身份，安以轩没有承认，只是说家里主业是搞军用纺织品，爸爸是开保全公司的。
她爸爸的公司有多厉害？就是整个台北101的保全都是安的爸爸的公司负责“而已”。
奶奶是台北东区大地主，也是传说中的“东区吴妈妈”，是不少知名餐厅的老房东，躺着就能赚钱就是形容安以轩没错了。
姑姑这代更是台北忠孝东路四段的茶街一姐，安以轩跟着姑姑学了不少生意经，自己的安氏企业搞得风生水起。
然而早有台湾综艺已经爆料她家黑白通吃，拍摄《斗鱼》时郭品超和安以轩传出绯闻，安的爸爸立刻放狠话，说如果绯闻是真的他找人打断郭的腿。
加上一些采访片段，让安以轩的黑道背景再添石锤。比如安以轩和郭品超参加节目《国光帮帮忙》，坦言自己还是新人的时候曾在片场受欺负。
庹宗康很自然就说：谁要欺负你，会遭报应吧，会被打断双腿躺医院。
打断双腿已经很夸张了，随后郭品超还补了一句说：搞不好直接就不在了。
安以轩黑帮公主的身份怕是圈内人尽皆知的了。
有了家族背景的支撑，安以轩在圈中人脉甚广。她的闺蜜无论歌手还是演员都有，诸如大S、陈乔恩、董璇、李小璐、弦子等，还和夏于乔、Linda（廖语晴）、陈乔恩、白歆惠、刘品言等建立了安氏企业，风头不输王菲的六年一班、大小S的S姐妹淘、蔡依林的蔡帮。
不知道是娱乐圈的友情太脆弱，还是黑道千金难交友，安以轩的所谓闺蜜似乎经不起推敲。
大S曾对安以轩横刀夺爱。当时安以轩正暗恋汪小菲，于是在自己的生日派对上邀请他一起庆祝，闺蜜大S自然也会到场，没想到两人一见钟情，认识仅仅21天就结婚了。
安以轩和大S因此心生嫌隙，在大S汪小菲闪婚之际，安以轩在媒体面前公开质问大S，是把自己当“红娘？情敌？”
