要制作奶油糖霜纸杯蛋糕，首先准备低筋面粉、泡打粉和苏打粉，过筛后备用。

接着，将黄油在室温下软化，分次加入红砂糖，用打蛋器轻轻搅拌至黄油变光滑，颜色略微发白，体积有所膨胀。

随后，逐步加入打散的鸡蛋液，每次都要确保鸡蛋和黄油完全融合后才添加下一次，直到面糊变得细腻且光滑，无蛋油分离现象。

加入过筛的牛奶和面粉，用橡皮刮刀轻轻翻拌，直到面糊均匀无颗粒。将这个面糊倒入已经准备好的纸杯，填充至7-8成满。

然后将烤箱预热至适宜温度，将装满面糊的纸杯放入中层，上下火烤焙大约15-20分钟，直到蛋糕完全熟透。

制作奶油糖霜时，黄油同样在室温下软化，用搅拌器打发至颜色变白、表面光滑，体积稍微膨胀。接着，加入过筛的糖粉，先用低速混合，再调至中速打发至均匀。最后，加入奶油，搅拌均匀，并根据需要挤入不同颜色的食用色素，调制成多彩的奶油糖霜。

将调好的奶油糖霜装入裱花袋，挤在冷却的纸杯蛋糕表面，撒上棉花糖和软糖，你的美味纸杯蛋糕就完成了。