星系多波段图像也能合成新视角:GalaxyGS把恒星、尘埃与消光拆成三个高斯场
核心概要
星系观测给出的是多波段图像,恒星与尘埃的辐射叠加在一起,光在非均匀介质中传播,直接套用面向RGB的3D高斯泼溅难以同时还原外观与物理量。GalaxyGS把恒星辐射、尘埃消光与尘埃再辐射拆成三个高斯场,用恒星光谱与参考图像的主成分基约束各场的跨波段取值,再分阶段训练以抑制辐射与消光互相补偿。在Auriga与TNG50两组模拟星系数据上,它与六种改造后的相关方法比较,在所有指标上取得最低平均误差,物理保真度指标的改善幅度大于视觉相似度指标。
深度剖析
星系的多波段新视角合成有了一个把辐射与消光分开建模的高斯泼溅工具,输出的是与观测同物理单位的多波段图像,而不只是看起来像的彩色图。 此前的3D高斯泼溅及其光谱扩展主要面向可见光或热成像数据,很少显式区分恒星与尘埃这两种发射机制,也常把传播过程简化掉。 在Auriga与TNG50两组模拟星系数据上,与六种为星系数据改造的相关方法比较,GalaxyGS在所有指标上取得最低平均误差,且物理保真度指标的领先幅度大于视觉相似度指标。
模型把星系拆成恒星辐射场、尘埃消光场和尘埃辐射场三个高斯场,消光场不发光,只按光学深度削弱前方恒星的光。 三个场各自学习容易互相补偿,即用更强的消光抵消更强的辐射,仍能拟合图像却失去物理含义。 训练分三阶段:先分别拟合恒星场与尘埃场,再固定恒星场、只学消光的光学深度,最后联合微调;同时训练全部场的变体误差明显高于分阶段训练。
各场的跨波段取值被约束在由主成分分析得到的基所张成的空间里,恒星基来自不同年龄与金属度的恒星光谱,尘埃基来自数据之外参考图像的像素。 若让每个高斯在每个波段独立学习非负强度,理论上可以表示同样的场,但实际训练会落入更多局部极小。 去掉主成分约束、改为逐波段独立学习的恒星与尘埃变体,误差都高于完整模型,物理保真度相关指标差距更明显。
启示与展望
演示范围是Auriga与TNG50两组模拟星系数据:Auriga取十个星系、每个17个视角,其中14个用于训练、3个用于测试,每视角50个波段;TNG50取十个星系、每个14个视角,11个训练、3个测试,每视角27个波段且全部落在紫外到近红外组。
模型没有显式把尘埃吸收的星光与其红外再辐射联系起来,因此吸收与发射之间的能量关系并未闭合。重建需要同一星系的多视角图像来约束三维结构,单方向观测的星系尚不适用。作者把耦合尘埃吸收与发射、以及引入结构先验以支持单视角重建列为后续工作。
