The air from outside blew frostily through the open window.

frostily 是形容词 frosty 的副词形式。frosty 来自名词 frost（霜冻），意思是"结霜的、冰冷的"。加后缀 -ly 变成副词后，表示"冰冷地、刺骨地"，形容寒风刺骨的感觉。