《诗经》中描绘美丽清冷女子的词语及出处如下：

一、直接描写外貌气质

瑶台：

比喻美好高洁的居所，也借指美女，如“云想衣裳花想容，春风拂槛露华浓。若非群玉山头见，会向瑶台月下逢。”（李白《清平调词三首》）

清露：

象征纯洁与清冷，如“素衣莫起风尘叹，犹及清明可到家。”（杜甫《佳人》）

素衣：

白衣，代表清冷脱俗，如“素衣莫起风尘叹，犹及清明可到家。”（杜甫《佳人》）

云想衣裳花想容：

以云、花喻指女子的容貌，如“云想衣裳花想容，春风拂槛露华浓。”（李白《清平调词三首》）

二、通过行为神态刻画

静女其姝：

出自《静女》，形容女子娴静美好，“静女其姝，俟我于城隅。”（佚名）

搔首踟蹰：

表现女子等待时的焦急与羞涩，“爱而不见，搔首踟蹰。”（佚名）

巧笑倩兮：

以笑容比喻美貌，如“巧笑倩兮，美目盼兮。”（《楚辞·九歌·东皇太一》）

三、环境烘托类

月出/月落：

常与美人相伴，如“月出来兮高楼上，人约黄昏后。”（佚名）

水边/荷叶：

营造清冷意境，如“荷叶罗裙一色裁，芙蓉向脸两边开。”（李白《采莲曲》）

四、其他相关词语

素霓：如“体若游龙，袖如素霓。”（傅毅《舞赋》）

含贝：形容牙齿洁白，如“齿如含贝。”（王昌龄《西宫秋怨》）

这些词语通过不同角度展现了《诗经》中女子的清冷之美，既有直接的外貌描写，也包含行为神态与环境的烘托。