2022/8/7 紀錄
text
最佳化實在是一個難以理解的領域,跟類神經網路結合後就更糟糕了,可能之前還有問題的部分默默的就收斂的很好了,也可能突然就給你很差的結果
而隨著對這個領域稍微有點概念後,又多了許多想法
- noise 對於神經網路的影響到底是甚麼 ?
- 在 generator 的眼中 noise 要擔任的工作是建構基礎風格 ?
- noise 的相鄰數值之前是否有著高相關性 ?
如果不解決這些問題想要做最佳化就只能跟 RL 一樣決定好目標硬跑下去,當然目標是否具有足夠強的決定性也是一個大問題就是了