論文読み CLIPasso まとめ
hirohirohirohiros.hatenablog.com
どんなもの？
CLIPを利用して画像のスケッチを生成する．
先行研究と比べどこが凄い？
先行研究ではスケッチ画像の抽象度の高さは教師画像の抽象度に依存していた．CLIPassoはスケッチの線の本数を変えることで抽象度を変更することが出来る．
技術や手法のキモはどこ？
スケッチ画像と元画像を両方CLIPに通し，パラメータの差が0になるように線の位置を学習する．
どうやって有効だと検証した？
参加者にスケッチ画像を見せ何が書かれてるのか正しく当てる事が出来る．ResNetにスケッチ画像を見せて正しく分類している．
議論はある？
背景があると上手く行かない．抽象度は線の本数をあらかじめ固定することによって決める．画像により抽象度に必要な本数が異なる可能性に対応出来ていない．
