自分も気になっていました。なのでよく知らないうちはあまり使わない方が無難かと思い、kiwi と言いたい時は New Zealander に置き換えるようにしています。こっちのメディア（新聞、TV、雑誌の広告など）では普通に Kiwi が使われてるので、現地人が自分自身を言う分には問題ない（＝Nみたいな蔑視表現ではない）んでしょうね。つまり使い方に愛着が込められてるかどうかじゃないかと。そういう意味では、蛇足ですが、You Kiwiという言い方は寄り添ってない感じがするので使わない方が良いような気がします。