南アフリカをレンタカーでゴルフ旅行する際の注意点は？

ネットの情報などで南アフリカではゴルフが身近なスポーツでゴルフ場も多く、料金も安く、一部で「ゴルフ天国」などと言われていると知りました。
それで年末年始にかけて家族３人（夫婦、中学３年生の息子）で、南アフリカをレンタカーを借りて２～３週間旅行することを考えています。
ヨハネスブルグの空港でレンタカーを借り、ゴルフをしながら周辺の観光も多少する予定です。
これまでにオーストラリア、ニュージーランド、カナダ、米国、マレーシア等を１０回程度同じようにレンタカーで２～３週間旅行した経験があります。
ですから海外は慣れている方です。（英語は片言です。）
ただ、南アフリカの治安がかなり悪いと言われているのが気がかりです。
アジア人３人が持参しているキャディバッグを駐車場などで積み下ろしている姿はかなり目立つとは思います。

こうした計画は無謀なものでしょうか、あるいはしっかりと用心しながらならばあまり心配する必要はないのでしょうか？
もちろん最後の判断は自分でしますが、南アフリカ在住者に参考となるご意見を聞かせていただきたく投稿しました。
よろしくお願いします。