回答者のIPアドレスを取得することはできますか？

可能です。

フォームの設定画面内 回答保存プロセス >『kintoneアプリへの保存』にて、［＋フィールドを追加］をクリックすると、プルダウンより「回答者のIPアドレス」や「回答者のOS」などを取得することができます。
kintoneアプリ側で、それらを格納するフィールドを予め用意してご利用ください。

なお、上記設定前に回答されたデータの、回答者のIPアドレスを確認することはできません。