回答者のIPアドレスを取得することはできますか？

出来ます。

「kintoneアプリ」>「kintoneアプリの保存先フィールド」より、「保存先フィールドの設定を追加」を押下すると
プルダウンより「回答者のIPアドレス」や「回答者のOS」などを取得することが可能です。
kintone側で、それらを格納するフィールドを予めご用意し、ご利用ください。

なお、こちらを設定する以前のIPアドレスを確認することはできかねます。
弊社にて確認・ご提供を行うこともできかねますので、予めご了承ください。