Appleが、サポート情報「Set up and use HomeKit-enabled accessories with your iPhone, iPad, and iPod touch」を公開し、HomeKitアクセサリーを外出先からリモートコントロールする場合、Apple TV (3rd generation)以降で、Apple TV ソフトウェア 7.0以降が必要だと説明しています。

HomeKitアクセサリーは、Bluetooth接続でも利用出来ますが、外出先からリモート制御を行なう場合は、Wi-Fi接続である必要があり、そのネットワーク内に、リモートコントロールするiPhone/iPadと同じApple IDが設定されている必要があるそうです。

なお、Siriでのコントロールの場合、ドアの解錠は出来ないなどの制限があるそうです。

この仕様だと、家族のうち１人しか外出先からリモートコントロール出来ないようです。

関連エントリー
・Elgato、SDI Technologies、Lutron Electronics、Insteon、ecobeeなどが、HomeKit対応アクセサリーを発売
・Re/code：AppleのHomeKit対応アクセサリーは春以降から徐々に発売される予定
・CES2015：iDevices、HomeKit に対応した電源タップ型スイッチ「iDevices Switch」を展示