Skip to content

知らない分野を、原文にたどりつくまで芋づる式に掘る Claude Code のスキル

Python

fetch・watch: つなぐ直前に引き直した IP を確かめ、その IP へじかにつなぐ(DNS rebinding)

Akiraa1afbe07023b
diff --git a/skills/imozuru/scripts/fetch.py b/skills/imozuru/scripts/fetch.py
index 4dfb893..6b4512a 100755
--- a/skills/imozuru/scripts/fetch.py
+++ b/skills/imozuru/scripts/fetch.py
@@ -17,6 +17,7 @@
"""
import codecs
+import http.client
import ipaddress
import os
import re
@@ -94,16 +95,84 @@ class _Redirect308(urllib.request.HTTPRedirectHandler):
return super().redirect_request(req, fp, 307 if code == 308 else code, msg, headers, newurl)
-_OPENER = urllib.request.build_opener(_Redirect308)
+def _dial(ip: str, port: int, timeout, source_address):
+ """確かめた IP へつなぐ。テストはここを差し替える。"""
+ return socket.create_connection((ip, port), timeout, source_address)
+
+
+def _pinned_connection(host: str, port: int, timeout, source_address):
+ """つなぐ直前に名前を引き直し、確かめた IP へそのままつなぐ。
+
+ url_problem で名前を引いてから urllib がつなぐまでの間に、引き先を 127.0.0.1 などへ
+ 変えられると検査をすり抜ける(DNS rebinding)。つなぐ時に引いた結果をもう一度確かめ、
+ その IP にじかにつなぐので、検査した宛先と実際の宛先がずれない。HTTPS の証明書の確認と
+ SNI はホスト名のまま行われる(2026-10-22 手元で追加)。
+ """
+ try:
+ addrs = list(resolve(host))
+ except (OSError, UnicodeError, ValueError) as e:
+ raise UnsafeURL(f"ホストを引けない({e})")
+ if os.environ.get("IMOZURU_ALLOW_PRIVATE") != "1":
+ for addr in addrs:
+ for ip in _addresses_inside(ipaddress.ip_address(addr.split("%", 1)[0])):
+ if not ip.is_global:
+ raise UnsafeURL(f"つなぐ直前に引いた先が手元や内側の宛先({ip})だった")
+ err = None
+ for addr in addrs:
+ try:
+ return _dial(addr, port, timeout, source_address)
+ except OSError as e:
+ err = e
+ raise err or OSError(f"{host} の宛先が無い")
+
+
+class _PinnedMixin:
+ """接続を _pinned_connection で作る。プロキシを通すとき(CONNECT)はプロキシへ素直につなぐ。"""
+
+ def __init__(self, *args, **kwargs):
+ super().__init__(*args, **kwargs)
+ self._create_connection = self._pinned_create
+
+ def _pinned_create(self, address, timeout=socket._GLOBAL_DEFAULT_TIMEOUT, source_address=None):
+ if self._tunnel_host:
+ return socket.create_connection(address, timeout, source_address)
+ return _pinned_connection(address[0], address[1], timeout, source_address)
+
+
+class _PinnedHTTPConnection(_PinnedMixin, http.client.HTTPConnection):
+ pass
+
+
+class _PinnedHTTPSConnection(_PinnedMixin, http.client.HTTPSConnection):
+ pass
+
+
+class _PinnedHTTPHandler(urllib.request.HTTPHandler):
+ def http_open(self, req):
+ return self.do_open(_PinnedHTTPConnection, req)
+
+
+class _PinnedHTTPSHandler(urllib.request.HTTPSHandler):
+ def https_open(self, req):
+ kwargs = {"context": self._context}
+ if hasattr(self, "_check_hostname"): # 3.11 まで
+ kwargs["check_hostname"] = self._check_hostname
+ return self.do_open(_PinnedHTTPSConnection, req, **kwargs)
+
+
+_OPENER = urllib.request.build_opener(_Redirect308, _PinnedHTTPHandler, _PinnedHTTPSHandler)
class UnsafeURL(Exception):
"""取りに行ってはいけない URL。呼び手はほかの取得の失敗と同じく FAIL にする。"""
-def resolve(host: str) -> set[str]:
- """ホスト名を引いて IP アドレスの集まりを返す。テストはここを差し替える。"""
- return {info[4][0] for info in socket.getaddrinfo(host, None)}
+def resolve(host: str) -> list[str]:
+ """ホスト名を引いて IP アドレスを返す。テストはここを差し替える。
+
+ OS が返した順(IPv6 と IPv4 のどちらを先に試すか)を保つ。_pinned_connection はこの順につなぐ。
+ """
+ return list(dict.fromkeys(info[4][0] for info in socket.getaddrinfo(host, None)))
def url_problem(url: str) -> str | None:
@@ -113,7 +182,8 @@ def url_problem(url: str) -> str | None:
手元で動いているサービス(開発用のサーバー・ローカルの AI・ブラウザのデバッグ口)の中身を
sources/ に写してしまう(2026-10-20 のレビュー)。名前を引いた先が全部インターネット上の
宛先のときだけ通す。10進や16進で書いた IP も、名前を引けば 127.0.0.1 などになるので同じく止まる。
- 名前を引いてから接続するまでの間に引き先を変える手(DNS rebinding)は防げない。
+ 名前を引いてから接続するまでの間に引き先を変える手(DNS rebinding)は、_pinned_connection が
+ つなぐ直前に引き直して確かめた IP へじかにつなぐことで防ぐ。
ホストの部分に「@」か「%」があれば断る。urlsplit は「[email protected]」の a.example を見るが、
urllib は [email protected] をそのまま引き、「%61」は urllib だけが a に戻す。検査とつなぐ先がずれる。
diff --git a/skills/imozuru/scripts/watch.py b/skills/imozuru/scripts/watch.py
index db52a30..16a1185 100644
--- a/skills/imozuru/scripts/watch.py
+++ b/skills/imozuru/scripts/watch.py
@@ -27,6 +27,7 @@ import codecs
import datetime as dt
import email.utils
import html
+import http.client
import ipaddress
import json
import os
@@ -50,7 +51,7 @@ SEEN_LIMIT = 500
# フィードやページの大きさの上限。ふつうのフィードは数百 KB に収まる。
MAX_BYTES = 5_000_000
-# ここから UnsafeURL・resolve・url_problem・_Redirect308 までは fetch.py と同じもの。
+# ここから UnsafeURL・resolve・url_problem・_Redirect308・_pinned_connection と接続の差し替えまでは fetch.py と同じもの。
# -I で動かすとスクリプトの置き場が import の道に入らない(3.11 から -I は -P を含む)ので、写して持つ。
# 直すときは両方を直す。
@@ -59,9 +60,12 @@ class UnsafeURL(Exception):
"""取りに行ってはいけない URL。"""
-def resolve(host: str) -> set[str]:
- """ホスト名を引いて IP アドレスの集まりを返す。テストはここを差し替える。"""
- return {info[4][0] for info in socket.getaddrinfo(host, None)}
+def resolve(host: str) -> list[str]:
+ """ホスト名を引いて IP アドレスを返す。テストはここを差し替える。
+
+ OS が返した順(IPv6 と IPv4 のどちらを先に試すか)を保つ。_pinned_connection はこの順につなぐ。
+ """
+ return list(dict.fromkeys(info[4][0] for info in socket.getaddrinfo(host, None)))
def url_problem(url: str) -> str | None:
@@ -71,7 +75,8 @@ def url_problem(url: str) -> str | None:
手元で動いているサービス(開発用のサーバー・ローカルの AI・ブラウザのデバッグ口)の中身を
sources/ に写してしまう(2026-10-20 のレビュー)。名前を引いた先が全部インターネット上の
宛先のときだけ通す。10進や16進で書いた IP も、名前を引けば 127.0.0.1 などになるので同じく止まる。
- 名前を引いてから接続するまでの間に引き先を変える手(DNS rebinding)は防げない。
+ 名前を引いてから接続するまでの間に引き先を変える手(DNS rebinding)は、_pinned_connection が
+ つなぐ直前に引き直して確かめた IP へじかにつなぐことで防ぐ。
ホストの部分に「@」か「%」があれば断る。urlsplit は「[email protected]」の a.example を見るが、
urllib は [email protected] をそのまま引き、「%61」は urllib だけが a に戻す。検査とつなぐ先がずれる。
@@ -138,7 +143,72 @@ class _Redirect308(urllib.request.HTTPRedirectHandler):
return super().redirect_request(req, fp, 307 if code == 308 else code, msg, headers, newurl)
-_OPENER = urllib.request.build_opener(_Redirect308)
+def _dial(ip: str, port: int, timeout, source_address):
+ """確かめた IP へつなぐ。テストはここを差し替える。"""
+ return socket.create_connection((ip, port), timeout, source_address)
+
+
+def _pinned_connection(host: str, port: int, timeout, source_address):
+ """つなぐ直前に名前を引き直し、確かめた IP へそのままつなぐ。
+
+ url_problem で名前を引いてから urllib がつなぐまでの間に、引き先を 127.0.0.1 などへ
+ 変えられると検査をすり抜ける(DNS rebinding)。つなぐ時に引いた結果をもう一度確かめ、
+ その IP にじかにつなぐので、検査した宛先と実際の宛先がずれない。HTTPS の証明書の確認と
+ SNI はホスト名のまま行われる(2026-10-22 手元で追加)。
+ """
+ try:
+ addrs = list(resolve(host))
+ except (OSError, UnicodeError, ValueError) as e:
+ raise UnsafeURL(f"ホストを引けない({e})")
+ if os.environ.get("IMOZURU_ALLOW_PRIVATE") != "1":
+ for addr in addrs:
+ for ip in _addresses_inside(ipaddress.ip_address(addr.split("%", 1)[0])):
+ if not ip.is_global:
+ raise UnsafeURL(f"つなぐ直前に引いた先が手元や内側の宛先({ip})だった")
+ err = None
+ for addr in addrs:
+ try:
+ return _dial(addr, port, timeout, source_address)
+ except OSError as e:
+ err = e
+ raise err or OSError(f"{host} の宛先が無い")
+
+
+class _PinnedMixin:
+ """接続を _pinned_connection で作る。プロキシを通すとき(CONNECT)はプロキシへ素直につなぐ。"""
+
+ def __init__(self, *args, **kwargs):
+ super().__init__(*args, **kwargs)
+ self._create_connection = self._pinned_create
+
+ def _pinned_create(self, address, timeout=socket._GLOBAL_DEFAULT_TIMEOUT, source_address=None):
+ if self._tunnel_host:
+ return socket.create_connection(address, timeout, source_address)
+ return _pinned_connection(address[0], address[1], timeout, source_address)
+
+
+class _PinnedHTTPConnection(_PinnedMixin, http.client.HTTPConnection):
+ pass
+
+
+class _PinnedHTTPSConnection(_PinnedMixin, http.client.HTTPSConnection):
+ pass
+
+
+class _PinnedHTTPHandler(urllib.request.HTTPHandler):
+ def http_open(self, req):
+ return self.do_open(_PinnedHTTPConnection, req)
+
+
+class _PinnedHTTPSHandler(urllib.request.HTTPSHandler):
+ def https_open(self, req):
+ kwargs = {"context": self._context}
+ if hasattr(self, "_check_hostname"): # 3.11 まで
+ kwargs["check_hostname"] = self._check_hostname
+ return self.do_open(_PinnedHTTPSConnection, req, **kwargs)
+
+
+_OPENER = urllib.request.build_opener(_Redirect308, _PinnedHTTPHandler, _PinnedHTTPSHandler)
def fetch_final(url: str) -> tuple[bytes, str, str]:
diff --git a/tests/test_portability.py b/tests/test_portability.py
index 28e9986..c514a93 100644
--- a/tests/test_portability.py
+++ b/tests/test_portability.py
@@ -32,6 +32,10 @@ watch = load("watch")
# テストの宛先(example.test と手元の小さなサーバー)を、インターネット上の宛先に引けたことにする。
# 引いた結果を確かめるだけで、接続は urllib が別に名前を引いて行うので、手元のサーバーにつながる
fetch.resolve = watch.resolve = lambda host: {"93.184.215.14"}
+# _pinned_connection は引いた IP へじかにつなぐので、見せかけの IP は手元のサーバーへ回す
+import socket as _socket
+fetch._dial = watch._dial = lambda ip, port, timeout, src: _socket.create_connection(
+ ("127.0.0.1" if ip == "93.184.215.14" else ip, port), timeout, src)
class EncodingTests(unittest.TestCase):
diff --git a/tests/test_security.py b/tests/test_security.py
index aa1c15b..54d9e6b 100644
--- a/tests/test_security.py
+++ b/tests/test_security.py
@@ -46,6 +46,12 @@ def public_localhost(host):
return {PUBLIC_IP} if host == "localhost" else REAL_RESOLVE(host)
+def dial_public_as_local(ip, port, timeout, source_address):
+ """見せかけの PUBLIC_IP へのつなぎを手元のサーバーへ回す(_pinned_connection は引いた IP へじかにつなぐ)。"""
+ import socket
+ return socket.create_connection(("127.0.0.1" if ip == PUBLIC_IP else ip, port), timeout, source_address)
+
+
class _Server(http.server.BaseHTTPRequestHandler):
def do_GET(self):
if self.path == "/to-private":
@@ -77,6 +83,18 @@ class UnsafeUrlTests(unittest.TestCase):
self.addCleanup(self.server.server_close)
self.addCleanup(self.server.shutdown)
self.base = f"http://localhost:{self.server.server_port}"
+ for module in (fetch, watch):
+ dial = patch.object(module, "_dial", dial_public_as_local, create=True)
+ dial.start()
+ self.addCleanup(dial.stop)
+
+ def test_dns_rebinding_between_check_and_connect_is_refused(self):
+ """検査の時は外の IP、つなぐ時は 127.0.0.1 を返す名前(DNS rebinding)を断る。"""
+ for module in (fetch, watch):
+ answers = iter([{PUBLIC_IP}, {"127.0.0.1"}])
+ with patch.object(module, "resolve", lambda host: next(answers)), self.subTest(module=module.__name__):
+ with self.assertRaises(module.UnsafeURL):
+ (module.download if module is fetch else module.fetch)(f"{self.base}/ok")
def test_private_addresses_are_refused(self):
for url in ("http://127.0.0.1:8080/", "http://[::1]/", "http://[::ffff:127.0.0.1]/",