知らない分野を、原文にたどりつくまで芋づる式に掘る Claude Code のスキル
Python
fetch・watch: つなぐ直前に引き直した IP を確かめ、その IP へじかにつなぐ(DNS rebinding)
Akiraa1afbe07023b
diff --git a/skills/imozuru/scripts/fetch.py b/skills/imozuru/scripts/fetch.pyindex 4dfb893..6b4512a 100755--- a/skills/imozuru/scripts/fetch.py+++ b/skills/imozuru/scripts/fetch.py@@ -17,6 +17,7 @@"""import codecs+import http.clientimport ipaddressimport osimport re@@ -94,16 +95,84 @@ class _Redirect308(urllib.request.HTTPRedirectHandler):return super().redirect_request(req, fp, 307 if code == 308 else code, msg, headers, newurl)-_OPENER = urllib.request.build_opener(_Redirect308)+def _dial(ip: str, port: int, timeout, source_address):+ """確かめた IP へつなぐ。テストはここを差し替える。"""+ return socket.create_connection((ip, port), timeout, source_address)+++def _pinned_connection(host: str, port: int, timeout, source_address):+ """つなぐ直前に名前を引き直し、確かめた IP へそのままつなぐ。++ url_problem で名前を引いてから urllib がつなぐまでの間に、引き先を 127.0.0.1 などへ+ 変えられると検査をすり抜ける(DNS rebinding)。つなぐ時に引いた結果をもう一度確かめ、+ その IP にじかにつなぐので、検査した宛先と実際の宛先がずれない。HTTPS の証明書の確認と+ SNI はホスト名のまま行われる(2026-10-22 手元で追加)。+ """+ try:+ addrs = list(resolve(host))+ except (OSError, UnicodeError, ValueError) as e:+ raise UnsafeURL(f"ホストを引けない({e})")+ if os.environ.get("IMOZURU_ALLOW_PRIVATE") != "1":+ for addr in addrs:+ for ip in _addresses_inside(ipaddress.ip_address(addr.split("%", 1)[0])):+ if not ip.is_global:+ raise UnsafeURL(f"つなぐ直前に引いた先が手元や内側の宛先({ip})だった")+ err = None+ for addr in addrs:+ try:+ return _dial(addr, port, timeout, source_address)+ except OSError as e:+ err = e+ raise err or OSError(f"{host} の宛先が無い")+++class _PinnedMixin:+ """接続を _pinned_connection で作る。プロキシを通すとき(CONNECT)はプロキシへ素直につなぐ。"""++ def __init__(self, *args, **kwargs):+ super().__init__(*args, **kwargs)+ self._create_connection = self._pinned_create++ def _pinned_create(self, address, timeout=socket._GLOBAL_DEFAULT_TIMEOUT, source_address=None):+ if self._tunnel_host:+ return socket.create_connection(address, timeout, source_address)+ return _pinned_connection(address[0], address[1], timeout, source_address)+++class _PinnedHTTPConnection(_PinnedMixin, http.client.HTTPConnection):+ pass+++class _PinnedHTTPSConnection(_PinnedMixin, http.client.HTTPSConnection):+ pass+++class _PinnedHTTPHandler(urllib.request.HTTPHandler):+ def http_open(self, req):+ return self.do_open(_PinnedHTTPConnection, req)+++class _PinnedHTTPSHandler(urllib.request.HTTPSHandler):+ def https_open(self, req):+ kwargs = {"context": self._context}+ if hasattr(self, "_check_hostname"): # 3.11 まで+ kwargs["check_hostname"] = self._check_hostname+ return self.do_open(_PinnedHTTPSConnection, req, **kwargs)+++_OPENER = urllib.request.build_opener(_Redirect308, _PinnedHTTPHandler, _PinnedHTTPSHandler)class UnsafeURL(Exception):"""取りに行ってはいけない URL。呼び手はほかの取得の失敗と同じく FAIL にする。"""-def resolve(host: str) -> set[str]:- """ホスト名を引いて IP アドレスの集まりを返す。テストはここを差し替える。"""- return {info[4][0] for info in socket.getaddrinfo(host, None)}+def resolve(host: str) -> list[str]:+ """ホスト名を引いて IP アドレスを返す。テストはここを差し替える。++ OS が返した順(IPv6 と IPv4 のどちらを先に試すか)を保つ。_pinned_connection はこの順につなぐ。+ """+ return list(dict.fromkeys(info[4][0] for info in socket.getaddrinfo(host, None)))def url_problem(url: str) -> str | None:@@ -113,7 +182,8 @@ def url_problem(url: str) -> str | None:手元で動いているサービス(開発用のサーバー・ローカルの AI・ブラウザのデバッグ口)の中身をsources/ に写してしまう(2026-10-20 のレビュー)。名前を引いた先が全部インターネット上の宛先のときだけ通す。10進や16進で書いた IP も、名前を引けば 127.0.0.1 などになるので同じく止まる。- 名前を引いてから接続するまでの間に引き先を変える手(DNS rebinding)は防げない。+ 名前を引いてから接続するまでの間に引き先を変える手(DNS rebinding)は、_pinned_connection が+ つなぐ直前に引き直して確かめた IP へじかにつなぐことで防ぐ。ホストの部分に「@」か「%」があれば断る。urlsplit は「[email protected]」の a.example を見るが、urllib は [email protected] をそのまま引き、「%61」は urllib だけが a に戻す。検査とつなぐ先がずれる。diff --git a/skills/imozuru/scripts/watch.py b/skills/imozuru/scripts/watch.pyindex db52a30..16a1185 100644--- a/skills/imozuru/scripts/watch.py+++ b/skills/imozuru/scripts/watch.py@@ -27,6 +27,7 @@ import codecsimport datetime as dtimport email.utilsimport html+import http.clientimport ipaddressimport jsonimport os@@ -50,7 +51,7 @@ SEEN_LIMIT = 500# フィードやページの大きさの上限。ふつうのフィードは数百 KB に収まる。MAX_BYTES = 5_000_000-# ここから UnsafeURL・resolve・url_problem・_Redirect308 までは fetch.py と同じもの。+# ここから UnsafeURL・resolve・url_problem・_Redirect308・_pinned_connection と接続の差し替えまでは fetch.py と同じもの。# -I で動かすとスクリプトの置き場が import の道に入らない(3.11 から -I は -P を含む)ので、写して持つ。# 直すときは両方を直す。@@ -59,9 +60,12 @@ class UnsafeURL(Exception):"""取りに行ってはいけない URL。"""-def resolve(host: str) -> set[str]:- """ホスト名を引いて IP アドレスの集まりを返す。テストはここを差し替える。"""- return {info[4][0] for info in socket.getaddrinfo(host, None)}+def resolve(host: str) -> list[str]:+ """ホスト名を引いて IP アドレスを返す。テストはここを差し替える。++ OS が返した順(IPv6 と IPv4 のどちらを先に試すか)を保つ。_pinned_connection はこの順につなぐ。+ """+ return list(dict.fromkeys(info[4][0] for info in socket.getaddrinfo(host, None)))def url_problem(url: str) -> str | None:@@ -71,7 +75,8 @@ def url_problem(url: str) -> str | None:手元で動いているサービス(開発用のサーバー・ローカルの AI・ブラウザのデバッグ口)の中身をsources/ に写してしまう(2026-10-20 のレビュー)。名前を引いた先が全部インターネット上の宛先のときだけ通す。10進や16進で書いた IP も、名前を引けば 127.0.0.1 などになるので同じく止まる。- 名前を引いてから接続するまでの間に引き先を変える手(DNS rebinding)は防げない。+ 名前を引いてから接続するまでの間に引き先を変える手(DNS rebinding)は、_pinned_connection が+ つなぐ直前に引き直して確かめた IP へじかにつなぐことで防ぐ。ホストの部分に「@」か「%」があれば断る。urlsplit は「[email protected]」の a.example を見るが、urllib は [email protected] をそのまま引き、「%61」は urllib だけが a に戻す。検査とつなぐ先がずれる。@@ -138,7 +143,72 @@ class _Redirect308(urllib.request.HTTPRedirectHandler):return super().redirect_request(req, fp, 307 if code == 308 else code, msg, headers, newurl)-_OPENER = urllib.request.build_opener(_Redirect308)+def _dial(ip: str, port: int, timeout, source_address):+ """確かめた IP へつなぐ。テストはここを差し替える。"""+ return socket.create_connection((ip, port), timeout, source_address)+++def _pinned_connection(host: str, port: int, timeout, source_address):+ """つなぐ直前に名前を引き直し、確かめた IP へそのままつなぐ。++ url_problem で名前を引いてから urllib がつなぐまでの間に、引き先を 127.0.0.1 などへ+ 変えられると検査をすり抜ける(DNS rebinding)。つなぐ時に引いた結果をもう一度確かめ、+ その IP にじかにつなぐので、検査した宛先と実際の宛先がずれない。HTTPS の証明書の確認と+ SNI はホスト名のまま行われる(2026-10-22 手元で追加)。+ """+ try:+ addrs = list(resolve(host))+ except (OSError, UnicodeError, ValueError) as e:+ raise UnsafeURL(f"ホストを引けない({e})")+ if os.environ.get("IMOZURU_ALLOW_PRIVATE") != "1":+ for addr in addrs:+ for ip in _addresses_inside(ipaddress.ip_address(addr.split("%", 1)[0])):+ if not ip.is_global:+ raise UnsafeURL(f"つなぐ直前に引いた先が手元や内側の宛先({ip})だった")+ err = None+ for addr in addrs:+ try:+ return _dial(addr, port, timeout, source_address)+ except OSError as e:+ err = e+ raise err or OSError(f"{host} の宛先が無い")+++class _PinnedMixin:+ """接続を _pinned_connection で作る。プロキシを通すとき(CONNECT)はプロキシへ素直につなぐ。"""++ def __init__(self, *args, **kwargs):+ super().__init__(*args, **kwargs)+ self._create_connection = self._pinned_create++ def _pinned_create(self, address, timeout=socket._GLOBAL_DEFAULT_TIMEOUT, source_address=None):+ if self._tunnel_host:+ return socket.create_connection(address, timeout, source_address)+ return _pinned_connection(address[0], address[1], timeout, source_address)+++class _PinnedHTTPConnection(_PinnedMixin, http.client.HTTPConnection):+ pass+++class _PinnedHTTPSConnection(_PinnedMixin, http.client.HTTPSConnection):+ pass+++class _PinnedHTTPHandler(urllib.request.HTTPHandler):+ def http_open(self, req):+ return self.do_open(_PinnedHTTPConnection, req)+++class _PinnedHTTPSHandler(urllib.request.HTTPSHandler):+ def https_open(self, req):+ kwargs = {"context": self._context}+ if hasattr(self, "_check_hostname"): # 3.11 まで+ kwargs["check_hostname"] = self._check_hostname+ return self.do_open(_PinnedHTTPSConnection, req, **kwargs)+++_OPENER = urllib.request.build_opener(_Redirect308, _PinnedHTTPHandler, _PinnedHTTPSHandler)def fetch_final(url: str) -> tuple[bytes, str, str]:diff --git a/tests/test_portability.py b/tests/test_portability.pyindex 28e9986..c514a93 100644--- a/tests/test_portability.py+++ b/tests/test_portability.py@@ -32,6 +32,10 @@ watch = load("watch")# テストの宛先(example.test と手元の小さなサーバー)を、インターネット上の宛先に引けたことにする。# 引いた結果を確かめるだけで、接続は urllib が別に名前を引いて行うので、手元のサーバーにつながるfetch.resolve = watch.resolve = lambda host: {"93.184.215.14"}+# _pinned_connection は引いた IP へじかにつなぐので、見せかけの IP は手元のサーバーへ回す+import socket as _socket+fetch._dial = watch._dial = lambda ip, port, timeout, src: _socket.create_connection(+ ("127.0.0.1" if ip == "93.184.215.14" else ip, port), timeout, src)class EncodingTests(unittest.TestCase):diff --git a/tests/test_security.py b/tests/test_security.pyindex aa1c15b..54d9e6b 100644--- a/tests/test_security.py+++ b/tests/test_security.py@@ -46,6 +46,12 @@ def public_localhost(host):return {PUBLIC_IP} if host == "localhost" else REAL_RESOLVE(host)+def dial_public_as_local(ip, port, timeout, source_address):+ """見せかけの PUBLIC_IP へのつなぎを手元のサーバーへ回す(_pinned_connection は引いた IP へじかにつなぐ)。"""+ import socket+ return socket.create_connection(("127.0.0.1" if ip == PUBLIC_IP else ip, port), timeout, source_address)++class _Server(http.server.BaseHTTPRequestHandler):def do_GET(self):if self.path == "/to-private":@@ -77,6 +83,18 @@ class UnsafeUrlTests(unittest.TestCase):self.addCleanup(self.server.server_close)self.addCleanup(self.server.shutdown)self.base = f"http://localhost:{self.server.server_port}"+ for module in (fetch, watch):+ dial = patch.object(module, "_dial", dial_public_as_local, create=True)+ dial.start()+ self.addCleanup(dial.stop)++ def test_dns_rebinding_between_check_and_connect_is_refused(self):+ """検査の時は外の IP、つなぐ時は 127.0.0.1 を返す名前(DNS rebinding)を断る。"""+ for module in (fetch, watch):+ answers = iter([{PUBLIC_IP}, {"127.0.0.1"}])+ with patch.object(module, "resolve", lambda host: next(answers)), self.subTest(module=module.__name__):+ with self.assertRaises(module.UnsafeURL):+ (module.download if module is fetch else module.fetch)(f"{self.base}/ok")def test_private_addresses_are_refused(self):for url in ("http://127.0.0.1:8080/", "http://[::1]/", "http://[::ffff:127.0.0.1]/",