IPinfoがレジストリデータをリアルなインテリジェンスに変える方法

何十万ものコンピュータネットワーク、それぞれに独自の特徴とポリシーがあり、より大きなグローバルネットワークを形成するために相互接続されています。 これらのネットワーク間の連携はほとんどないが、それぞれのネットワークは主にその仲間の隣人と関わっているが、遠隔のネットワークについて関心を払う必要はない。日本のネットワークオペレーターは、パッケージを交換するためにヨーロッパのネットワークオペレーターと連携する必要はない。 このようなシステムが世界規模で長期にわたって働くことは不可能に見えるかもしれないが、それでも、ほとんどの場合、そうしている。 ネットワークを相互接続するために使用する技術基準を規定するものとし、また、 (RIRs)は、IPアドレスとその他の共有インターネットリソースの割り当てを調整します。 IETF 地域インターネット登録 IETF 地域インターネット登録 このブログ記事では、IPアドレスと自動システム番号が何であるか、それらがインターネット上でどのように成功的に割り当てられているか(それらの限界とともに)、IPinfoの積極的に測定されたデータセットが静的レジストリデータを検証可能なリアルタイムのインテリジェンス層にどのように変えるかを説明します。 IP Network Challenges IP Network Challenges インターネット上のすべてのネットワークの共通点は、適切に名付けられたインターネットプロトコルまたはIPプロトコルを使用することです。IPネットワークでは、各デバイスにIPアドレスが割り当てられ、他の人にメッセージを送信するために使用することができます。 IPネットワークには2つの課題があります。 二つのコンピュータ間のルート、またはルートを見つける 可能なアドレスの限られたセットの中から、各デバイスにユニークなアドレスが割り当てられていることを確認する To better understand the routing challenge, let’s have a closer look at an IP network. A typical IP network is made up of multiple computers interconnected together through a device called a switch. Each interface of the switch is either connected to a computer, or to another switch. 2つのIPネットワーク. 各ネットワーク内でホストはスイッチを通じて接続され、同じネットワーク内の他のすべてのコンピュータに放送メッセージを送信することができます. 放送メッセージはネットワークの境界を超えて許可されません. 代わりにルーターと呼ばれるデバイスが使用されます. ルーターは事前に他のすべてのネットワークにアクセスする方法を知っています. スイッチは、あるコンピュータから別のコンピュータにメッセージを受け取るときに2つの動作モードを持っています. それとも、トラフィックの観察から、どの特定のインターフェイスにメッセージが転送されなければならないかを知っているか、それともそうでないし、メッセージがメッセージが届いたインターフェイスを除くすべてのインターフェイスにメッセージを送信します。 この設定では、すべての目的地の出力インターフェイスを事前に知る必要はありません。 to everyone when the interface is not known. 洪水 放送 Networks that support broadcast messages are convenient, but they also suffer from scalability issues. Imagine if every time a computer wanted to send a message to a new destination on the Internet, the message would be sent to all other computers on the Internet in the hope that it would eventually reach its intended destination. Not only would this be a privacy nightmare, this would also clog the network with useless traffic. From Local Networks to Autonomous Systems From Local Networks to Autonomous Systems このスケーラビリティの問題を解決するために、ネットワーク間の送信メッセージは許可されません。代わりに、ルーターと呼ばれる別のタイプのデバイスは、ネットワークを相互に接続するために使用されます。 One way to populate this is for the network to manually input each route into all routers. However, this process doesn’t scale to large networks and doesn’t allow dynamic reconfiguration when new routers are added or removed, or when links between them become unavailable (e.g. due to a broken cable). routing table 代わりに、ルーティング テーブルを人口化する最も一般的な方法は、ルーティング プロトコルを使用することです。ルーティング プロトコルのさまざまな種類がありますが、主なアイデアは、各ルーターが隣人と接続しているネットワークのリストと、隣人から学んだネットワークを共有することです。 実際には、さまざまな組織は、パスポートや遅延を最適化するために、自分のニーズに応じてさまざまなルーティングプロトコルとポリシーを使用します。彼らはまた、他のネットワークから受け入れるルートをフィルタリングして、トラフィックがどこへ行くかを制御したいかもしれません。共通のルーティングポリシーを共有するネットワークのコレクションは、自動システム、またはASと呼ばれています。 インターネットは、それぞれ独自の内部ルーティングプロトコルとポリシーを持つ自律システムのコレクションで、Border Gateway Protocol (BGP) を使用してそれらの間のルートを交換する。 二つの自動システムを持つプロトコルインターネット. AS 内では、ネットワークオペレーターはあらゆるルーティングポリシーを実装し、あらゆるルーティングプロトコルを使用することが自由です. AS 間では BGP ルーティングプロトコルを使用する必要があります. One key requirement of the BGP protocol is that each AS has a unique number, called an Autonomous System Number (ASN) assigned to it. The Need for Unique Resources ユニークな資源の必要性 インターネットが機能するためには、ユニークなIPアドレスとユニークな自動システム番号が必要です.ネットワークオペレーターがこれらの値をランダムに選択することを許すと、衝突のリスクが非常に高くなり、ネットワークの一部がアクセスできない、またはそれらのために意図されていないトラフィックを受け取る可能性があります。 The allocation of these resources is coordinated by the Regional Internet Registries (RIR). RIRs are nonprofit organizations that maintain a registry — or database — of Internet resources. There are five RIRs that cover different parts of the world: AFRINIC for Africa, ARIN for North America, APNIC for Asia and Oceania, LACNIC for South America, and the RIPE NCC for Europe and the Middle East. 各データベースに記録されるレコードやメタデータの正確な種類はRIRに依存しますが、最も重要な2つはIPアドレス範囲と自動システム番号です。 Internet Assigned Numbers Authority (IANA) はこれらのリソースを RIR に配布し、RIR はそれらを必要とする組織に配布し、顧客に配布することができます。 IPv4アドレスは、世界中のすべてのデバイスに分割するための32ビットアドレスがわずか420億個で、極めて少ないリソースです。RIRsは現在、利用可能なIPv4アドレスが無くなり、厳格な割合を持っているため、待機リストを持っています(例えば、RIPE NCCはISPに割り当てられるIPv4アドレスの最大数を256アドレスに制限します)。 IPv6 アドレスは、128 ビットアドレスの使用により、この問題に苦しみません。IPv6 アドレス空間の大部分は現在割り当てられず、将来の使用に留保されています。 ASNは16ビット数を使用して定義され、最大65536のASNが割り当てられることを意味するが、後で32ビットに拡張され、ASNの増加をカウントする(2025年までに120kを超える)。 これらのリソースの現在の割り当ては、RIRsで見ることができます。 , the , and the . IANA IPv4アドレススペースレジストリ IANA IPv6 グローバルユニキャストアドレス割り当て IANA自治システム番号リスト IANA IPv4アドレススペースレジストリ IANA IPv6 グローバルユニキャストアドレス割り当て IANA自治システム番号リスト The exact resource allocation policy depends on each RIR, but they will typically distinguish two types of allocations: ISPs and end users. ISP allocations can be further sub-allocated by the ISP to its own customers. We can also say that the ISP acts as a Local Internet Registry (LIR). For these kinds of allocations ISPs usually pay a membership fee that funds the registry operation. 一方、エンドユーザ割り当ては通常、メンバーシップ要件を免除されるが、割り当てることはできないという制限がある。 2a01:c910:1:20e::/64 IPv6 範囲で具体的な例を見てみましょう。 IANA → RIR → LIR(s) →エンドユーザ割り当ての階層をはっきりと見ることができます。 Who Needs to Own Resources? 誰が資源を必要とするのか。 なぜ RIR または LIR から IP アドレスを取得することに悩むのか? 組織が ISP によって発行された IP アドレスだけを使用できる場合。 IPアドレスを所有する主な理由は以下のとおりです。 ポータビリティ:組織がすべてのデバイスを再番号化することなく、ISPを通じてIPアドレスを移動する能力、すなわちプロバイダー独立したアドレススペースを持つこと。 複数のISPからのIPアドレスを解雇する。 プロバイダー独立アドレススペース 追加の利点は: 評判: IP アドレスがどのように使用されているかを制御することで、所有者は、これらのアドレスが悪意のある目的で使用されていないことを確認することができ、WHOIS データベースの連絡先フィールドを設定することによって、自らの不正行為処理ポリシーを実施することができます。 : The IANA maintains the root zone for reverse DNS records (in-addr.arpa and ip6.arpa) and delegates the child zones to the RIRs, which in turn can delegate the zones matching the owned resources to the organization's own DNS servers (see for example) Reverse DNS delegation RIPE NCC ドキュメント ・WHOISデータベースのポイントフィールド RIPE NCC ドキュメント AS番号を取得する理由は単純である:公開のBGPセッションを確立する必要があります! したがって、インターネット上でIPを発表したいネットワークは、独自のASNを持たなければなりません。 IP アドレスと ASN 割り当ては独立していることに注意してください. 組織は ASN を持っているかもしれないが、顧客が持ち込んだルート IP のみが存在し、同様に組織は IP を所有することができますが、それらをルートするインフラストラクチャを持っていません。 In practice, most smaller organizations are fine using IP space assigned by their ISP and don’t need their own ASN. Ownership becomes important for companies that run large-scale infrastructure, provide Internet services, or need independence and resilience—such as ISPs, hosting providers, CDNs, and enterprises with complex networks. For these organizations, direct resource ownership offers control, stability, and flexibility that simply leasing addresses from an ISP cannot match. What WHOIS and RIR Data Reveal What WHOIS and RIR Data Reveal RIR データベースの IP アドレスと ASN レコードには、これらのリソースの所有者に関する情報が含まれていますが、これらのリソースの使用目的や連絡先などの追加のメタデータも含まれる場合があります。 いくつかのリソースを見てみましょう。それを行うには、私たちは protocol with the whois command line utility, but note that there is also a newer HTTP-based protocol called . WHOIS RDAP WHOIS RDAP 次のコマンドで 2a01:c910:1:20e::/64 範囲の RIPE データベースをクエリできます。 whois -h – 2a01:c910:1:20e::/64 トップページ > RIPE.NET トップページ > RIPE.NET If the WHOIS server is not specified ( この場合、Whois コマンドは IANA サーバーを使用します。 ), which will redirect to the appropriate RIR server in most cases. However, it’s good practice to specify the proper WHOIS server to make sure you get the expected record. トップページ > RIPE.NET トップページ > iana.org whois.ripe.net whois.iana.org inet6num: 2a01:c910:1:20e::/64 netname: FR-LA-POSTE-DISIT country: FR descr: SERVICES admin-c: DL7113-RIPE tech-c: DL7113-RIPE tech-c: AA2914-RIPE status: ASSIGNED mnt-by: PC80199-MNT created: 2015-05-27T11:38:38Z last-modified: 2015-05-27T11:38:38Z source: RIPE RIPEデータベースのIPv6割り当て レコードは私たちに複数のことを教えてくれます: The name of the IP range gives us a hint as to its purpose. In this case it seems allocated to the French post. この国は、この範囲がおそらくフランスで使用されていることを教えてくれますが、この属性はユーザーが設定するために完全に無料であり、IP地理位置に関係のない可能性があります。 この場合、AA2914-RIPEは、Orange Business Services(LIR)サポートセンターのアドレスを含むレコードにリンクし、DL7113-RIPEはフランス郵便サービスのITサービスのアドレスを教えてくれます。 mnt-by 属性は、エンティティが inetnum レコードそのものに変更を加えることを許可していることを示します. Naturally in this case it is the LIR, Orange Business Services. admin-c、tech-c、mnt-by 属性にリンクされている役割レコードには、郵便アドレス、電話番号、電子メールアドレスが含まれています。 role: Administration Adresses remarks: Internet Support Center address: Orange Business Services address: 6 avenue Albert Durand address: 31700 Blagnac France phone: +33969397520 abuse-mailbox: abuse.orange-business@orange.com nic-hdl: AA2914-RIPE remarks: http://www.orange-business.com mnt-by: RAIN-TRANSPAC created: 2004-03-12T12:24:14Z last-modified: 2024-11-26T14:37:29Z source: RIPE RIPEデータベースの連絡先 WHOIS and RIR Limitations WHOISとRIRの制限 「WHOIS ≠ Geolocation」 WHOIS レコードは、IP 地理位置のためのプロキシとして使用されることが多いが、この使用は、レコード内のアドレスが正しいか、または IP アドレスが使用されている実際の場所にリンクされているという保証がないため、不十分である。 国の属性について以下のように述べています。 文書化 文書化 This identifies a country using the ISO 3166-2 letter country codes. この国が何を代表するかは決して明らかにされていない。 それは、多国籍企業の本社やサーバーセンターの所在地、あるいはエンドユーザの居住地である可能性があります。 Therefore, it cannot be used in any reliable way to map IP addresses to countries. この国が何を代表するかは決して明らかにされていない。 Therefore, it cannot be used in any reliable way to map IP addresses to countries. Furthermore, the granularity of IP address allocation is often too coarse to represent anything below the country level. The proper solution for network operators to share geolocation information are . geofeeds GeoFeeds Route Objects Are Informational Only また、WHOIS レコードについての混乱のもう一つの一般的な原因は、ルートレコードから来ています。これらのレコードは、どの ASN が IP 範囲を発表することを期待しているかを教えてくれます。例えば、次のレコードは、AS3215 によって 90.38.0.0/16 が発表されるべきであることを示しています。 route: 90.38.0.0/16 descr: France Telecom IP2000-ADSL-BAS origin: AS3215 mnt-by: FT-BRX created: 2012-12-11T10:07:49Z last-modified: 2012-12-11T10:07:49Z source: RIPE Route record in the RIPE database. しかし、これらのレコードは純粋に情報的である。一部のネットワークオペレーターは、元のASNが一致しないルートを拒否するためにそれらを使用するかもしれないが、一部はそれらのレコードをまったく使用しないかもしれない。さらに、これらのレコードは、IP範囲が実際に発表されていない場合でも存在することができる。 The Messiness of Public Registry Data The Messiness of Public Registry Data RIRsのデータベースは公開されているため、インターネット上で動作するエンティティに関する情報の素晴らしいソースとなっていますが、このデータもかなり混乱する可能性があります。 RIR はすべて同じレコードタイプをサポートするものではなく、共通のレコードの場合でも、サポートされる属性は異なる場合があります。 さらに、アドレスなどのいくつかのフィールドはフリーフォームであり、その有効性は RIR によって執行されません。 How IPinfo Transforms Static Records into Dynamic Intelligence How IPinfo Transforms Static Records into Dynamic Intelligence インターネットのアドレスシステムは、協力的な信頼モデルに基づいて構築されました:レジストリは割り当てを公表し、オペレーターはルーティングの意図を文書化し、コミュニティはこれらのレコードが正しいと仮定します。 しかし、このモデルはまた、悪意のあるまたは望ましくないトラフィックを隠蔽するいくつかの俳優を可能にしました. たとえば、ウェブクローバーは、検出を回避するためにIPアドレスとASNを頻繁に回転することができます(このCloudflareを参照してください。 for a recent example). ブログ記事 ブログ記事 IPinfoのデータは、私たちの豊富なデータでこれらの問題を明らかにします。 IP WHOIS Our IP WHOIS data maps IP ranges to their owners in a standardized and enriched format across all regional Internet registries. This data is useful to understand the allocation hierarchy and history of an IP address and, for example, to distinguish stable, ISP-allocated IPs from IPs from IP brokers who might change hands frequently. This data can also be used to discover assets owned by a particular organization, and estimate their attack surface for proactive management. IP to Company and IP Ranges Our IP to Company and IP Ranges dataset are distilled versions of our WHOIS dataset that always return the most specific information for an IP address. They are useful when one cares only about the final owner of an IP address and not the full allocation hierarchy. They allow users to easily obtain all IP ranges belonging to an organization by looking up its name or domain name. IP は ASN IP から ASN へのデータマップでは、IP アドレスは、インターネット上で IP アドレスをルーティングする組織である ASN に由来します。これらのデータは、ユーザーの ISP を知るために使用できますが、ホスティングおよびクラウドプロバイダーの ASN から発生するボット トラフィックから人間のトラフィックをフィルタリングすることもできます。 IP Geolocationについて 私たちのインターネット測定プラットフォームであるProbeNetが提供するIP地理位置データは、都市レベルまで正確な位置割り当てを提供し、WHOISの国コードとIPの観測地理の間の差異を検出します。 IPプライバシー検出 私たちのIPプライバシー検出データは、VPN、プロキシ、Torノード、住宅プロキシおよびその他の匿名化サービスを使用してIPを表記し、ユーザーがボットトラフィックをフィルターし、調査を優先し、匿名化された接続を適切な注意を払って処理することができます。 From Assumptions to Evidence 仮定から証拠へ 伝統的なレジストリデータは貴重ですが、不完全です. 検証なしでは、所有権、地理、またはルーティングを誤って割り当てることが容易で、コストがかかる盲点につながります。 IPinfo は、WHOIS データや地理フィードなどの公開可能なシグナルを使用して、その情報を一貫した形式に標準化し、組織し、パートナー/ベンダーのデータと私たちの独自のインテリジェンスでその基盤を構築します。 これは、ネットワークの弁護士、研究者、およびオペレーターが仮定に基づく分析から、証拠に基づくインターネットリソースのマッピングに移行し、偽ポジティブを削減し、伝統的なWHOISのみワークフローに隠されているインフラを発見することを可能にします。 Ready to see beyond registry records? Static WHOIS and RIR data only tell part of the story. IPinfo’s datasets combine registry information with real-time measurements, advanced privacy detection, and curated intelligence to give you a complete view of the Internet’s infrastructure. アーティスト: Maxime Mouchet Max は現在 IPinfo で IP 地理位置に関するデータエンジニアとして働いています. 以前に、彼はソルボンヌ大学の研究者として、複数の経路の測定に取り組んでいました。