Как IPinfo превръща данните от регистъра в истинска интелигентност

The Internet is a decentralized network by nature. Hundreds of thousands of computer networks, each with their own peculiarities and policies, are interconnected together to form a larger, global network. Всяка мрежа се интересува предимно от своите съседи, но не е нужно да се грижи за мрежите по-далеч.Операторът на мрежа в Япония никога не се нуждае от координация с оператор на мрежа в Европа, за да може да обменя пакети с тях.Те не трябва да използват същото оборудване, доставчици, софтуер или конфигурации в своите мрежи. Може да изглежда невъзможно такава система да работи в глобален мащаб и за дълъг период от време, но в по-голямата си част го прави. , който диктува техническите стандарти, които трябва да се използват за свързване на мрежи, но също така и чрез (RIRs), които координират разпределението на IP адреси и други споделени интернет ресурси. IETF Regional Internet Registries IETF Regional Internet Registries В този блог ще обясня какво са IP адреси и автономни системни номера, как те се разпределят успешно в интернет (заедно с техните ограничения) и как активните измерени набори от данни на IPinfo превръщат статичните данни от регистъра в проверяем, в реално време интелигентен слой. IP Network Challenges Предизвикателствата на IP мрежата Общата точка за всички мрежи в интернет е използването на подходящо наречения интернет протокол, или IP протокол. В IP мрежа, на всяко оборудване се присвоява IP адрес, който може да се използва за изпращане на съобщения на други. Има две основни предизвикателства пред IP мрежите: Намиране на пътища или маршрути между два компютъра Уверете се, че на всяко оборудване е зададен уникален адрес сред ограничен набор от възможни адреси. За да разберем по-добре предизвикателството на маршрутизацията, нека да разгледаме по-отблизо IP мрежа. Типична IP мрежа се състои от няколко компютъра, свързани помежду си чрез устройство, наречено превключвател. Две IP мрежи. Във всяка мрежа хостове са свързани чрез превключвател и могат да изпращат излъчващи съобщения до всички други компютри в една и съща мрежа. Излъчващи съобщения не се допускат извън границата на мрежата. Вместо това се използва устройство, наречено рутер. Превключвателят има два режима на работа, когато получава съобщение от един компютър на друг. Или той знае, от наблюдението на трафика, към кой конкретен интерфейс съобщението трябва да бъде препратено, или не и той изпраща съобщението до всички интерфейси с изключение на интерфейса, където съобщението е пристигнало в процес, наречен . In this setup, there is no need to know the outgoing interface for all destinations in advance since a message can always be Всеки, когато интерфейсът не е известен. flooding Излъчване Представете си, че всеки път, когато компютър иска да изпрати съобщение до нова дестинация в интернет, съобщението ще бъде изпратено до всички други компютри в интернет с надеждата, че в крайна сметка ще достигне предназначението си. From Local Networks to Autonomous Systems От локални мрежи до автономни системи To solve this scalability issue, broadcast messages are not allowed between networks. Instead, another type of device, called a router, is used to interconnect networks. Unlike a switch, a router must know the outgoing interface for each destination in advance: One way to populate this is for the network to manually input each route into all routers. However, this process doesn’t scale to large networks and doesn’t allow dynamic reconfiguration when new routers are added or removed, or when links between them become unavailable (e.g. due to a broken cable). routing table Различни видове протоколи за маршрутизация съществуват, но основната идея е за всеки маршрутизатор да споделя списъка на мрежата, към която е свързан със своите съседи, както и мрежите, които е научил от своите съседи. На практика различните организации ще използват различни протоколи за маршрутизиране и политики в зависимост от техните нужди, например за оптимизиране на пропускателната способност или закъснението. Те също могат да искат да филтрират кои маршрути приемат от други мрежи, за да контролират къде ще отиде трафикът им. Набор от мрежи, които споделят обща политика за маршрутизиране, се нарича автономна система, или AS. Обикновено интернет доставчиците и големите организации ще управляват едно или повече AS. Във всяка AS те са свободни да използват протокола за маршрутизиране по свой избор. Интернет е колекция от автономни системи, всяка с свои собствени вътрешни протоколи за маршрутизация и политики, които използват протокола Border Gateway (BGP) за обмен на маршрути между тях. Прото-интернет с две автономни системи. В рамките на AS мрежовият оператор е свободен да прилага всяка политика за маршрутизиране и да използва всеки протокол за маршрутизиране. Едно от ключовите изисквания на протокола BGP е, че всяка AS има уникален номер, наречен Автономно Системен Номер (ASN). The Need for Unique Resources The Need for Unique Resources За да функционира интернет, ни трябват две неща: уникални IP адреси и уникални автономни системни номера.Ако позволим на мрежовите оператори да избират тези стойности на случаен принцип, съществува много висок риск от сблъсък, което би довело до това части от мрежата да бъдат недостъпни или да получават трафик, който не е предназначен за тях. Разпределението на тези ресурси се координира от Регионалните интернет регистри (RIR). RIRs are nonprofit organizations that maintain a registry — or database — of Internet resources. There are five RIRs that cover different parts of the world: AFRINIC for Africa, ARIN for North America, APNIC for Asia and Oceania, LACNIC for South America, and the RIPE NCC for Europe and the Middle East. Точните типове записи и метаданни, записани във всяка база данни, зависят от RIR, но най-важните са IP адресни диапазони и автономни системни номера. Internet Assigned Numbers Authority (IANA) разпределя тези ресурси на RIRs, които от своя страна ги разпределят на организациите, които се нуждаят от тях, които от своя страна могат да ги разпределят на своите клиенти. IPv4 addresses are by far the scarcest resources, with only 4.2 billion 32-bit addresses to split for every device on the planet. RIRs now have a waiting list in place, as they’ve run out of available IPv4 addresses and have strict quotas (for example the RIPE NCC limits the maximum number of IPv4 addresses allocated to an ISP to 256 addresses). IPv6 адресите не страдат от този проблем благодарение на използването на 128-битови адреси, което осигурява много по-голямо адресно пространство. ASNs used to be defined using 16 bit numbers, meaning a maximum of 65,536 ASNs could be allocated, but were later extended to 32 bits to account for the growing number of ASNs (more than 120k as of 2025). Настоящото разпределение на тези ресурси на RIRs може да се види в , the и на . IANA IPv4 адресен регистър IANA IPv6 Global Unicast адреси Списък с номера на автономната система на IANA IANA IPv4 адресен регистър IANA IPv6 Global Unicast адреси Списък с номера на автономната система на IANA Точната политика за разпределение на ресурсите зависи от всеки RIR, но те обикновено ще разграничат два вида разпределения: ISP и крайни потребители. Можем също така да кажем, че ISP действа като Local Internet Registry (LIR).За тези видове разпределения ISP обикновено плащат членска такса, която финансира операцията на регистъра. On the other hand, end-user allocations are usually exempt of membership requirements, but have the restriction that they cannot be sub-allocated. Нека да разгледаме конкретен пример с диапазона 2a01:c910:1:20e::/64 IPv6. We clearly see the IANA → RIR → LIR(s) → end user allocation hierarchy. Who Needs to Own Resources? Кой има нужда от собствени ресурси? Може да се чудите: защо да се притеснявате за получаване на IP адреси от RIR или LIR, когато една организация може да използва само IP адресите, предоставени от техния ISP? Основните причини за притежаване на IP адреси са: Портабилност: Възможността за организация да премества IP адреси между интернет доставчици, без да преномерира всичките си устройства, т.е. да има независимо от доставчика адресно пространство. Multihoming: Обявяване на IP адреси от няколко ISP за уволнение. provider-independent address space Допълнителни ползи могат да бъдат: : By controlling how IP addresses are used, the owner can make sure they are not used for nefarious purposes (e.g. sending spam) and implement its own abuse handling policy by setting . Reputation точка на полетата за контакт в базата данни на WHOIS Обратно делегиране на DNS: IANA поддържа кореновата зона за обратни DNS записи (in-addr.arpa и ip6.arpa) и делегира детските зони на RIRs, които от своя страна могат да делегират зоните, съответстващи на собствените ресурси на собствените DNS сървъри на организацията (виж например документацията на RIPE NCC) точка на полетата за контакт в базата данни на WHOIS Документация на RIPE NCC The reason for obtaining an AS number is simpler: it is required to establish public BGP sessions! Thus any network willing to announce IPs on the Internet must have its own ASN. Имайте предвид, че IP адресите и ASN разпределението са независими.Организацията може да има ASN, но само маршрутни IP адреси, донесени от клиента си, и по подобен начин организацията може да притежава IP адреси, но не разполага с инфраструктурата, за да ги маршрутизира и да разчита на ISP с ASN за това. На практика повечето по-малки организации използват добре IP пространството, предоставено от техния ISP, и не се нуждаят от собствени ASN. Собствеността става важна за компаниите, които управляват мащабна инфраструктура, предоставят интернет услуги или се нуждаят от независимост и устойчивост – като например ISP, хостинг доставчици, CDN и предприятия със сложни мрежи. What WHOIS and RIR Data Reveal What WHOIS and RIR Data Reveal IP адресът и ASN записите в RIR базите данни съдържат информация за собственика на тези ресурси, но те могат да съдържат и допълнителни метаданни като предвиденото използване на тези ресурси или адреси за контакт. Нека да разгледаме някои ресурси.За да го направим, ще използваме протокол с помощта на whois, но имайте предвид, че има и по-нов HTTP-базиран протокол, наречен . Кой RDAP Кой RDAP We can query the RIPE database for the 2a01:c910:1:20e::/64 range with the following command: Където - H – 2a01:c910:1:20e::/64 Искам да бъда.ripe.net Искам да бъда.ripe.net Ако сървърът WHOIS не е зададен ( В този случай (командването whois ще използва сървъра IANA) ), което ще пренасочи към съответния RIR сървър в повечето случаи.Въпреки това, добра практика е да посочите правилния WHOIS сървър, за да сте сигурни, че получавате очаквания запис. Искам да бъда.ripe.net Искам да бъда.iana.org Искам да бъда.ripe.net Искам да бъда.iana.org inet6num: 2a01:c910:1:20e::/64 netname: FR-LA-POSTE-DISIT country: FR descr: SERVICES admin-c: DL7113-RIPE tech-c: DL7113-RIPE tech-c: AA2914-RIPE status: ASSIGNED mnt-by: PC80199-MNT created: 2015-05-27T11:38:38Z last-modified: 2015-05-27T11:38:38Z source: RIPE Разпределение на IPv6 в RIPE базата данни. Записът ни казва много неща: The name of the IP range gives us a hint as to its purpose. In this case it seems allocated to the French post. Страната ни казва, че този диапазон вероятно се използва във Франция, въпреки че този атрибут е напълно свободен за потребителя да зададе и може да не е свързан с IP геолокацията. The admin-c and tech-c attribute give us the administrative and technical contacts for this IP range. In this case AA2914-RIPE links to a record containing the addresses of Orange Business Services (the LIR) support center while DL7113-RIPE tells us the address of the French postal service IT services. The mnt-by attribute tells us the entity allowed to make changes to the inetnum record itself. Naturally in this case it’s the LIR, Orange Business Services. Ролевите записи, свързани в атрибутите admin-c, tech-c и mnt-by, съдържат пощенски адреси, телефонни номера и имейл адреси. Например, ако търсим AA2914-RIPE: role: Administration Adresses remarks: Internet Support Center address: Orange Business Services address: 6 avenue Albert Durand address: 31700 Blagnac France phone: +33969397520 abuse-mailbox: abuse.orange-business@orange.com nic-hdl: AA2914-RIPE remarks: http://www.orange-business.com mnt-by: RAIN-TRANSPAC created: 2004-03-12T12:24:14Z last-modified: 2024-11-26T14:37:29Z source: RIPE Point of contact in the RIPE database. WHOIS and RIR Limitations WHOIS и ограниченията на RIR WHOIS ≠ Geolocation WHOIS записи често се използват като прокси за IP геолокация. Въпреки това, това използване е несигурно, тъй като няма гаранция, че адресите в записите са правилни или са свързани с действителното местоположение, където се използват IP адресите. Ето какво трябва да се каже за атрибута на страната: Документация Документация Това идентифицира една страна, използвайки буквите ISO 3166-2 кодове на държавите. It has never been specified what this country represents. Това може да бъде местоположението на централата на мултинационална компания или където се намира сървърният център или домът на крайния потребител. Therefore, it cannot be used in any reliable way to map IP addresses to countries. It has never been specified what this country represents. Следователно, той не може да се използва по никакъв надежден начин за картографиране на IP адреси по държави. Furthermore, the granularity of IP address allocation is often too coarse to represent anything below the country level. The proper solution for network operators to share geolocation information are . Географски Географски Route Objects Are Informational Only Друг често срещан източник на объркване относно записите на WHOIS идва от записите за маршрути. Тези записи ни казват кои ASN се очаква да обявят IP диапазон. Например, следният запис ни казва, че 90.38.0.0/16 трябва да бъде обявен от AS3215: route: 90.38.0.0/16 descr: France Telecom IP2000-ADSL-BAS origin: AS3215 mnt-by: FT-BRX created: 2012-12-11T10:07:49Z last-modified: 2012-12-11T10:07:49Z source: RIPE Записване на маршрута в базата данни на RIPE. Въпреки това, тези записи са чисто информационни. Някои мрежови оператори може да ги използват за отхвърляне на маршрути, където произходът ASN не съвпада, но някои може да не използват тези записи изобщо. Освен това тези записи могат да съществуват дори ако IP диапазонът не е действително обявен. Като такъв, тези записи не могат да се използват за определяне на кой ASN обявява IP диапазон. The Messiness of Public Registry Data Недостатъци на данните от публичния регистър The RIRs databases are publicly available, which makes them great sources of information about the entities operating on the Internet. However, this data can also be quite messy. RIRs do not all support the same record types, and even for common records, the attributes supported might be different. Освен това някои полета, като например адреса, са свободни и тяхната валидност не се налага от RIRs. How IPinfo Transforms Static Records into Dynamic Intelligence Как IPinfo превръща статичните записи в динамична интелигентност Системата за адресиране на интернет е изградена върху модел на кооперативно доверие: регистрите публикуват разпределения, операторите документират намеренията за маршрутизиране и общността приема, че тези записи са правилни. Въпреки това, този модел също така позволява на някои участници да маскират злонамерен или нежелан трафик. например, уеб сканерите могат да въртят IP адреси и ASN често, за да избегнат откриването (виж това Cloudflare Да вземем един неотдавнашен пример). Блог пост Блог пост IPinfo data sheds light into these issues with our rich data: IP на Whois Our IP WHOIS data maps IP ranges to their owners in a standardized and enriched format across all regional Internet registries. This data is useful to understand the allocation hierarchy and history of an IP address and, for example, to distinguish stable, ISP-allocated IPs from IPs from IP brokers who might change hands frequently. This data can also be used to discover assets owned by a particular organization, and estimate their attack surface for proactive management. IP to Company and IP Ranges Нашият набор от данни IP към фирма и IP редици са дестилирани версии на нашия набор от данни WHOIS, които винаги връщат най-специфичната информация за IP адрес. Те са полезни, когато се интересувате само от крайния собственик на IP адрес, а не от пълната йерархия на разпределение. IP към ASN Our IP to ASN data maps IP addresses to their origin ASN — the organization that routes the IP address on the Internet. This data can be used to know the ISP of a user, but also to filter human traffic from bot traffic often originating from hosting and cloud providers ASNs. IP Geolocation Нашите IP геолокационни данни, информирани от ProbeNet, нашата интернет измервателна платформа, осигуряват точна атрибуция на местоположението до нивото на града, откривайки несъответствия между кодовете на страните на WHOIS и наблюдаваната география на IP. IP откриване на поверителност Our IP privacy detection data flags IPs using VPNs, proxies, Tor nodes, residential proxies and other anonymizing services, enabling users to filter bot traffic, prioritize investigations, and handle anonymized connections with the appropriate caution. From Assumptions to Evidence От предположения към доказателства Traditional registry data is valuable but incomplete. Without validation, it’s easy to misattribute ownership, geography, or routing, leading to costly blind spots. IPinfo uses publicly available signals, like WHOIS data and geofeeds, standardizes and organizes that information into a consistent format, and builds off that foundation with partner/vendor data as well as our own proprietary intelligence. This approach turns registry data from a static directory into a dynamic, verifiable intelligence layer. Той позволява на мрежовите защитници, изследователи и оператори да се преместят от анализ, основан на предположения, към основано на доказателства картографиране на интернет ресурси, намаляване на фалшивите положителни и разкриване на инфраструктура, която ще остане скрита в традиционните работни потоци само WHOIS. Готови ли сте да виждате отвъд регистрите? Статичните данни WHOIS и RIR разказват само част от историята. наборите от данни на IPinfo съчетават информация от регистъра с измервания в реално време, усъвършенствано откриване на поверителност и курирана интелигентност, за да ви дадат пълна представа за инфраструктурата на интернет. Автор: Максим Муше Max currently works as a data engineer on IP geolocation at IPinfo. Previously, he was a postdoctoral researcher at Sorbonne Université where he worked on multipath traceroute measurements.