Како IPinfo ги претвора податоците од регистарот во вистинска интелигенција

Стотици илјади компјутерски мрежи, секоја со свои особености и политики, се меѓусебно поврзани за да формираат поголема, глобална мрежа. Постои малку или никаква координација помеѓу овие мрежи. Секоја мрежа е главно загрижена за своите соседи, но не мора да се грижи за мрежите подалеку. Операторот на мрежа во Јапонија никогаш не треба да координира со оператор на мрежа во Европа за да може да разменува пакети со нив. Тие не треба да користат иста опрема, добавувачи, софтвер или конфигурации на нивните мрежи. Може да изгледа невозможно за таков систем да работи на глобално ниво и во текот на долг временски период, и сепак, во најголем дел тоа го прави. , кој ги диктира техничките стандарди кои мора да се користат за меѓусебно поврзување на мрежите, но и преку (RIRs), кои го координираат доделувањето на IP адреси и други споделени интернет ресурси. ИЕТФ Регионални интернет регистри ИЕТФ Regional Internet Registries Во овој блог пост ќе објаснам што се IP адреси и автономни системски броеви, како тие успешно се доделуваат на Интернет (заедно со нивните ограничувања), и како активно мерените податоци на IPinfo ги претвораат статичките податоци од регистарот во верификуван, во реално време слој на интелигенција. IP Network Challenges IP мрежни предизвици Заедничката точка на сите мрежи на Интернет е употребата на соодветно наречениот Интернет протокол, или IP протокол. Во IP мрежа, на секој дел од опремата е доделена IP адреса која може да се користи за испраќање пораки до другите. Постојат два главни предизвици во IP мрежи: Пронаоѓање на патеки, или рути, помеѓу два компјутери Осигурување дека на секој дел од опремата е доделена единствена адреса меѓу конечен сет на можни адреси За подобро да се разбере предизвикот на рутирање, ајде да погледнеме поблиску на IP мрежа. Типична IP мрежа се состои од повеќе компјутери меѓусебно поврзани преку уред наречен прекинувач. Две IP мрежи. Во рамките на секоја мрежа домаќините се поврзани преку прекинувач и можат да испраќаат пораки за емитување до сите други компјутери во истата мрежа. Не се дозволуваат пораки за емитување надвор од границата на мрежата. Наместо тоа се користи уред наречен рутер. Прекинувачот има два начини на работа кога прима порака од еден компјутер до друг.Или знае, од набљудувањето на сообраќајот, на кој специфичен интерфејс пораката мора да биде пренасочена, или не и ја испраќа пораката до сите интерфејси освен интерфејсот каде што пораката пристигнала во процес наречен . In this setup, there is no need to know the outgoing interface for all destinations in advance since a message can always be на сите кога интерфејсот не е познат. Поплави Предавање Замислете ако секој пат кога компјутер сакаше да испрати порака до нова дестинација на Интернет, пораката би била испратена до сите други компјутери на Интернет со надеж дека на крајот ќе ја достигне својата наменета дестинација. From Local Networks to Autonomous Systems Од локални мрежи до автономни системи За да се реши овој проблем со скалабилноста, не се дозволуваат пораки за емитување помеѓу мрежи. Наместо тоа, друг тип на уред, наречен рутер, се користи за меѓусебно поврзување на мрежи. За разлика од прекинувачот, рутерот мора однапред да го знае интерфејсот за излегување за секоја дестинација: Меѓутоа, овој процес не се проширува на големи мрежи и не дозволува динамичка реконфигурација кога се додаваат или отстрануваат нови рутери, или кога врските меѓу нив стануваат недостижни (на пример, поради скршен кабел). Различни видови на протоколи за рутирање постојат, но главната идеја е за секој рутер да ја сподели листата на мрежата со која е поврзан со своите соседи, како и мрежите што ги научи од своите соседи. Во пракса, различни организации ќе користат различни протоколи за рутирање и политики во зависност од нивните потреби, на пример, за да се оптимизираат за пропуст или задоцнување. Тие исто така може да сакаат да филтрираат кои патеки ги прифаќаат од други мрежи за да контролираат каде ќе оди нивниот сообраќај. Збирка на мрежи кои имаат заедничка политика за рутирање се нарекува автономен систем, или AS. Типично, ИСП и големите организации ќе работат со една или повеќе AS. Во рамките на секоја AS тие се слободни да го користат протоколот за рутирање по свој избор. Интернетот е збир на автономни системи, секој со свои внатрешни протоколи и политики за рутирање, кои го користат протоколот Border Gateway (BGP) за размена на рути меѓу нив. A proto-Internet with two autonomous systems. Inside an AS the network operator is free to implement any routing policy and use any routing protocol. Between ASes the BGP routing protocol must be used. Едно од клучните барања на BGP протоколот е дека секој AS има уникатен број, наречен Автономниот систем број (ASN) доделен на него. The Need for Unique Resources Потребата од единствени ресурси За да функционира Интернетот, ни се потребни две работи: уникатни IP адреси и уникатни автономни системски броеви.Ако им дозволиме на мрежните оператори да ги изберат овие вредности случајно, постои многу висок ризик од судир, што би резултирало со тоа дека делови од мрежата ќе бидат недостижни, или добивање на сообраќај што не е наменет за нив. Доделувањето на овие ресурси е координирано од страна на Регионалните интернет регистри (РИР). RIRs are nonprofit organizations that maintain a registry — or database — of Internet resources. There are five RIRs that cover different parts of the world: AFRINIC for Africa, ARIN for North America, APNIC for Asia and Oceania, LACNIC for South America, and the RIPE NCC for Europe and the Middle East. Точните типови на записи и метаподатоци запишани во секоја база на податоци зависат од RIR, но најважните два се IP адресни опсези и автономни системски броеви. Internet Assigned Numbers Authority (IANA) ги дистрибуира овие ресурси на RIRs, кои за возврат ги дистрибуираат на организациите кои имаат потреба од нив, кои за возврат можат да ги дистрибуираат на своите клиенти. IPv4 адресите се далеку најмалиот ресурс, со само 4,2 милијарди 32-битни адреси за поделба за секој уред на планетата. RIRs сега имаат листа на чекање на место, бидејќи тие исчезнаа од достапните IPv4 адреси и имаат строги квоти (на пример, RIPE NCC го ограничува максималниот број на IPv4 адреси доделени на ISP до 256 адреси). IPv6 адресите не страдаат од овој проблем благодарение на употребата на 128-битни адреси, што обезбедува многу поголем простор за адреси. ASNs used to be defined using 16 bit numbers, meaning a maximum of 65,536 ASNs could be allocated, but were later extended to 32 bits to account for the growing number of ASNs (more than 120k as of 2025). Тековната распределба на овие ресурси на RIRs може да се види во , на и на . IANA IPv4 Регистар на адреси IANA IPv6 Глобално доделување на Unicast адреси Листа на броеви на автономниот систем на IANA IANA IPv4 Регистар на адреси IANA IPv6 Глобално доделување на Unicast адреси Листа на броеви на автономниот систем на IANA Точната политика за доделување на ресурсите зависи од секој RIR, но тие обично ќе разликуваат два типа на доделување: ISPs и крајните корисници. ISP allocations can be further sub-allocated by the ISP to its own customers. We can also say that the ISP acts as a Local Internet Registry (LIR). For these kinds of allocations ISPs usually pay a membership fee that funds the registry operation. Од друга страна, доделувањата на крајните корисници обично се ослободени од барањата за членство, но имаат ограничување дека не можат да бидат под-алоцирани. Да го разгледаме конкретниот пример со опсегот 2a01:c910:1:20e::/64 IPv6. Јасно ја гледаме иерархијата за доделување на IANA → RIR → LIR(s) → крајниот корисник. Who Needs to Own Resources? Who Needs to Own Resources? Може да се прашувате: зошто да се грижите за добивање на IP адреси од RIR или LIR кога една организација може да ги користи само IP адресите издадени од нивниот ISP? Главните причини за поседување на IP адреси се: Портабилност: Способноста на една организација да ги премести IP адресите низ ISPs без да ги преномерира сите свои уреди, т.е. да има адресен простор независен од провајдерот. Мултихоминг: Најавување на IP адреси од повеќе ISPs за отпуштање. Доставувач-независен адресен простор Дополнителни придобивки може да бидат: Репутација: Со контрола на тоа како се користат IP адресите, сопственикот може да биде сигурен дека тие не се користат за злонамерни цели (на пример, испраќање спам) и да ја имплементира сопствената политика за управување со злоупотреби со поставување точка на контакт полиња во базата на податоци на WHOIS. Обратна делегација на DNS: IANA ја одржува коренската зона за обратни DNS записи (in-addr.arpa и ip6.arpa) и ги делегира детските зони на RIRs, кои за возврат можат да ги делегираат зоните кои одговараат на сопствените ресурси на сопствените DNS сервери на организацијата (види, на пример, документацијата на RIPE NCC). точка на полето за контакт во базата на податоци WHOIS Документација на RIPE NCC Причината за добивање на АС број е поедноставна: потребно е да се воспостават јавни сесии на БГП! Имајте на ум дека IP адресите и ASN доделувањата се независни.Организацијата може да има ASN, но само IP-адреси за рутирање донесени од нејзиниот клиент, и слично, организацијата може да поседува IP-адреси, но да нема инфраструктура за рутирање и да се потпира на ISP со ASN за тоа. In practice, most smaller organizations are fine using IP space assigned by their ISP and don’t need their own ASN. Ownership becomes important for companies that run large-scale infrastructure, provide Internet services, or need independence and resilience—such as ISPs, hosting providers, CDNs, and enterprises with complex networks. For these organizations, direct resource ownership offers control, stability, and flexibility that simply leasing addresses from an ISP cannot match. What WHOIS and RIR Data Reveal Што откриваат WHOIS и RIR податоци IP адресата и ASN записите во RIR базите на податоци содржат информации за сопственикот на овие ресурси, но тие исто така може да содржат дополнителни метаподатоци како намера за користење на овие ресурси или адреси за контакт. Ајде да погледнеме некои ресурси.За да го направите тоа, ние ќе го користат протокол со комуналниот уред кој е командната линија, но имајте на ум дека постои и понов протокол базиран на HTTP наречен . WHOIS РДАП WHOIS РДАП We can query the RIPE database for the 2a01:c910:1:20e::/64 range with the following command: Која е H – 2a01:c910:1:20е::/64 Нејзиниот живот.ripe.net whois.ripe.net Ако серверот WHOIS не е назначен ( во овој случај) тогаш командата whois ќе го користи серверот IANA ( Во повеќето случаи, сепак, добра пракса е да го наведете вистинскиот WHOIS сервер за да бидете сигурни дека ќе го добиете очекуваниот запис. Нејзиниот живот.ripe.net коии.иана.орг Нејзиниот живот.ripe.net коии.иана.орг inet6num: 2a01:c910:1:20e::/64 netname: FR-LA-POSTE-DISIT country: FR descr: SERVICES admin-c: DL7113-RIPE tech-c: DL7113-RIPE tech-c: AA2914-RIPE status: ASSIGNED mnt-by: PC80199-MNT created: 2015-05-27T11:38:38Z last-modified: 2015-05-27T11:38:38Z source: RIPE Доделување на IPv6 во RIPE базата на податоци. Записот ни кажува многу работи: The name of the IP range gives us a hint as to its purpose. In this case it seems allocated to the French post. The country tells us that this range is probably used in France, although this attribute is completely free for the user to set and might be unrelated to IP geolocation. See the next section. The admin-c and tech-c attribute give us the administrative and technical contacts for this IP range. In this case AA2914-RIPE links to a record containing the addresses of Orange Business Services (the LIR) support center while DL7113-RIPE tells us the address of the French postal service IT services. Атрибутот mnt-by ни кажува на субјектот му е дозволено да направи промени на самиот запис inetnum. Записите за улоги поврзани во атрибутите admin-c, tech-c и mnt-by содржат поштенски адреси, телефонски броеви и адреси на е-пошта. На пример, ако погледнеме AA2914-RIPE: role: Administration Adresses remarks: Internet Support Center address: Orange Business Services address: 6 avenue Albert Durand address: 31700 Blagnac France phone: +33969397520 abuse-mailbox: abuse.orange-business@orange.com nic-hdl: AA2914-RIPE remarks: http://www.orange-business.com mnt-by: RAIN-TRANSPAC created: 2004-03-12T12:24:14Z last-modified: 2024-11-26T14:37:29Z source: RIPE Контакт точка во базата на податоци на RIPE. WHOIS and RIR Limitations WHOIS и RIR ограничувања WHOIS ≠ Геолокација WHOIS записи често се користат како прокси за IP геолокација. Сепак, оваа употреба е несигурна бидејќи не постои гаранција дека адресите во записи се точни или поврзани со вистинската локација каде што се користат IP адресите. Ова може да се каже за атрибутот на земјата: Документација documentation Ова ги идентификува земјите со користење на ISO 3166-2 буквите на кодовите на земјите. It has never been specified what this country represents. Тоа може да биде локацијата на седиштето на мултинационална компанија или каде се наоѓа серверот центар или дома на крајниот корисник. Therefore, it cannot be used in any reliable way to map IP addresses to countries. It has never been specified what this country represents. Затоа, не може да се користи на кој било сигурен начин за мапирање на IP адресите на земјите. Покрај тоа, грануларноста на доделувањето на IP адресите често е премногу груба за да претставува нешто под нивото на земјата. . Географски Географски Route Objects Are Informational Only Друг заеднички извор на конфузија во врска со WHOIS евиденциите доаѓаат од евиденциите за рути. Овие евиденции ни кажуваат кои ASN се очекува да објави IP опсег. На пример, следниот евиденција ни кажува дека 90.38.0.0/16 треба да биде објавен од страна на AS3215: route: 90.38.0.0/16 descr: France Telecom IP2000-ADSL-BAS origin: AS3215 mnt-by: FT-BRX created: 2012-12-11T10:07:49Z last-modified: 2012-12-11T10:07:49Z source: RIPE Запишување на патот во базата на податоци на RIPE. Сепак, овие записи се чисто информативни. Некои мрежни оператори може да ги користат за да ги отфрлат маршрутите каде што потеклото ASN не се совпаѓа, но некои може да не ги користат тие записи воопшто. Понатаму, овие записи може да постојат дури и ако IP опсегот навистина не е објавен. Како такви, овие записи не можат да се користат за да се утврди кој ASN го објавува IP опсегот. The Messiness of Public Registry Data The Messiness of Public Registry Data Базите на податоци на RIRs се јавно достапни, што ги прави одлични извори на информации за субјектите кои работат на Интернет. RIRs do not all support the same record types, and even for common records, the attributes supported might be different. Покрај тоа, некои полиња, како што е адресата, се слободни и нивната валидност не се спроведува од страна на RIRs. How IPinfo Transforms Static Records into Dynamic Intelligence Како IPinfo ги трансформира статичките записи во динамичка интелигенција Системот за адресирање на интернет е изграден врз моделот на кооперативно доверба: регистрите ги објавуваат распоредувањата, операторите ги документираат намера за рутирање, а заедницата ги претпоставува овие записи како точни. Сепак, овој модел, исто така, им овозможи на некои актери да маскираат малициозен или несакан сообраќај. На пример, веб crawlers може да ротираат IP адреси и ASNs често за да се избегне откривање (види овој Cloudflare За еден неодамнешниот пример). Блог пост Блог пост IPinfo податоци фрла светлина на овие прашања со нашите богати податоци: IP кој Нашите IP WHOIS мапи за податоци ги опфаќа нивните сопственици во стандардизиран и збогатен формат низ сите регионални интернет регистри. Овие податоци се корисни за да се разбере хиерархијата на доделување и историјата на IP адресата и, на пример, да се разликуваат стабилните IP адреси доделени од ISP од IP адресите од IP брокери кои може да ги менуваат рацете често. IP до компанијата и IP ранг Нашите IP до компанија и IP редови се дестилирани верзии на нашиот WHOIS сет на податоци кои секогаш ги враќаат најконкретните информации за IP адреса. Тие се корисни кога се грижи само за крајниот сопственик на IP адреса, а не за целосната хиерархија на доделување. Тие им овозможуваат на корисниците лесно да ги добијат сите IP редови кои припаѓаат на една организација со пребарување на неговото име или име на домен. IP to ASN Our IP to ASN data maps IP addresses to their origin ASN — the organization that routes the IP address on the Internet. This data can be used to know the ISP of a user, but also to filter human traffic from bot traffic often originating from hosting and cloud providers ASNs. IP Geolocation Нашите IP геолокациски податоци, информирани од ProbeNet, нашата платформа за мерење на интернет, обезбедуваат точна локација на ниво на градот, откривајќи несогласувања меѓу WHOIS кодовите на земјите и забележаната географија на IP. IP Privacy Detection Our IP privacy detection data flags IPs using VPNs, proxies, Tor nodes, residential proxies and other anonymizing services, enabling users to filter bot traffic, prioritize investigations, and handle anonymized connections with the appropriate caution. From Assumptions to Evidence Од претпоставки до докази Traditional registry data is valuable but incomplete. Without validation, it’s easy to misattribute ownership, geography, or routing, leading to costly blind spots. IPinfo користи јавно достапни сигнали, како што се податоците на WHOIS и геофиедите, стандардизира и ги организира тие информации во конзистентен формат, и ја гради таа основа со податоци од партнерот / продавачот, како и нашата сопствена сопствена интелигенција. Тоа им овозможува на мрежните бранители, истражувачите и операторите да се префрлат од претпоставки базирани анализи на докази-базирани мапирање на интернет ресурси, намалување на лажни позитиви и откривање на инфраструктура која би останала скриена во традиционалните WHOIS-само работни текови. Подготвени да гледаат подалеку од регистарските записи? Статичките податоци WHOIS и RIR ја раскажуваат приказната само дел од приказната. сетовите на податоци на IPinfo ги комбинираат информациите од регистарот со мерења во реално време, напредно откривање на приватноста и курирана интелигенција за да ви дадат целосен преглед на инфраструктурата на Интернет. Категорија:Максим Мушет Макс во моментов работи како инженер за податоци за IP геолокација на IPinfo. Претходно, тој беше пост-докторски истражувач на Универзитетот Сорбона, каде што работел на мерења на мултипат трасе.