IPinfo розширила своє партнерство з Google Cloud Platform, надаючи користувачам BigQuery миттєвий доступ до IP-інтелекту безпосередньо в їх робочих потоках в хмарі. Для IPinfo Lite, IPinfo Core, Plus та Налаштованих наборів даних — тепер доступних як в США, так і в ЄС — розробники та аналітики можуть розширити свої трубопроводи даних з повним контекстом IP, все без виходу з екосистеми GCP. Нові списки даних Нові списки даних Чому це має значення Незалежно від того, чи намагаєтеся ви відзначити підозрілу діяльність, персоналізувати контент або проаналізувати моделі трафіку, IP-дані часто є відсутнім посиланням. ІПінфо Інформація це вирішує. Наталя Наталя Наталя Наталя Прискорений час огляду: збагачуйте сотні мільйонів рядків за секунди, використовуючи інженерні UDF, побудовані для продуктивності BigQuery. Немає оперативного підйому: «нульове копіювання» захищених акцій означає, що не потрібно турбуватися про поглинання даних, зберігання або синхронізацію. Простота закупівель: Всі набори даних доступні через Google Cloud Marketplace, з інтегрованим розрахунком та регіональними варіантами дотримання. Результат: Ваші дані залишаються у вашому сховищі даних і переходять від сирових журналів до збагачених уявлень практично без тертя. Від єдиного набору даних до повного портфеля В минулому році, Наш перший набір даних на Google Cloud Marketplace: IP-до-країни та ASN-дані, доступні як безпечний обмін через BigQuery. Він дав користувачам простий, безкодний спосіб збагатити IP-адреси місцезнаходженням та власністю мережі. Ми запустили Ми запустили Тепер ця інформація доступна як , і до нього приєднуються два нових готових до виробництва набори даних: та , а також Разом ці опції надають розробникам набагато більшу глибину і гнучкість, щоб збагатити IP-адреси, знайдені в журналах веб-трафіку, подіях безпеки, аналітичних таблицях та будь-якому іншому робочому навантаженні, що потрапляє в BigQuery, і діяти на цьому контексті на місці. ІПінфо Lite ІПінфо Core ІПінфо Плюс Космічні дані ІПінфо Lite ІПінфо Core ІПінфо Плюс Космічні дані Інтеграція: ближчий погляд Набори даних IPinfo поставляються як захищені акції в BigQuery, що означає, що немає необхідності завантажувати, вводити або синхронізувати що-небудь. Немає ключів API. Немає зовнішніх дзвінків. Просто швидко збагачуйте свої IP-адреси за допомогою геологічного розташування на рівні міста, даних ASN, знамен анонімізатора та багато іншого. Як і наш та , ми зберігаємо ваші GCP IP-набори в середовищі BigQuery з регулярними оновленнями, відповідно до вашої передплати. IPinfo Lite оновлюється щодня в BigQuery. IPinfo Core і IPinfo Plus оновлюються щомісяця за замовчуванням. Вам потрібні більш свіжі дані (щоденно або щотижня) або додаткові поля? Наша команда Custom Data Solutions може надати спеціальний набір даних на час і в регіоні, який ви вказали. Хмарні дані Push Снігопадні дані Хмарні дані Push Снігопадні дані Quick Demo: Використовуючи Lite UDF Кожен набір даних поставляється з вбудованою функцією UDF (User-Defined Function), яка дозволяє легко шукати IP-адреси і повертати збагачені дані в черзі у ваших запитах. Ім'я UDF відповідає набору даних і забезпечує швидке, в складі збагачення. Нижче наведено коротку демонстрацію, яка показує огляд Lite в консолі BigQuery: Приклад – повернення повного запису: SELECT
    ip,
    ipinfo_lite.lite(ip) AS lite
FROM 
    ipinfo_lite.ip_sample;
 Приклад – виберіть тільки поля, які вам потрібні: SELECT
    ip,
    ipinfo_lite.lite(ip).country AS country,
FROM 
    ipinfo_lite.ip_sample;
 Порада: Для великих таблиць журналів спочатку збагачуйте окремі IP-адреси, а потім приєднуйтеся до них (див. кращі практики щодо витрат та продуктивності нижче). . переглянути IPinfo GCP developer docs переглянути IPinfo GCP developer docs Вартість та ефективність кращих практик (BigQuery) BigQuery в першу чергу стягує рахунки за оброблені байти (виконання запитів) та зберігання. IP-збагачення невелике порівняно з обсягом сирого журналу, якщо ви добре формуєте запити. ось що ми рекомендуємо контролювати витрати, зберігаючи високу продуктивність: Спочатку збагатіть окремі IP-адреси. витягніть IP-адреси SELECT DISTINCT зі своїх джерел журналів, збагатіть один раз, а потім приєднайтеся назад. Обмеження до розділів дати, відповідних типів журналів або конкретних служб перед збагаченням. Виберіть тільки поля, які вам потрібні. Пошук повертає єдиний структурований запис (BigQuery STRUCT) з багатьма втіленими полями. Проектувати тільки поля, які вам цікаві, такі як країна, прізвище або прапори конфіденційності, необхідні для правила, щоб запити були швидкими і недорогими. Використовуйте валідатор сухих запусків / запитів. Переглянути байти, скановані перед запуском великих завдань. Заплануйте роботу, яка збагачує нові IP-адреси (інкрементальні) і повторно використовуйте їх у різних командах. Кеш в таблицях, де це допомагає.Якщо ті ж IP-адреси повторюються в панелях, зберігайте збагачені результати. Тестування в невеликому масштабі. запустити з LIMIT або пробний день спочатку; масштабувати, як тільки вихід виглядає правильно. Дотримуючись цих моделей, є єдиним найбільшим фактором у тому, щоб збагачення було швидким і економічно ефективним. Який тип даних пропонує кожен набір даних? IPinfo Lite (почніть тут) Наш безкоштовний набір даних IPinfo Lite вводить концепцію збагачення IP в BigQuery. Він надає точні дані країни та ASN для IPv4 і IPv6 адрес, що оновлюється щодня. Оскільки він легкий і самообслуговує через BigQuery Analytics Hub, Lite є найпростішим способом випробувати дані IPinfo, підтвердити свій шаблон збагачення та підтвердити мапірування полів перед масштабуванням до більш багатих наборів даних. Як тільки вам зручно збагачувати IP-адреси в BigQuery, ви можете використовувати більш глибокий інтелект з нашими преміальними наборами даних, доступними через Google Cloud Marketplace: Від Click до Query за хвилини Ми пропонуємо нашу базу даних IPinfo Lite через платформу Google Cloud Analytics Hub, але для наших преміальних баз даних, таких як IPinfo Core, IPinfo Plus та будь-які налаштовані IP бази даних, ми пропонуємо їх через Google Cloud Marketplace. Ось як почати: IPinfo Lite (США/ЄС): щоденно оновлюються дані про країну та ASN. Доступ безпосередньо через BigQuery Analytics Hub — немає витрат або кредитної картки. IPinfo Core (США/ЄС): Підпишіться за допомогою Google Cloud Marketplace, щоб збагатити IP-адреси з точністю на рівні міста, VPN/проксі/хостинговими прапорами та інформацією про оператора. IPinfo Plus (США/ЄС): Підписуйтеся і отримуйте всі сигнали IPinfo Core і більше даних IP, включаючи анонімну ідентифікацію служби, радіус точності та час останньої зміни розташування / ASN. Підписуйтеся на щомісячне оновлення або розмовляйте з продажами для налаштування графіків. Налаштовані набори даних (Будь-який регіон): зв'яжіться з нами, щоб налаштувати набір даних на замовлення, щоб задовольнити ваші потреби. УС ЄС Підписатися Поговоріть з продавцями Підписатися Поговоріть з продавцями Зв'язатися з нами Потрібна допомога? перевірте наш . Керівництво по інтеграції BigQuery Керівництво по інтеграції BigQuery Як розробники використовують дані IPinfo в BigQuery Команди з безпеки, інженерії даних, зростання та аналітики використовують дані IPinfo в BigQuery для набагато більше, ніж для базових пошуків. На рамп для багатьох користувачів: експорт журналів від Cloud Logging до BigQuery, дедупе IP-адреси, збагачення з IPinfo Core або Plus, а потім приєднання назад. Log enrichment & fraud/risk detection. Матеріалізуйте щоденну таблицю унікальних IP-адресів, збагачених з Core або Plus, а потім приєднуйтеся до інших таблиць фактів (аут, події продукту, розрахунок) за необхідністю. Reusable enriched IP lookup table Роль використання за країною/регіоном/містом для керівництва розширенням, локалізацією або плануванням мережі. Geo aggregation & traffic analytics Групуйте вхідний трафік за класом ASN або хостингу (хмара проти споживчого ISP), щоб зрозуміти вплив і налаштувати політику брандмауера / WAF. Security posture & threat surface mapping Змішайте прапори конфіденційності (анонімні, хостинг, супутниковий, мобільний) з аутх-помилками, обмеженнями тарифів або спробами оплати для виявлення ботів, скасування або сигналів про придбання облікового запису. Anomalous access & abuse hunting Використовуйте збагачення країни/регіону, щоб запустити таблиці прав, які дальні сервіси читають для доступності контенту, податкової логіки або регулюючих обмежень. Regional feature controls & licensing Додайте географічний та мережевий контекст до даних атрибуції, щоб порівняти продуктивність кампанії за ринком, мобільним проти фіксованим або положенням конфіденційності (VPN/анонімний як когорт). Marketing & growth segmentation Експорт збагачених IP-полів як модельних функцій для оцінювання шахрайства, прогнозування або персоналізації в Vertex AI / BigQuery ML. ML feature engineering При обміні наборами даних з зменшенням PII між партнерами обом сторонам надайте спільні географічні / мережеві атрибути, щоб дозволити агрегований аналіз без викриття ідентифікаторів. Data clean rooms & partner joins Співвідношення екгресу, затримки та використання послуг з географією користувача та класом мережі; миттєвий географічний розподіл доступу для аудитів та регуляторних звітів. Infrastructure & cost observability + compliance reporting Приведіть IP-інтелект туди, де живуть ваші дані Як єдиний провайдер IP-даних з інтеграцією BigQuery через Google Cloud Marketplace, ми розуміємо унікальні потреби користувачів BigQuery. Незалежно від того, чи ви захищаєтеся від шахрайства, посилюєте персоналізацію або забезпечуєте відповідність, ви тепер маєте миттєвий доступ до IP-інтелекту, який вам потрібен, саме там, де живуть ваші дані. Щоб вивчити повний спектр IPinfo наборів даних на GCP, Щоб дізнатися більше, порівняйте набори даних та зв'яжіться з нашою командою. Відвідайте наш сайт Відвідайте наш сайт Google Cloud є торговою маркою компанії Google LLC. Про автора : Фернанда Донні Як менеджер з маркетингу продуктів, Фернанда допомагає клієнтам краще зрозуміти, як продукти IPinfo можуть задовольнити їхні потреби.

This story contains new, firsthand information uncovered by the writer.

Read Documentation

Try Our Free Tools

View All Products and Pricing

Це аудіо створено мовою оригіналу історії!

Надто довго; Читати

Boost your HackerNoon story @ $159.99! 🚀

IP-дані, розроблені для Google Cloud: IPinfo розширює присутність з новими наборами даних для BigQuery

About Author

КОМЕНТАРІ

ПОВІСИТИ БИРКИ

ЦЯ СТАТТЯ БУЛА ПРЕДСТАВЛЕНА В

Related Stories

Light-Mode

Classic

Newspaper

Dark-Mode

Neon Noir

Minty

HN StartUps