Netcraft

Netcraft — это британская компания, специализирующаяся на интернет-исследованиях, анализе рынка хостинга, кибербезопасности и мониторинге веб-серверов. Основана в 1994 году, известна своими ежемесячными отчётами о доле рынка веб-серверов, а также сервисами по выявлению фишинговых сайтов и защите от киберугроз.

История

Компания Netcraft была основана в 1994 году в Бате (Великобритания) Майком Престоном (Mike Preston) и Питом Майлзом (Pete Miley). Первоначально она занималась разработкой программного обеспечения для веб-серверов и хостинга. В 1995 году Netcraft запустила ежемесячное исследование рынка веб-серверов, которое стало одним из первых и наиболее авторитетных источников данных о доле рынка различных серверных технологий (Apache, Nginx, Microsoft IIS и других).

В 2000-х годах компания расширила деятельность в область кибербезопасности, начав мониторинг фишинговых и мошеннических сайтов. В 2008 году Netcraft запустила сервис «Netcraft Anti-Phishing Toolbar» — браузерное расширение для защиты пользователей от фишинга. В 2010-х годах компания сосредоточилась на анализе облачных провайдеров и хостинга, а также на предоставлении услуг по блокировке вредоносного трафика.

Основные направления деятельности

Мониторинг и анализ рынка веб-серверов

Netcraft проводит ежемесячные исследования, в ходе которых анализирует миллионы доменов и IP-адресов, чтобы определить, какие веб-серверы (например, Apache, Nginx, Microsoft IIS, Google Web Server) используются наиболее часто. Эти данные публикуются в открытом доступе и широко цитируются в отраслевых изданиях. Отчёты Netcraft позволяют отслеживать динамику популярности серверных технологий, включая переходы с одного сервера на другой.

Кибербезопасность и антифишинг

Netcraft предоставляет услуги по выявлению и блокировке фишинговых сайтов, мошеннических ресурсов и вредоносного ПО. Компания сотрудничает с банками, платёжными системами и государственными организациями, помогая оперативно удалять опасные сайты. Сервис «Netcraft Anti-Phishing Feed» используется в браузерах, почтовых клиентах и системах безопасности для автоматической блокировки фишинговых ссылок.

Анализ хостинг-провайдеров

Netcraft оценивает надёжность, производительность и безопасность хостинг-провайдеров по всему миру. Компания публикует рейтинги хостингов, основанные на времени безотказной работы (uptime), скорости загрузки сайтов и других параметрах. Эти данные используются как веб-мастерами, так и корпоративными клиентами при выборе хостинга.

Инструменты для веб-мастеров

Netcraft предлагает ряд бесплатных онлайн-инструментов, включая:

• What's this site running? — определение технологий, используемых на сайте (сервер, CMS, фреймворки, библиотеки).
• Site report — подробный отчёт о безопасности и конфигурации сайта.
• SSL checker — проверка корректности установки SSL-сертификата.
• Ping — проверка доступности сервера.

Технологии и методы

Netcraft использует несколько методов сбора данных:

• Сканирование IP-адресов — компания регулярно сканирует IPv4-адреса, отправляя HTTP-запросы к открытым портам (80, 443) и анализируя ответы серверов.
• Анализ DNS — изучение записей DNS для определения провайдера хостинга и IP-адреса.
• Сбор данных из браузерных расширений — пользователи, установившие панель инструментов Netcraft, добровольно передают анонимные данные о посещаемых сайтах, что помогает выявлять новые угрозы.

Критика и ограничения

Методология Netcraft подвергалась критике за то, что она не учитывает все сайты (например, сайты, работающие на нестандартных портах, или сайты, использующие HTTPS с самоподписанными сертификатами). Также данные о доле рынка веб-серверов могут быть искажены из-за большого количества неактивных или малоизвестных доменов. Тем не менее, Netcraft остаётся одним из наиболее цитируемых источников в этой области.

Влияние и признание

Отчёты Netcraft регулярно цитируются в таких изданиях, как Wired, TechCrunch, The Register, а также в официальных блогах крупных технологических компаний (например, Microsoft, Google). Данные Netcraft используются для анализа трендов в веб-технологиях, а также для оценки эффективности мер безопасности в интернете.

Интересные факты

• Netcraft — одна из немногих компаний, которая ведёт непрерывный мониторинг веб-серверов с 1995 года.
• Панель инструментов Netcraft для браузеров была одним из первых инструментов защиты от фишинга, доступных широкой публике.
• В 2013 году Netcraft помогла выявить масштабную фишинговую кампанию, нацеленную на пользователей банков в Великобритании.

Источники

• Официальный сайт Netcraft (netcraft.com)
• Статья «Netcraft» в английской Википедии
• Публикации в изданиях Wired, TechCrunch, The Register
• Материалы конференций по кибербезопасности (RSA Conference, Black Hat)