Facebook, Google, Twitter, Yahoo и Microsoft объединились с целью борьбы в интернете с детской порнографией. Компании подключили свои серверы к общей таблице хэш-сумм, позволяющей блокировать попадание нежелательного контента в сеть на этапе загрузке пользователем.

Кооперация крупнейших ИТ-компаний

Компании Facebook, Google, Twitter, Yahoo и Microsoft приступили к использованию таблицы хэш-сумм, формируемой организацией Internet Watch Foundation (IWF), членами которой они являются, для борьбы с детской порнографией.

Таблица хэш-сумм

В интернете находятся миллиарды изображений. Чтобы найти среди них картинки с детской порнографией, участники IWF проверяют все проходящие через их сервисы изображения. Если хэш-сумма изображения совпадает с хэш-суммой из таблицы, картинка блокируется. Используются три типа хэш-сумм — PhotoDNA (разработанный Microsoft), MD5 и SHA-1.
Хэш-сумма — своего рода идентификатор файла. Два разных изображения не могут иметь одну и ту же сумму. В то же время копия изображения будет иметь ту же хэш-сумму, что и оригинал. Таблица с хэш-суммами изображений формируется экспертами вручную. На данный момент она содержит тысячи записей, уточняет Telegraph.

Суть работы экспертов

Специалисты IWF как сами ищут и помечают нежелательные изображения, так и принимают и обрабатывают жалобы от интернет-пользователей. Они также используют в качестве источника изображений базу данных Child Abuse Image Database (CAID) МВД Великобритании. Сколько специалистов работает в штате, не сообщается.

Алгоритм работы IWF с изображениями

Ежедневно члены IWF способны удалять из результатов поиска около 500 веб-страниц, содержащих одно или большее число порнографических картинок. Таблица обновляется также ежедневно.

Преимущества метода

По словам представителей IWF, новая схема работы позволит ускорить идентификацию нежелательного контента и его удаление из сети. Члены организации сверяют хэш-суммы в момент загрузки изображений в сеть, поэтому пользователи не смогут загрузить повторно изображения, которые уже были идентифицированы как нежелательные.
Представители IWF утверждают, что вскоре подключиться к таблице сможет любой официальный член организации. Это могут быть как поисковые серверы, так и облачные сервисы, компании по предоставлению услуг хостинга, социальные сети и чаты, дата-центр, службы знакомств и сервисы фильтрации.

Сложности работы

Вместе с тем в организации признаются, что новая технология позволяет выявлять только изображения, содержащие нежелательный контент. Над аналогичной функцией для видео специалисты работают, но когда инструмент будет готов, пока неизвестно. Кроме того, представляет определенные сложности тот факт, что после редактирования — пусть даже незначительного (такого как обрезка или изменение размера) — хэш-сумма изображения изменяется.

Подробнее: http://internet.cnews.ru/news/top/index.shtml?2015/08/11/598465