Perplexity утверждает, что Cloudflare блокирует законных AI-помощников

В ответ на утверждения Cloudflare о том, что Perplexity игнорирует robots.txt и использует скрытый просмотр веб-страниц, Perplexity парирует, утверждая, что Cloudflare ошибочно помечает ИИ-помощников как веб-сканеры. По мнению Perplexity, таких помощников не следует ограничивать тем же образом, поскольку они запускаются пользователями, а не автоматизированными ботами.

Помощники Perplexity AI извлекают информацию по запросу

Система Perplexity не хранит и не организует информацию заранее. Вместо этого, она собирает веб-страницы конкретно когда пользователь задаёт вопрос. Например, если пользователь запрашивает последние отзывы о ресторанах, помощник соберет и обработает релевантные данные на месте. Этот метод отличается от традиционных поисковых роботов, которые автоматически индексируют большие объемы интернета без учета текущих потребностей пользователей при индексации.

Проще говоря, этот выборка по требованию похожа на то, как Google извлекает данные при срабатывании пользователя (например, для текста-в-речь или проверки сайта). Однако это не прямое сравнение, так как пользовательская триггерная выборка у Google имеет конкретные цели, такие как чтение вслух или проверка сайтов. Тем не менее, оба способа обходят ограничения robots.txt, которые обычно предназначены для предотвращения доступа автоматизированных ботов к определенным разделам вебсайта.

Так же, как и Perplexity утверждает, что их ИИ работает в качестве дополнения к запросу пользователя, а не выступает самостоятельно как блуждающий бот без учета дискретности. Компания подчеркивает, что они не сохраняют и не используют собранный контент для обучения своих моделей.

Критикует инфраструктуру Cloudflare

Критика была высказана в адрес инфраструктуры Cloudflare за неспособность эффективно различать вредоносный сбор данных (скрейпинг) и инициированный пользователем легитимный трафик. Perplexity утверждает, что метод Cloudflare управления ботами может привести к чрезмерной блокировке ответственно действующих сервисов. Perplexity далее утверждает, что неспособность платформы различать полезные инструменты искусственного интеллекта и вредоносных ботов приводит к неправильной категоризации реального веб-трафика.

Четкие доказательства поддерживают аргумент о том, что Cloudflare может препятствовать настоящему бот-трафику, подразумевая, что решение ограничить этот трафик могло возникнуть из неправильного понимания принципов работы их технологии.

Агенты или боты? Понимание искусственного интеллекта в открытом интернете.

Смотрите также

2025-08-05 12:09

Американские горки Биткоина: мечты о 300 тысячах долларов и сценарий конца света на 76% 🚀💥

Ах, Биткоин – цифровое золото, которое не хочет сидеть на месте. Один момент он взлетает выше 123 000 долларов, как ракета, заправленная кофеином и надеждой. В следующий момент какой-то мудрец предсказывает пузырь, который лопается так сильно, что у нас у всех перехватывает дыхание – возможно, падает на 76%, как какая-то космическая шутка, разыгранная богами рынка. Разве это не любовь-ненависть, а?

Великие ожидания и слабые надежды, основанные на прошлых заблуждениях

Криптогуру Майк Альфред, запрыгивая на платформу X (потому что что может быть моднее чем переписывание истории на социальной медиа-сцене), вызывает духи прошлых крахов. Это не просто сказки для запугивания детей — это уроки. Вспомните 2014 год? Биткоин был крошечным щенком по $1000, но затем внезапно превратился в собаку с двумя ногами, упав до всего лишь $200 — снижение на 80%, настоящий подвиг рыночной гимнастики. Перенесемся в 2018 год: наш обожаемый крипто актив достиг $20 000, только для того чтобы стремительно упасть до $3200 — падение на 84%, как безбазный роллер коастер.

А кто мог забыть 2021 год? Биткойн устремился к звёздам до $69 000, только чтобы рухнуть в 2022 году, израненный и уставший, достигнув дна около $16 000 после того, как FTX предположительно решила исчезнуть быстрее чем ваша зарплата после оплаты аренды. «80%», говорят они, возможно пытаясь представить это как незначительную неприятность.

Основываясь на всех этих цирковых представлениях, Альфред предсказывает, что следующее большое шоу увидит, как Bitcoin достигнет головокружительных 312 000 долларов — почему бы и не помечтать? — прежде чем неизбежное падение потянет цену вниз до все еще надежных 75 000 долларов, что является падением на 76%. И кульминация? Это произойдет не в 2025 году, а в 2026-м, потому что рынки любят держать нас в напряжении.

В зале Бекки кричит со своего места: «Ни за что! Realized Volatility говорит, что ты сумасшедший! Этого не произойдет!» Альфред, невозмутимый, парирует, что волатильность не статична — как капризный подросток, она меняет свое мнение и обладает талантом удивлять всех. Ах, вечный танец надежды и отчаяния — такова жизнь в крипто-стране.

Bitcoin chart

Смотрите также

2025-08-05 09:55

Cloudflare удаляет и блокирует Perplexity от сканирования веб-сайтов

Cloudflare принял меры по удалению проверенного бота Perplexity из своей системы и теперь препятствует доступу этого бота и всех его скрытых ботов к веб-сайтам. Это решение было принято после многочисленных жалоб пользователей на игнорирование руководством Perplexity правил robots.txt, что впоследствии подтвердило использование ими обманных методов для принудительного доступа своих ботов на сайты без разрешения.

Программа подтверждения ботов Cloudflare

Cloudflare использует инструмент под названием Verified Bots, который предоставляет одобренным ботам доступ к обходу сайтов, защищенных Cloudflare. Чтобы эти боты сохранили свой особый доступ, им необходимо соблюдать определенные правила, такие как следование указаниям файла robots.txt, в системе Cloudflare.

Было обнаружено, что Perplexity нарушает правила Cloudflare, которые требуют от ботов соблюдения директив robots.txt и избегания использования IP-адресов, не предназначенных для поискового сервиса.

Cloudflare обвиняет Perplexity в использовании скрытного сканирования

Cloudflare обнаружила поведение, указывающее на интенсивную автоматическую веб-скрейпинг, направленную на обход правил robots.txt.

Поведение скрытного перемещения: вращающиеся IP-адреса

Один из способов перефразирования в простой и понятной манере может быть таким: Perplexity обходит препятствия, вращая адреса Интернет-протокола (IP), изменяя номера автономных систем (ASNs) и притворяясь различными веб-браузерами, такими как Google Chrome.

Проще говоря, Perplexity поддерживает утверждённый список интернет-протоколов (IP) адресов, которые присваиваются конкретным автономным системам (AS). Сканирование с этих IP-адресов помогает отличить настоящую веб-активность сканирования от Perplexity от другой.

Простыми словами, номер автономной системы (ASN) — это специальный идентификатор в интернет-инфраструктуре, который присваивает уникальный номер набору IP-адресов. Например, когда вы подключаетесь к интернету через интернет-провайдера (ISP), ваше соединение использует IP-адрес, принадлежащий ASN, выделенному этому конкретному провайдеру.

В попытке обойти ограничения, когда доступ был заблокирован, Perplexity изменила свой IP-адрес на неофициальные, не входящие в официальный список IP-адресов Perplexity. Это включало совершенно другие IP-адреса, связанные с отличным номером автономной системы (ASN).

Поведение скрытного переползания: подделанный пользовательский агент

Еще одно скрытое действие, обнаруженное компанией Cloudflare, заключалось в том, что Perplexity изменил свою браузерную идентификацию для обхода усилий по блокировке своего инструмента веб-сканирования через файл robots.txt.

  • ПерплекситиБот
  • Пользователь Perplexity

Как специалист по цифровому маркетингу, я заметил, что Perplexity, пытаясь обойти блокировки пользовательских агентов, замаскировался под браузер Chrome 124, работающий на системе Mac. Эта тактика известна как спуфинг – когда недобросовестные краулеры притворяются законными браузерами.

Это строка пользовательского агента для веб-браузера: «Macintosh computer running macOS 10.15.7 с движком WebKit от Apple (похож на Gecco), версия Chrome 124 и Safari версии 537.36.»

Cloudflare удалил Perplexity из списка

Как опытный эксперт по SEO, я был свидетелем эволюции интернета в течение последних трех десятилетий. Одной из неизменных констант является фундамент доверия, на котором он зиждется. Боты-краулеры, будучи неотъемлемой частью веба, должны быть прозрачными, иметь определенную цель, выполнять конкретные задачи и прежде всего следовать рекомендациям и предпочтениям веб-сайта. Изучая поведение Perplexity, я заметил, что оно не соответствует нашим предпочитаемым практикам. В результате мы удалили Perplexity из списка проверенных ботов и внедрили правила, использующие эвристики для предотвращения скрытой краулинговой деятельности.

Выводы

  • Нарушение политики Cloudflare в отношении проверенных ботов
    Perplexity нарушила политику Cloudflare в отношении проверенных ботов, которая предоставляет доступ к сканированию доверенным ботам, соблюдающим здравые правила, такие как соблюдение протокола robots.txt.
  • Перплексити использовала скрытые тактические методы сканирования, используя незадекларированные IP-адреса из разных ASNs и поддельные агенты пользователей для обхода ограничений после блокировки доступа к контенту.
  • Подмена пользовательского агента (UA spoofing) позволяла боту Perplexity маскироваться под обычного пользователя, представляясь как браузер Chrome на операционной системе macOS в попытках обойти фильтры, которые блокируют известные поисковые агенты.
  • Ответ Cloudflare: Cloudflare исключил Perplexity из списка проверенных ботов и внедрил новые правила блокировки, чтобы предотвратить скрытое сканирование.
  • Влияние SEO на пользователей Cloudflare может захотеть проверить, блокирует ли Cloudflare обход сайтов через Perplexity, и, если да, включить обход с помощью их панели управления в Cloudflare.

Cloudflare исключила Perplexity из списка проверенных ботов из-за неоднократных нарушений политики. Вместо соблюдения правил, изложенных в robots.txt, Perplexity манипулировала своей идентификацией, переключая IP-адреса, изменяя номера автономной системы (ASNs) и маскируясь под обычный веб-браузер. Такое обманчивое поведение было направлено на уклонение от обнаружения. Действие Cloudflare по блокировке бота демонстрирует твердую позицию против агрессивного использования ботов со стороны Perplexity.

Смотрите также

2025-08-04 23:40

ChatGPT приближается к 700 миллионам еженедельных пользователей, сообщает OpenAI

По заявлению, сделанному на этой неделе Ником Терли, вице-президентом и главой приложения ChatGPT, ожидается, что платформа вскоре будет насчитывать около 700 миллионов еженедельных активных пользователей.

Эта значительная веха означает существенный скачок с 500 миллионов в марте до практически четырехкратного увеличения по сравнению с тем же периодом предыдущего года.

Тёрли поделился обновлением на платформе X, написав:

На этой неделе мы ожидаем, что ChatGPT превысит 700 миллионов еженедельных активных пользователей, что является значительным увеличением по сравнению с 500 миллионами на конец марта и в четыре раза больше, чем в прошлом году. Каждый день люди и команды оттачивают свои навыки, генерируют новые идеи и решают все более сложные задачи. Впереди захватывающая неделя! Я глубоко благодарен команде за постоянное совершенствование ChatGPT и приверженность нашей цели — сделать ИИ доступным для всех.

Как это сравнить с другими поисковыми системами?

В отличие от традиционных поисковых систем, они редко раскрывают количество активных пользователей в неделю (AУи), что затрудняет прямые сравнения. Вместо этого такие компании, как Google, делятся общими данными, например, общим количеством запросов или статистикой использования за месяц.

В начале своего пути, Гугл обрабатывал огромное количество ежедневных поисковых запросов и имел глобальный охват, охватывающий миллиарды пользователей. Тем не менее, на начальных этапах его рост был в основном связан с объемом поискового трафика, который он получал.

Через 6 лет после запуска в 2004 году Google обрабатывал примерно 200 миллионов поисковых запросов в день. К 2009 году это число выросло до поразительных 4 миллиардов ежедневных поисков, что ознаменовало более чем десятилетие с момента основания компании.

В 2023 году было обнаружено, что функция чата на базе искусственного интеллекта в поисковой системе Bing от Microsoft, известная как Bing Chat, привлекла около 100 миллионов активных пользователей в день. Важно отметить, что эта цифра относится только к разговорному интерфейсу Bing, а не ко всей поисковой системе Bing.

Как выделяется рост ChatGPT

В отличие от обычных поисковых систем, которые набирали свою пользовательскую базу в эпоху ограниченного проникновения интернета, ChatGPT появился на полностью сформированном цифровом рынке, что позволило с самого начала добиться быстрого глобального внедрения. Примечательно, что несмотря на это, ему удалось достичь впечатляющего роста согласно текущим отраслевым критериям.

Несмотря на то, что OpenAI не раскрывает ежедневную статистику пользователей, данные о еженедельной активной аудитории (WAU) дают представление о стабильном использовании среди широкого круга пользователей. Еженедельные показатели обычно являются более надежными индикаторами ценности продукта по сравнению с ежедневными колебаниями.

Почему это важно

Рост использования ChatGPT свидетельствует о более широком изменении того, как люди находят информацию в интернете.

В качестве профессионала в области цифрового маркетинга я недавно столкнулся с некоторыми интригующими выводами из отчета The Wall Street Journal. Оказывается, что аналитическая компания Datos обнаружила интересную тенденцию относительно инструментов на базе ИИ вроде ChatGPT и Perplexity. Согласно их данным, эти инструменты сейчас составляют 5,6% всех поисковых запросов браузера настольных компьютеров в США, что более чем вдвое превышает долю по сравнению с прошлым годом.

Среди тех, кто начал использовать продвинутые языковые модели искусственного интеллекта в 2024 году, около 40% посещений веб-браузера теперь направлены на инструменты поиска на основе ИИ. С другой стороны, доля посещений традиционных поисковых систем этими пользователями снизилась с 76% до 61%, как сообщает Datos. Это свидетельствует о растущей предпочтительности инструментов поиска на основе ИИ по сравнению с традиционными поисковыми системами в 2024 году.

Заглядывая в будущее

Когда пользовательская база ChatGPT достигает примерно семисот миллионов пользователей в неделю, платформа OpenAI начинает приближаться по масштабу к широко известным товарам потребления.

С появлением искусственного интеллекта (AI) в качестве основного источника ответов маркетологи должны адаптировать свои тактики в отношении видимости и взаимодействия с аудиторией. Чтобы не отставать от конкурентов, стратегический фокус на сбалансированном сочетании оптимизации AI с традиционной поисковой оптимизацией (SEO) будет критически важным.

Смотрите также

2025-08-04 21:09

Биткоин и ETFs: Чокнутый забег, о котором тебе никто не рассказывал!

Итак, похоже, сложность добычи Bitcoin достигла исторического максимума — как Эверест для цифровых золотоискателей, только с меньшим количеством шерпов и большим количеством экзистенциального ужаса. Сейчас она составляет ошеломляющие 127,6 триллионов, что в основном больше нулей, чем на банковском счете вашей бабушки. Создавать новые BTC? Легче, чем научиться ходить, сложнее, чем уговорить кошку делать трюки. Майнерам теперь нужен парк суперкомпьютеров, вероятно, работающих на кофе и молитве. ☕🤖

Но подождите, есть проблеск надежды! Ожидается небольшое падение примерно на 3% 9 августа, что снизит сложность до 123,7 триллиона. Как плохой парень, он просто немного передохнул, прежде чем вернуться еще более интенсивным и требовательным. CoinWarz говорит, что система Биткойна пытается поддерживать стабильную выработку блоков, даже когда майнеры развлекаются или прячутся под столами. 🕺🖥️

Больше майнеров, больше проблем? Нет, больше конкуренции!

Увеличение сложности означает, что больше майнеров включились в игру. Это как беговое колесо для хомяков, на котором все вдруг начали бежать быстрее — делает сеть более защищенной и децентрализованной, или так они утверждают. После кратковременного приступа паники в июне, когда сложность упала до 116.9 триллиона, майнеры объединились, будто это была Черная пятница. Сейчас все сводится к тому, у кого самые мощные установки.

СООБЩЕНИЕ! Сложность майнинга $BTC достигла НОВОГО ИСТОРИЧЕСКОГО МАКСИМУМА.
Источник: @BTCTN
— Mario Nawfal’s Roundtable (@RoundtableSpace) 4 августа 2025 года

А вы поверите? Несмотря на весь этот шум и суету, прибыль майнеров достигла рекордно высокого уровня в $52.63 миллиона за экзахэш в день после сокращения награды вдвое. Честно говоря, это похоже на зарабатывание состояния игрой в судоку — если бы судоку платила биткоинами. Возможно, им просто везет или их машины умнее нас, увеличивая прибыли даже несмотря на хаос.

О, и майнеры тоже не спешат обналичивать свои средства. Похоже, они держатся за свои монеты, как за карту сокровищ, с почти 50-процентным снижением оттока средств. Возможно, они думают: «Держитесь крепче, будущее светло», или, может быть, просто потому, что они уже достаточно богаты, чтобы расслабиться. 🍹

Эй, посмотри на это! ETF достигают рекордных показателей!

Держитесь за свои шляпы—общие активы под управлением в золотых и биткоин-ETF только что превысили $500 млрд. Да, миллиард с большой ‘Б’. Золотые ETF отдыхают на отметке $325 млрд, а биткоин-ETF взлетели от $20 млрд до внушительных $162 млрд после запуска спотовых ETF в США. Тот, кто сказал, что старому активу нельзя научить новые трюки, явно пропустил сообщение.

Цена Bitcoin взлетела примерно на 175% с тех пор, как ажиотаж вокруг ETF захлестнул рынок, оставив золото позади с лишь 66%. Похоже, люди делают ставку на американские горки Bitcoin, а не на медленное, старомодное путешествие золота. Кто бы мог подумать, что в мире финансов Bitcoin — это новый яркий парень, готовый украсть весь гром и ваш кошелек? 🎢🔥

Итак, если вы когда-либо задавались вопросом, останется ли Биткоин с нами, просто помните: он не просто поднимается в рейтингах — он творит историю, делая один волатильный, захватывающий шаг за раз.

Смотрите также

2025-08-04 18:42