Nano Hash - криптовалюты, майнинг, программирование

IIS 6.0 не будет передавать запросы ботов на Prerender.io

У нас есть веб-сайт, закодированный с помощью AngularJS. Поскольку большая часть сайта создается с помощью javascript, поисковые системы не могут индексировать страницы. Итак, мы настроили Prerender.io для индексации нашего сайта. Это нормально, и я могу просматривать rawhtml с их сайта.

Если я введу в браузер следующее, Prerender.io правильно отобразит необработанный HTML:
http://service.prerender.io/http://www.swiftlearning.com/?_escaped_fragment_=/логин

Проблема в том, что я не могу заставить IIS 6 отправлять запросы бота в Prerender.

Когда я беру этот URL: http://www.swiftlearning.com/#!/login и замените #! с ?_escaped_fragment_=, что приводит к http://www.swiftlearning.com/?_escaped_fragment_=/login

IIS возвращает исходную страницу веб-сайта и отображает следующий URL-адрес: http://www.swiftlearning.com/?_escaped_fragment_=/login#!/home

Я настроил Wireshark для захвата трафика. Он показывает, что приходит запрос, а затем приходит ответ с веб-сайта, а не с prerender.io.

Я создал файл web.config (с тем, что я уже нашел на StackOverflow) со следующей конфигурацией.

<?xml version="1.0"?>
<configuration>
    <system.web>
        <httpProtocol>
            <customHeaders>
                <add name="X-Prerender-Token" value="dTaPu5H97XTS618Y8edm" />
            </customHeaders>
        </httpProtocol>
        <httpModules>
            <add name="Prerender" type="Prerender.io.PrerenderModule, Prerender.io, Version=1.0.0.2, Culture=neutral, PublicKeyToken=null"/>
        </httpModules>
        <rewrite>
            <rules>
                <!--# Only proxy the request to Prerender if it's a request for HTML-->
                <rule name="Prerender" stopProcessing="true">
                    <match url="^(?!.*?(\.js|\.css|\.xml|\.less|\.png|\.jpg|\.jpeg|\.gif|\.pdf|\.doc|\.txt|\.ico|\.rss|\.zip|\.mp3|\.rar|\.exe|\.wmv|\.doc|\.avi|\.ppt|\.mpg|\.mpeg|\.tif|\.wav|\.mov|\.psd|\.ai|\.xls|\.mp4|\.m4a|\.swf|\.dat|\.dmg|\.iso|\.flv|\.m4v|\.torrent))(.*)" ignoreCase="false" />
                    <conditions logicalGrouping="MatchAny">
                        <add input="{HTTP_USER_AGENT}" pattern="baiduspider|facebookexternalhit|twitterbot" />
                        <add input="{QUERY_STRING}" pattern="_escaped_fragment_" ignoreCase="false" />
                    </conditions>
                    <action type="Rewrite" url="http://service.prerender.io/http://{HTTP_HOST}{REQUEST_URI}" appendQueryString="false" />
                </rule>
                <rule name="Redirect To Index" stopProcessing="true">
                    <match url=".*" />
                    <conditions>
                        <add input="{REQUEST_FILENAME}" matchType="IsFile" negate="true" />
                        <add input="{REQUEST_FILENAME}" matchType="IsDirectory" negate="true" />
                    </conditions>
                    <action type="Rewrite" url="/" />
                </rule>
            </rules>
        </rewrite>
    </system.web>
</configuration>

Я надеюсь, что не запутал вопрос своим объяснением. Любая помощь будет оценена.

Спасибо,

Дана


Ответы:


1

Что ж, получается, что IIS 6 не обрабатывает редиректы. Редирект стал возможен с IIS 7. Итак, дело сводится к апгрейду нашего сервера, который по разным причинам весьма внушаем, или к какому-то взлому.

Спасибо за внимание к вопросу.

Я не могу выбрать это в качестве ответа до завтра.

Дана

15.03.2016
Новые материалы

Кластеризация: более глубокий взгляд
Кластеризация — это метод обучения без учителя, в котором мы пытаемся найти группы в наборе данных на основе некоторых известных или неизвестных свойств, которые могут существовать. Независимо от..

Как написать эффективное резюме
Предложения по дизайну и макету, чтобы представить себя профессионально Вам не позвонили на собеседование после того, как вы несколько раз подали заявку на работу своей мечты? У вас может..

Частный метод Python: улучшение инкапсуляции и безопасности
Введение Python — универсальный и мощный язык программирования, известный своей простотой и удобством использования. Одной из ключевых особенностей, отличающих Python от других языков, является..

Как я автоматизирую тестирование с помощью Jest
Шутка для победы, когда дело касается автоматизации тестирования Одной очень важной частью разработки программного обеспечения является автоматизация тестирования, поскольку она создает..

Работа с векторными символическими архитектурами, часть 4 (искусственный интеллект)
Hyperseed: неконтролируемое обучение с векторными символическими архитектурами (arXiv) Автор: Евгений Осипов , Сачин Кахавала , Диланта Хапутантри , Тимал Кемпития , Дасвин Де Сильва ,..

Понимание расстояния Вассерштейна: мощная метрика в машинном обучении
В обширной области машинного обучения часто возникает необходимость сравнивать и измерять различия между распределениями вероятностей. Традиционные метрики расстояния, такие как евклидово..

Обеспечение масштабируемости LLM: облачный анализ с помощью AWS Fargate и Copilot
В динамичной области искусственного интеллекта все большее распространение получают модели больших языков (LLM). Они жизненно важны для различных приложений, таких как интеллектуальные..