1. Нажмите и введите Перегрузка
2. Упущенные возможности для обучения
3. Неповторяющийся анализ
4. API для спасения
5. Доступность данных
6. Свежесть и целостность данных
7. Цена
8. Определение размеров API
9. Ahrefs для обратных ссылок
10. доступность
11. Свежесть + Целостность 👏👏👏
12. Цена
13. DeepCrawl для сканирования сайта
14. Доступность 👏
15. Свежесть + Целостность 👏👏👏
16. Цена 👏👏
17. Консоль поиска Google для рейтинга ключевых слов + объем поиска
18. Доступность 👏👏👏
19. Свежесть + Целостность 👏👏
20. Цена 👏👏👏
21. Величественный для обратных ссылок
22. Доступность 👏👏👏
23. Свежесть + Целостность 👏👏👏
24. Цена 👏👏
25. Moz для обратных ссылок и авторизации домена
26. Доступность 👏
27. Свежесть + Целостность 👏
28. Цена 👏
29. SEMrush для ранжирования ключевых слов и объема поиска
30. Доступность 👏👏👏
31. Свежесть + Целостность 👏👏
32. Цена 👏
33. Погружение в работу с API

Наш деловой партнер https://bikinika.com.ua

Если вы читаете это, уже слишком поздно выполнять вашу работу без великолепных инструментов SEO, доступных вам сегодня.

Развитие служб данных SEO означает, что все данные, которые вам когда-либо понадобятся для запуска кампании SEO, легко доступны ( нажмите прямо на инструмент, чтобы прочитать наш обзор API ):

Но, как мы все знаем, существует большая разница между * доступом * к данным и их эффективным использованием.

Традиционный способ использования данных из этих сервисов - через их панель инструментов (например, вот Google Search Console):

Там есть несколько красивых картинок, но если мы хотим провести реальный анализ, нам нужно получить доступ к необработанным данным.

Затем мы можем посмотреть тенденции для конкретных целевых ключевых слов + страниц и объединить эти необработанные данные с данными из других сервисов (таких как трафик Google Analytics + конверсии или обратные ссылки Majestic).

Если мы хотим получить необработанные данные от такого инструмента, как Majestic, есть только два способа получить их: медленный и быстрый путь.

Медленный путь означает извлечение данных вручную с панели инструментов инструмента посредством экспорта в CSV.

Быстрый путь означает получение данных через API инструмента ( Интерфейсы прикладного программирования ) в какую-либо форму базы данных (будь то Google Sheets или «настоящая» база данных в стиле SQL, такая как Google BigQuery).

Если вы готовы погрузиться прямо в SEO API, воспользуйтесь этим шаблоном Sheets из хранилища шаблонов на Trello. Вот , Он поставляется с предварительно загруженными коннекторами API и конфигурацией BigQuery для таких API, как Google Search Console, Majestic, Moz и SEMrush.

Использование API позволяет избежать нескольких ловушек для анализа данных:

Нажмите и введите Перегрузка

Тратить время на копирование инструментальной панели каждого инструмента для экспорта отчетов - облом, в любом случае, когда вы его нарезаете.

Упущенные возможности для обучения

Если вы экспортируете данные из инструмента в файлы CSV, в конечном итоге вы получите папки, заполненные файлами экспорта со странными именами, которые пылятся.

Эти инструменты могут быть довольно дорогими (несколько долларов в месяц), поэтому вы захотите извлечь из данных как можно больше пользы. Получение данных из API в какую-либо форму базы данных делает это возможным.

Неповторяющийся анализ

Каждый SEO, с которым мы когда-либо работали, объединяет данные двух или более из этих инструментов - объединение данных ранжирования ключевых слов SEMrush с трафиком Google Analytics с обратными ссылками Majestic.

Ручной экспорт из каждой службы часто меняет формат, что нарушает формулы электронных таблиц, которые вы, возможно, настроили для объединения данных (поверьте нам - поддерживая это Шаблон аудита контента SEO который использует ручной экспорт был медведем).

Извлечение данных из API в стандартный формат «базы данных» (в листах или в SQL) позволяет настроить стандартный рецепт для анализа данных, который можно масштабировать для использования в вашей команде.

Внутренне в CIFL, мы делаем это через наши Процесс передачи данных агентства Это позволяет последовательно проводить анализ в стиле аудита SEO всей командой агентства.

API для спасения

Давайте углубимся в то, как вы можете оценить SEO API и реализовать его в процессе анализа.

Мы очень много использовали эти инструменты в CIFL, поэтому мы также поделимся своим личным мнением в обзоре API для каждого из перечисленных выше инструментов (Ahrefs, DeepCrawl, Google Search Console, Majestic, Moz и SEMrush).

Прежде чем платить за подписку на API для любого инструмента SEO, нужно сделать три шага:

Доступность данных

Для любого API, который вы рассматриваете, вы должны сначала выбрать, * как * вы сможете получить данные.

Как правило, есть четыре способа получения данных из API - ранжированные в порядке простоты использования:

• С помощью Supermetrics вытащить данные непосредственно в листы.
• Использование функций Google Sheets, таких как IMPORTJSON а также IMPORTDATA вытащить данные непосредственно в листы.
• Написание скриптов Python для извлечения данных из командной строки (с использованием такой инфраструктуры, как певец ). Пользовательские сценарии, как правило, не нужны, если в вашей команде нет качественного разработчика.
• С помощью таких инструментов передачи данных (ETL), как стежок , которые предоставляют пользовательский интерфейс для передачи данных из API в выбранную вами базу данных. К сожалению, Stitch имеет ограниченное покрытие для SEO API, поэтому мы не используем их для SEO, но они могут покрыть их в будущем.

В обоих вариантах 1 и 2 наш следующий шаг обычно состоит в том, чтобы отправить данные из Sheets в BigQuery, используя Соединитель CIFL Sheets <> BigQuery ,

Мы создали шаблон Sheets, который поставляется с предварительно загруженными коннекторами API + конфигурацией BigQuery для консоли поиска Google, Moz, Majestic и SEMrush, которую вы можете получить из Template Vault. Вот ,

Свежесть и целостность данных

Охват данных в API-интерфейсах SEO может сильно различаться в зависимости от размера анализируемого вами сайта и от того, как часто индексируются его ключевые рейтинги или обратные ссылки.

В конце концов, выбор API-интерфейсов, которым вы доверяете и которые предпочитаете для данного набора данных, действительно основан на ощущениях.

Некоторые SEO-специалисты используют Majestic только для данных обратных ссылок, тогда как другие считают, что данных Ahrefs или SEMrush достаточно для анализируемых сайтов - учитывая разницу в частоте индексации между доменами, невозможно выполнить общее утверждение «X API лучше, чем Y API для данных обратных ссылок ».

Мы рекомендуем поэкспериментировать с пробной учетной записью каждой рассматриваемой вами службы и проанализировать целостность данных вручную, прежде чем принимать решение.

Цена

Мы рекомендуем учитывать * общую цену * API, которая требуется для вашего пакета SEO-анализа, а не индивидуальную цену каждого API.

Это связано с тем, что многие из этих служб перекрываются - Ahrefs, Majestic, Moz и SEMrush предоставляют некоторую форму данных обратных ссылок.

Поэтому, если вам нужны рейтинги ключевых слов + данные обратных ссылок, вы можете использовать:

• SEMrush или Search Console для ранжирования по ключевым словам
• Majestic, Moz или SEMrush для обратных ссылок

Доступность и целостность данных не подлежат обсуждению при работе с API-интерфейсами, поэтому вы, скорее всего, выберете API-интерфейсы, данным которых вы доверяете и которые можно легко получить (через Supermetrics или иным способом).

Минимизация общей стоимости анализа - это вопрос выбора из меню опций, как только вы решите, какие API выполнят работу.

Определение размеров API

Давайте углубимся в то, как каждый SEO API соотносится с этими тремя критериями: доступность данных, актуальность данных и цена. Мы оценим каждый аспект из 3 возможных хлопков.

Прыгать, чтобы

Ahrefs (обратные ссылки)

Deepcrawl (Сканирование сайта)

Консоль поиска Google (рейтинг ключевых слов + объем поиска)

Majestic (Обратные ссылки)

Moz (обратные ссылки + полномочия домена)

SEMrush (Рейтинги ключевых слов обратных ссылок + объем поиска)

Ahrefs для обратных ссылок

Посмотреть их API документы ,

доступность

Нулевые хлопки 🙁 - к сожалению, Ahrefs не разрешает открытый доступ к данным через их API, поэтому мы не можем их использовать.

Это облом, так как многие SEO-специалисты считают свои данные обратных ссылок лучшими - напишите им на щебет просить, чтобы они открыли его!

Свежесть + Целостность 👏👏👏

Ahrefs известен тем, что он часто обновляет богатый индекс обратных ссылок.

Цена

Ноль хлопает 🙁 - поскольку у них нет открытого API для нас, я думаю, это технически бесценно?

DeepCrawl для сканирования сайта

Посмотреть их API документы - мы обычно используем конечные точки только для создания и получения проектов, обходов и отчетов.

Доступность 👏

API DeepCrawl в настоящее время не интегрирован ни одним сторонним провайдером (Supermetrics, Stitch), что позволяет вам получать данные без написания кода.

Хотя их API хорошо документирован, поэтому легко внедрить собственную интеграцию сценариев, если в вашей команде есть разработчик (именно так мы подключаемся к DeepCrawl внутри CIFL в рамках Агентство Data Pipeline сервис ).

Свежесть + Целостность 👏👏👏

DeepCrawl выполняет динамическое сканирование на вашем сайте, поэтому данные точны на момент начала сканирования.

Цена 👏👏

Цены DeepCrawl по скользящей шкале ( $ 79 - $ 199 и выше для корпоративных планов ) на основе количества URL-адресов, сканированных за месяц (100 000 за 79 долларов США, 500 000 за 199 долларов США).

Доступ к API включен в каждый план, и нет никакой разницы между использованием в приложении и использованием API - что, по нашему мнению, должно быть в жизни.

Учитывая широту точек данных, предоставляемых DeepCrawl, мы бы сказали, что их цены абсолютно справедливы.

Они включают количество обратных ссылок Majestic для каждой просканированной страницы ($ 399 / месяц за вашу собственную подписку API).

Мы также используем функцию сканирования регулярных выражений в Majestic, которая позволяет извлекать определенные фрагменты HTML-кода на странице, чтобы определить тип страницы - например, сканирование. эта страница курса число «$», присутствующее на странице, помогает нам идентифицировать его как страницу продукта.

Консоль поиска Google для рейтинга ключевых слов + объем поиска

Посмотреть их API документы - наиболее часто используемой конечной точкой является запрос, который возвращает показы, клики и среднюю позицию для заданной комбинации URL и поискового ключевого слова.

Доступность 👏👏👏

Доступ к API доступен открыто с помощью практически любого метода (Supermetrics или сценария), хотя мы обычно используем Supermetrics для его извлечения внутри CIFL.

Поскольку их API пользуется популярностью, если вы хотите пойти по пути нестандартного сценария, есть множество примеров для передачи данных из консоли поиска в выбранную вами базу данных.

Свежесть + Целостность 👏👏

Google сделал * огромное * улучшение, когда они открыли доступность данных в консоли поиска за предыдущие 16 месяцев (ранее было ограничено 90 днями).

Единственным недостатком API консоли поиска является то, что Google отбирает данные, когда они возвращаются на уровне ключевого слова, то есть может не возвращать результаты (или полные результаты) для * каждого ключевого слова *, за которое ранжируется ваш сайт.

По этой причине суммирование данных на уровне ключевых слов из GSC не будет суммироваться с итогами, отображаемыми на вашей панели GSC.

По мнению CIFL, это не конец света - все эти API возвращают приблизительные данные в той или иной форме, а не абсолютную правду.

Цена 👏👏👏

Свободно! Не могу победить.

Величественный для обратных ссылок

Посмотреть их API документы - наша наиболее часто используемая конечная точка GetBacklinksData , который предоставляет список обратных ссылок для домена или отдельной страницы, в том числе их собственный рейтинг потока доверия и потока цитирования.

Доступность 👏👏👏

API Majestic открыто доступен без аутентификации, то есть вы можете передать URL-запрос, содержащий ключ API:

_ https://api.majestic.com/api/json?app_api_key=API_KEY&cmd=GetBackLinkData&item=majestic.com&Count=5&datasource=fresh_

И возвращайте данные в формате JSON практически везде - через JSON-соединитель Supermetrics, пользовательскую формулу Sheets, например IMPORTJSON, или скрипт Python, запускаемый в командной строке.

В CIFL мы создали внутренний шаблон, который во многом похож на IMPORTJSON, но позволяет нам возвращать только определенные столбцы из результата (экономя вам много места по сравнению с ограничением в 2 миллиона ячеек в Google Sheets) - вы можете получить этот шаблон из Хранилище CIFL Вот ,

Свежесть + Целостность 👏👏👏

Majestic обеспечивает свежесть явно, предоставляя два отдельных индекса: свежий и исторический (обозначается разделом «& datasource =» в строке запроса).

Свежими являются обратные ссылки, просканированные за последние 90 дней, и исторические включают в себя данные за все время - их исторический индекс восходит к 2012 году, примерно столько, сколько вам нужно по человеческим соображениям, учитывая, насколько изменился интернет за последние 5 лет.

Цена 👏👏

Цены Majestic основаны на скользящей шкале «единиц анализа» ( 399 долларов в месяц на 100 миллионов единиц, до 2999 долларов в месяц на 3 миллиарда ). По нашему опыту, мы никогда не видели, чтобы у агентства не хватало единиц в месяц по плану API самого низкого уровня (399 долларов в месяц).

Moz для обратных ссылок и авторизации домена

Посмотреть их API документы - наша самая используемая конечная точка Метрики URL , который включает в себя собственные метрики Moz, такие как авторитет домена и авторитет страницы.

Доступность 👏

API Moz раньше был доступен практически через любой метод подключения, но поскольку они внесли изменения в настройки аутентификации, в настоящее время он доступен только через Supermetrics.

Свежесть + Целостность 👏

Данные обратных ссылок обновляются только один раз в месяц, что слишком медленно для большинства оптимизаторов, с которыми мы работаем.

И учитывая, что полномочия домена являются проприетарным алгоритмом, у нас нет другого выбора, кроме как взять на себя их слово: /.

Цена 👏

Диапазон от 250 долларов в месяц для 120 000 строк, до 10 000 долларов в месяц для 40 миллионов строк (строка равна одной обратной ссылке или метрикам Moz для одного URL).

По нашему опыту, 120 000 строк, вероятно, будут израсходованы при извлечении обратных ссылок для агентства среднего размера, поэтому общая стоимость использования, скорее всего, будет соответствовать стоимости базового плана Majestic ($ 399 / месяц), если вы не работаем в относительно небольших масштабах.

SEMrush для ранжирования ключевых слов и объема поиска

Посмотреть их API документы , Нашими любимыми конечными точками являются История обзора домена, которая возвращает ежемесячный обзор количества ключевых слов и объема поиска, а также Ключевые слова поиска по домену, которые возвращают конкретные рейтинги ключевых слов для данного домена.

Доступность 👏👏👏

Данные SEMrush доступны практически любым способом - они возвращают данные в формате CSV с URL-адреса, содержащего ваш ключ API:

https://api.semrush.com/?type=domain_rank&key=XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX&export_columns=Dn,Rk,Or,Ot,Oc,Ad,At,Ac&domain=codingisforlosers.com&database=us

Это означает, что его можно вставить в Sheets с помощью Supermetrics, с помощью функции IMPORTDATA или с помощью простого пользовательского сценария, который проверяет ваш URL и возвращает данные.

Их формат API URL также позволяет вам возвращать только определенные столбцы в вашем ответе, поэтому вы можете избежать возврата ненужных данных.

Свежесть + Целостность 👏👏

Индексы SEMrush обновляются раз в месяц, что обычно достаточно для ранжирования по ключевым словам, где внутримесячные изменения обычно являются резким шумом.

Они также позволяют вам специально запрашивать исторические данные за предыдущий месяц (со строкой запроса & display_date = YYYYMM15), что стоит больше кредитов, но может быть полезно при просмотре данных сайта в первый раз.

SEMrush предлагает множество точек данных через их API за пределами поисковых ключевых слов - некоторые более высокого качества, чем другие.

Например, их ключевые слова поиска по доменам обычно имеют четкое покрытие по всем доменам, которые мы проанализировали, но конечные точки, такие как похожие ключевые слова или обратные ссылки, могут быть нечеткими для некоторых доменов.

Цена 👏

$ 399 в месяц за их бизнес-план , плюс стоимость кредитов.

Раньше они предлагали вводный план API за 15 долларов в месяц, который позволял многим SEO-специалистам начать использовать данные SEMrush в Google Sheets - но, к сожалению, они прекратили этот план некоторое время назад.

Эта настройка «базовая цена + кредит» довольно неэффективна - она ​​ложится бременем на нас, пользователей, для расчета общей стоимости владения за месяц.

Именно из-за этой хромоты, а также из-за того, что они влияют на цены, мы даем им одинаковую цену 👏.

Однако положительным моментом является то, что панель инструментов SEMrush предоставляет множество функциональных возможностей, которые ваша команда, вероятно, уже использует - поэтому затраты не связаны только со стоимостью извлечения необработанных данных.

Погружение в работу с API

С этими API можно много ориентироваться!

Надеемся, что этот начальный шаблон поможет сократить ваше время на славу с некоторыми из этих API-интерфейсов - заберите его из Template Vault на Trello Вот ,

Как всегда, напишите нам в Твиттере ( @losersHQ ) если у вас есть какие-нибудь вопросы.

Похожие

Комментарии