добавь в этот скрипт помимо сбора данных по массиву titlesToScrape, еще собери данные с…
- User
добавь в этот скрипт помимо сбора данных по массиву titlesToScrape, еще собери данные с локатора .site-menu--group-items-header [href] и запиши его вначало массива results: (function () { // Массив названий, которые мы хотим найти const titlesToScrape = [ "Число страниц в индексе Google", "Число страниц в индексе Yandex", "Наличие HTTPS", "Дата завершения SSL", "Самоподписанный сертификат", "Сертификат для этого домена", "Подтверждён центром регистрации", "Есть редирект с HTTP на HTTPS", "В URL присутствует порт :443", "IP занесён в черные списки RBL/DNSB", "Страницы с тегом frame/iframe", "Тестирование вариантов написания домена", "Тестирование доступности из разных стран", "Одинаковый размер документа для всех запросов", "Переадресация на другие домены", "Возраст домена", "Домен оплачен до", "NS", "IP-адрес сервера", "Местоположение хостинга", "Корректная обработка несуществующих URL", "Одинаковый URL для всех вариантов написания домена", "Наличие robots.txt", "Наличие sitemap.xml", "Количество найденных файлов sitemap", "Количество элементов во всех файлах sitemap", "Количество страниц во всех картах сайта (только html)", "Число изображений", "Оптимизация скорости под мобильные устройства", "Оптимизация скорости под персональные компьютеры", "Среднее время загрузки страниц, сек", "Информация по переадресации", "Страницы с rel=canonical", "Сайт разрешён для индексации" ];
// Создаем массив для сохранения результатов const results = [];
// Функция для преобразования rgb в hex function rgbToHex(rgb) { const result = rgb.match(/\d+/g).map(function (x) { return ("0" + parseInt(x).toString(16)).slice(-2); }); return "#" + result.join(""); }
// Обходим каждое название titlesToScrape.forEach(title => { // Находим элементы на странице, содержащие нужные названия const element = Array.from(document.querySelectorAll(".layout .d-inline-block")) .find(el => (title === "NS" ? el.textContent.trim() === title : el.textContent.trim().includes(title)) ); // Условие для проверки
if (element) { // Получаем цвет шрифта найденного элемента const computedStyle = window.getComputedStyle(element); const fontColor = computedStyle.color; // Преобразуем цвет в шестнадцатеричный формат const hexColor = rgbToHex(fontColor); // Получаем значение, которое следует за найденным элементом const valueElement = element.closest(".layout").querySelector(".word-break-all-xs-only"); if (valueElement) { const customText = valueElement.textContent.trim(); // Добавляем результат в массив в виде объекта results.push({ description: title, customText: customText, fontColor: hexColor // Добавляем цвет шрифта в hex в объект }); // Выводим цвет шрифта в консоль console.log(`Цвет шрифта для "${title}": ${hexColor}`); } }});
// Формируем строку с экспортом массива объектов без кавычек let exportContent = "const updateData = [\n"; results.forEach(item => { exportContent +=
{ description: "${item.description}", customText: "${item.customText}", fontColor: "${item.fontColor}" },\n; }); exportContent += "];\n\nexport default updateData;";// Сохраняем результаты в файл .js const blob = new Blob([exportContent], { type: "application/javascript" }); // Создаем Blob-объект для JavaScript const url = URL.createObjectURL(blob); // Создаем временную ссылку const a = document.createElement("a"); // Создаем элемент a.href = url; a.download = "results_custom.js"; // Задаем имя для файла a.click(); // Программно кликаем, чтобы скачать файл URL.revokeObjectURL(url); // Очищаем URL для освобождения памяти })();
- Assistant
Конечно! Я добавлю в ваш скрипт сбор данных по локатору
.site-menu--group-items-header [href]и включу их в начало массиваresults. Предположим, что вы хотите сохранить текст ссылки и еёhrefв виде объекта с описанием, текстом и цветом шрифта (если необходимо). Если цвет не требуется для новых данных, можно адаптировать структуру соответственно.Вот обновленный скрипт:
(function () { // Массив названий, которые мы хотим найти const titlesToScrape = [ "Число страниц в индексе Google", "Число страниц в индексе Yandex", "Наличие HTTPS", "Дата завершения SSL", "Самоподписанный сертификат", "Сертификат для этого домена", "Подтверждён центром регистрации", "Есть редирект с HTTP на HTTPS", "В URL присутствует порт :443", "IP занесён в черные списки RBL/DNSB", "Страницы с тегом frame/iframe", "Тестирование вариантов написания домена", "Тестирование доступности из разных стран", "Одинаковый размер документа для всех запросов", "Переадресация на другие домены", "Возраст домена", "Домен оплачен до", "NS", "IP-адрес сервера", "Местоположение хостинга", "Корректная обработка несуществующих URL", "Одинаковый URL для всех вариантов написания домена", "Наличие robots.txt", "Наличие sitemap.xml", "Количество найденных файлов sitemap", "Количество элементов во всех файлах sitemap", "Количество страниц во всех картах сайта (только html)", "Число изображений", "Оптимизация скорости под мобильные устройства", "Оптимизация скорости под персональные компьютеры", "Среднее время загрузки страниц, сек", "Информация по переадресации", "Страницы с rel=canonical", "Сайт разрешён для индексации" ]; // Создаем массив для сохранения результатов const results = []; // Функция для преобразования rgb в hex function rgbToHex(rgb) { const result = rgb.match(/\d+/g).map(function (x) { return ("0" + parseInt(x).toString(16)).slice(-2); }); return "#" + result.join(""); } // Сбор данных из локатора .site-menu--group-items-header [href] const menuLinks = Array.from(document.querySelectorAll(".site-menu--group-items-header [href]")); menuLinks.forEach(link => { const description = link.textContent.trim(); const customText = link.getAttribute('href').trim(); const computedStyle = window.getComputedStyle(link); const fontColor = rgbToHex(computedStyle.color); results.push({ description: description, customText: customText, fontColor: fontColor }); // Выводим цвет шрифта в консоль для каждой ссылки console.log(`Цвет шрифта для "${description}": ${fontColor}`); }); // Обходим каждое название из titlesToScrape titlesToScrape.forEach(title => { // Находим элементы на странице, содержащие нужные названия const element = Array.from(document.querySelectorAll(".layout .d-inline-block")) .find(el => (title === "NS" ? el.textContent.trim() === title : el.textContent.trim().includes(title)) ); // Условие для проверки if (element) { // Получаем цвет шрифта найденного элемента const computedStyle = window.getComputedStyle(element); const fontColor = computedStyle.color; // Преобразуем цвет в шестнадцатеричный формат const hexColor = rgbToHex(fontColor); // Получаем значение, которое следует за найденным элементом const valueElement = element.closest(".layout").querySelector(".word-break-all-xs-only"); if (valueElement) { const customText = valueElement.textContent.trim(); // Добавляем результат в массив в виде объекта results.push({ description: title, customText: customText, fontColor: hexColor // Добавляем цвет шрифта в hex в объект }); // Выводим цвет шрифта в консоль console.log(`Цвет шрифта для "${title}": ${hexColor}`); } } }); // Формируем строку с экспортом массива объектов без кавычек let exportContent = "const updateData = [\n"; results.forEach(item => { exportContent += ` { description: "${item.description}", customText: "${item.customText}", fontColor: "${item.fontColor}" },\n`; }); exportContent += "];\n\nexport default updateData;"; // Сохраняем результаты в файл .js const blob = new Blob([exportContent], { type: "application/javascript" }); // Создаем Blob-объект для JavaScript const url = URL.createObjectURL(blob); // Создаем временную ссылку const a = document.createElement("a"); // Создаем элемент <a> a.href = url; a.download = "results_custom.js"; // Задаем имя для файла a.click(); // Программно кликаем, чтобы скачать файл URL.revokeObjectURL(url); // Очищаем URL для освобождения памяти })();Пояснения к изменениям:
-
Сбор данных из
.site-menu--group-items-header [href]:- Используем
document.querySelectorAllдля выбора всех элементов с атрибутомhrefвнутри.site-menu--group-items-header. - Для каждого найденного элемента извлекаем:
description: текстовое содержимое ссылки.customText: значение атрибутаhref.fontColor: цвет шрифта, преобразованный из RGB в HEX.
- Добавляем эти данные в начало массива
resultsс помощьюresults.push().
- Используем
-
Сохранение порядка:
- Сначала собираются и добавляются данные из меню.
- Затем продолжается сбор данных из массива
titlesToScrape, что обеспечивает добавление новых данных после ранее добавленных ссылок из меню.
-
Консольные сообщения:
- Добавлены
console.logдля отображения цвета шрифта каждой ссылки из меню и каждого заголовка изtitlesToScrape.
- Добавлены
-
Формирование экспортируемого файла:
- Все собранные данные (ссылки из меню и данные из
titlesToScrape) включены в массивupdateData, который экспортируется как модуль JavaScript.
- Все собранные данные (ссылки из меню и данные из
Дополнительные рекомендации:
-
Проверка структуры данных: Убедитесь, что структура объектов, которые вы добавляете из меню, соответствует структуре объектов из
titlesToScrape. Если нужны дополнительные поля или другая структура, скорректируйте объект при добавлении вresults. -
Управление порядком данных: Если требуется именно добавить данные из меню в начало массива
results, используйтеresults.unshift(...)вместоresults.push(...). В текущем примере данные добавляются в конец, но так как сбор данных из меню происходит перед сбором изtitlesToScrape, они оказываются в начале.Пример изменения:
// Вместо results.push({...}) results.unshift({ description: description, customText: customText, fontColor: fontColor }); -
Обработка отсутствующих элементов: В случае, если некоторые элементы не найдены, можно добавить обработку или сообщения об этом для отладки.
Если у вас есть дополнительные требования или спецификации для собираемых данных из меню, пожалуйста, уточните, и я помогу адаптировать скрипт соответственно.
-