EdgeKnowledge_Skill
1596941391qq/EdgeKnowledge_SkillAI-инструмент для добычи редких знаний с андеграундных форумов (Reddit, BlackHatWorld, GreyHatMafia). Автоматизирует глубокий краулинг, визуальный анализ и формирует структурированные Markdown-отчёты. Подходит для SEO-специалистов и исследователей серых методов продвижения.
Установка
pip install gallery-dl yt-dlp crawl4aiREADME
Edge Knowledge
Документация на китайском | Документация на английском
AI-система для добычи граничных знаний. Интеллектуально рекомендует высокоценные форумы (Reddit, BlackHatWorld, GreyHatMafia и др.) на основе запроса пользователя, выполняет глубокий краулинг с помощью browser-use, визуального распознавания, анализирует граничные тактики, опытных пользователей и ресурсы, формируя единый структурированный Markdown-отчёт.
🎯 Основная философия
💡 Инициатива равного доступа к знаниям Проект приветствует вклад сообщества! Вы можете создавать ветки на Git для построения экспертных скиллов поиска по конкретным доменам (например, SEO Expert, Affiliate Hunter, Tool Digger), делая граничные знания доступными для большего числа людей.
🤝 Как отправлять PR:
- 🌿 Создавайте доменные ветки — специализированные версии для конкретных областей (например,
seo-expert,affiliate)- 🔧 Оптимизируйте существующий скилл — улучшайте универсальность и надёжность инструмента (стратегии обхода защиты, обработка ошибок, оптимизация производительности)
- 📚 Делитесь качественными форумами — добавляйте используемые вами форумы в
forum_database.jsonсо стратегиями поиска- 🤖 Добавляйте возможности автоматизации — интегрируйте планировщики задач, отправку в Notion/Feishu/Slack и другие инструменты совместной работы
Давайте вместе сломаем информационные барьеры и продвинем равный доступ к знаниям! 🚀
Что такое граничные знания?
В эпоху AI информация, которую LLM легко понимают или собирают из интернета, считается общедоступными знаниями. Граничные знания — это редкие отраслевые ноу-хау и серые/чёрные техники, находящиеся на границах правил платформ.
Граничные знания включают:
- ✅ Чёрный/белый/серый SEO: PBN, Parasite SEO, Cloaking, Link Farms
- ✅ Тактические приёмы: запрещённые, рискованные, но эффективные методы
- ✅ Андеграундные инструменты: GSA SER, SEnuke, Xrumer, Scrapebox
- ✅ Реальные данные: показатели успеха, цены, риски, номера кейсов
- ✅ Спорные тактики: высокооцененные ответы, дискуссионные обсуждения, практические примеры
НЕ включают:
- ❌ Банальности белой шляпы («пишите хороший контент, и трафик придёт»)
- ❌ Официальную документацию (Google SEO Guidelines)
- ❌ Мейнстримные советы («улучшайте пользовательский опыт»)
Три характеристики граничных знаний
- Свежесть — актуальная информация (после 2025 года)
- Редкость — эксклюзивная информация (известная в узких кругах)
- Достоверность — проверенная информация (с данными и кейсами)
✨ Основные возможности
V1: Базовая версия
- 🎯 Извлечение намерений и обобщение запросов — обобщает направления запроса и рекомендует качественные форумы
- 🧠 Память пользовательских предпочтений — запоминает любимые форумы и привычки поиска
- 🔐 Управление учётными данными — автоматически управляет учётными данными форумов, поддерживает повторное использование сессий
- 🛡️ Система антидетекции — фиксированные отпечатки, случайные задержки, управление сессиями для снижения риска блокировки аккаунта
- 🌐 Умный браузерный краулинг — использует скилл browser-use, поддерживает скриншоты и визуальное распознавание
- 🔍 Глубокий анализ контента — идентификация граничных знаний, выявление опытных пользователей, извлечение ресурсов
- 📊 Единый вывод отчёта — именуется по дате и теме, структурированное отображение
🆕 V2: Режим охотника (НОВИНКА!)
V2 добавляет агрессивные возможности получения ресурсов:
| Функция | Описание |
|---|---|
| 🎯 Обнаружение сигналов ценности | 6 типов паттернов: разблокировка ответом, скрытый контент, ссылки для скачивания, коды извлечения, вложения, пороги задач |
| 🤖 Система авто-ответов | 25 случайных шаблонов (15 EN + 10 CN), автоопределение языка |
| 📦 Загрузчик ресурсов | Скачивает ВСЕ типы файлов (.exe/.bat/.torrent), сохраняет полноту |
| 🔗 Отслеживание глубокого погружения | Переход по внешним ссылкам, отслеживание авторов, майнинг разделов комментариев |
| 🧵 Интеграция инструментов | Поддержка Agent-Reach, gallery-dl, yt-dlp, Crawl4AI |
🚀 Быстрая установка
git clone https://github.com/1596941391qq/EdgeKnowledge_Skill.git
cd EdgeKnowledge_Skill
chmod +x install.sh
./install.shИли скопируйте этот скилл в директорию скиллов Claude Code:
cp -r edge-knowledge ~/.claude/skills/
🔄 Маршрутизация MCP-инструментов (V2)
V2 включает интеллектуальный трёхуровневый движок маршрутизации, который автоматически выбирает лучший инструмент для каждой задачи — приоритет стоимости с гарантией резервного переключения.
Уровни инструментов
| Уровень | Инструмент | Стоимость | Лучше всего для |
|---|---|---|---|
| Уровень 1 | browser-use | Бесплатно (локальный Playwright) | Скриншоты и визуальное распознавание, клики/прокрутка/формы, JS lazy-load, доступ после авторизации |
| Уровень 2 | agent-browser | Бесплатно (Vercel CLI) | Повторяющееся структурированное извлечение, выбор элементов @e1/@e2, скриптовые многошаговые операции |
| Уровень 3 | google-gemini-mcp | API-ключ (за токены) | Обход антибот-блокировок, пакетный анализ URL (>10 страниц), сложное мультимодальное понимание |
Правила маршрутизации
IF captcha_detected AND captcha_type == "recaptcha_v2":
→ ai-captcha-bypass (GPT-4o or Gemini 2.5) → retry
IF cloudflare_blocked AND browser_use_failed:
→ google-gemini-mcp (Tier 3)
IF batch_analysis AND urls > 10:
→ google-gemini-mcp (concurrent)
IF visual_heavy AND needs_screenshot:
→ browser-use (Tier 1)
IF download_only:
→ gallery-dl / yt-dlp (bypasses browser)
Конфигурация MCP-сервера
Все конфигурации MCP-серверов находятся в mcp_config.json:
google-gemini-mcp— глубокий поиск Gemini 2.5, получение URL, мультимодальный анализai-captcha-bypass— решение CAPTCHA на базе GPT-4o / Gemini (Selenium + Firefox)
⚙️ Файлы конфигурации
1. forum_database.json
База знаний форумов, содержащая информацию о форумах и стратегии поиска.
Структура:
{
"categories": {
"Q&A_Search": {
"description": "Подходит для майнинга глубоких обсуждений и реальных отзывов пользователей в разделах комментариев",
"forums": [...]
},
"Edge_Knowledge_Search": {
"description": "Подходит для майнинга серых/чёрных техник, недоступных в мейнстримных каналах",
"forums": [...]
},
"Deep_Dive_Forums": {
"description": "Глубокий контент, о котором другие не знают",
"forums": [...]
}
}
}