GitHub 雷达
10 小时前监控正在起飞的黑马项目,和高星项目。
yt-dlp/yt-dlp
1. yt-dlp 是一个功能丰富的命令行音视频下载工具,支持从数千个网站下载视频和音频内容,是 youtube-dl 的活跃维护分支。
2. 项目用 Python 实现,通过丰富的命令行选项支持格式选择、元数据修改、字幕提取、SponsorBlock 集成和自定义后处理。
3. 亮点在于强大的自定义下载能力与活跃社区维护,适合需要批量下载、媒体归档或自动化媒体处理的高级用户和开发者。
Python工具/CLI192.0k
microsoft/markitdown
1. 解决什么问题 / 是什么:将 PDF、Office 文档、图片、音频等数十种文件格式自动转换为结构清晰的 Markdown,便于大语言模型和文本分析流程处理。
2. 主要技术栈或实现方式:基于 Python 构建,通过可选依赖按需支持各类格式解析,并利用插件机制扩展(如 LLM 驱动的 OCR、Azure AI 服务)。
3. 亮点或适用场景:转换结果保留标题、表格、链接等文档结构,对 LLM 友好且 token 高效,特别适合 RAG、文档预处理和分析等 AI 应用场景。
Python工具/CLI185.4k
ytdl-org/youtube-dl
1. 一个命令行工具,用于从 YouTube 及数百个其他视频网站下载视频或音频。
2. 使用 Python 编写,通过可扩展的“提取器”模块适配不同网站,并支持丰富的命令行参数和配置文件。
3. 跨平台免费使用,适合批量下载、格式转换及自动化媒体归档等场景。
Python工具/CLI141.3k
nvbn/thefuck
1. 解决什么问题 / 是什么:它是一个命令行工具,当你输错命令后,只需输入“fuck”即可自动修正并执行正确的命令。
2. 主要技术栈
Python工具/CLI97.9k
unclecode/crawl4ai
1. Crawl4AI 是一个将任意网页自动转换为干净、结构化 Markdown 格式的开源爬虫,专为大语言模型(LLM)、RAG 系统和数据管道设计。
2. 项目基于 Python 构建,通过异步浏览器池、智能缓存、自适应页面解析和 CLI/Docker 双重部署实现高效提取。
3. 拥有超 69k 星的高人气,支持深度爬取、会话保持和零密钥部署,适用于大规模 LLM 数据采集与知识检索增强场景。
Python工具/CLI83.8k
Panniantong/Agent-Reach
1. 解决什么问题:该项目为 AI Agent 提供开箱即用的全网内容访问能力,一站式解决读取 Twitter、YouTube、B站、小红书等平台内容时面临的付费 API、登录验证、风控拦截等繁琐配置问题。
2. 主要技术栈或实现方式:基于 Python 构建命令行工具(CLI),作为一个能力编排层自动选型、安装和路由底层上游工具(如 yt-dlp、bili-cli),并为所有兼容命令行的 AI 编程工具(如 Claude Code)提供标准化的读取接口。
3. 亮点或适用
Python工具/CLI83.1k
D4Vinci/Scrapling
Scrapling 是一个自适应网页抓取框架,能够处理从单个请求到大规模爬取的所有任务,并自动适应网站结构变化以重新定位元素。 主要技术栈基于 Python,提供多种抓取器(如 StealthyFetcher)绕过反爬系统,并支持异步并发、会话管理、自动代理轮换和命令行工具。 其亮点在于解析器能自动学习网站更新并重定位元素,内置绕过 Cloudflare Turnstile 等反爬机制,适合需要稳定、大规模数据采集且应对网站频繁变更的场景。
Python工具/CLI82.1k
NanmiCoder/MediaCrawler
1. 它是一个多平台自媒体数据采集工具,支持小红书、抖音、快手、B 站、微博、贴吧、知乎等平台的公开笔记、视频与评论抓取。
2. 主要基于 Playwright 浏览器自动化与 CDP 模式复用已有 Chrome 登录态,避免逆向工程,使用 Python 开发并可通过 uv 管理依赖。
3. 亮点在于免逆向设计、多平台覆盖、支持词云生成与
Python工具/CLI65.2k
scrapy/scrapy
1. Scrapy 是一个快速、高层次的 Python 网络爬虫与数据抓取框架,用于从网站中提取结构化数据。
2. 主要基于 Python 3.10+ 开发,底层采用 Twisted 异步网络引擎,通过安装 pip install scrapy 使用。
3. 适合大规模、可扩展的爬虫项目,跨平台运行,由 Zyte 公司专业维护并拥有庞大的贡献者社区。
Python工具/CLI64.4k
Textualize/rich
1. 解决在终端中输出样式丰富、结构美观的文本与可视化内容的问题。
2. 基于纯 Python 实现,提供简洁 API,支持颜色、标记语言、表格、进度条和语法高亮。
3. 开箱即用,兼容主流平台和 Jupyter,适合美化命令行工具、日志输出或构建终端仪表盘。
Python工具/CLI57.4k
soimort/you-get
1. 解决什么问题 / 是什么
You-Get 是一个轻量级的命令行下载工具,专门用于从 YouTube、优酷、Niconico 等众多网站抓取并下载视频、音频与图片。
2. 主要技术栈或实现方式
基于 Python 开发,通过 pip 或源码安装,配合 FFmpeg 等依赖实现多格式媒体下载与合并,不依赖浏览器和 Flash 等闭源技术。
3. 亮点或适用场景
支持数百个网站,能在终端一键下载或直接串流至播放器,无广告、无需打开网页,非常适合追求开放网络和黑客文化的用户,以及需要自动化批量下载的场景。
Python工具/CLI56.9k
HKUDS/CLI-Anything
1. 解决什么问题:CLI-Anything 将任何软件封装为命令行接口,使 AI 代理能直接操控各类桌面应用和服务,让所有软件“代理原生”。
2. 主要技术栈:基于 Python≥3.10 和 Click 框架构建可安装的 CLI 工具,输出同时支持 JSON 与人类可读格式,并通过 CLI-Hub 统一分发和管理社区贡献的 CLI。
3. 亮点或适用场景:社区贡献的 CLI 覆盖 CAD、3D 场景、笔记、音乐、视频会议等多种软件,使 AI 代理能自动化执行复杂操作,适合需要让大语言模型直接驱动传统桌面工具的开发者。
Python工具/CLI49.6k
ayghri/i-have-adhd
该项目是一个针对编程助手的技能包,旨在解决AI回复冗长、绕弯子、不直接给出答案的问题,特别为注意力易分散(ADHD倾向)的用户优化输出格式。它通过一套包含10条明确规则的指令集(如先给行动、步骤编号、限制列表长度、去除客套话等)来约束AI的回复风格,让答案直接、简洁、可执行。其亮点是无需诊断即可使用,适用于任何希望编程助手更高效、更少废话的场景,安装简单且支持自定义规则,能显著减少阅读和滚动时间。
Python工具/CLI48.0k
mingrammer/diagrams
1. 这是一个用 Python 代码替代拖拽绘图工具来快速绘制云系统架构图的工具(Diagram as Code),主要用于架构原型设计。
2. 技术实现基于 Python 语言,依赖 Graphviz 渲染,并内置了 AWS、Azure、GCP、K
Python工具/CLI42.6k
psf/black
1. 解决什么问题:Black 是一个“无妥协”的 Python 代码格式化工具,强制统一代码风格,消除手调格式的繁琐与争议。
2. 主要技术栈:用 Python 实现,通过解析 AST 并基于 PEP 8 的固执己见规则生成代码,支持 pyproject.toml 配置。
3. 亮点与适用场景:几乎零配置、生成最小 diff、保证格式化前后逻辑等价,适合团队协作、代码评审和 CI 流水线,已被海量项目采用。
Python工具/CLI41.8k
chubin/cheat.sh
1. 解决什么问题:cheat.sh 是一个统一入口的编程与命令行速查工具,提供即时、简洁的代码片段和命令备忘,免去搜索文档或 StackOverflow。
2. 主要技术栈:基于 Python 的后端服务,通过 curl/浏览器访问,命令行客户端 cht.sh 可选安装,支持 Docker 自托管,并深度集成 Vim、Emacs、VS Code 等编辑器。
3. 亮点:覆盖 56 种语言和 1000+ Linux 命令,响应速度 100ms 以内,支持隐身模式和无感集成,并可按需切换多个答案来源。
Python工具/CLI41.8k
datalab-to/marker
1. Marker 是一个将 PDF、图片等多种文档快速高精度转换为 Markdown、JSON、HTML 等结构化格式的开源工具。
2. 项目基于 Python 与 PyTorch 实现,内置 OCR、布局分析,并支持通过大型语言模型(如 Gemini)在“混合模式”下进一步提升表格、公式等内容的提取质量。
3. 其亮点在于多语言、多格式支持与出色的速度和准确率,适合大批量文档智能处理、知识库构建及结构化数据抽取场景,并提供商业托管服务。
Python工具/CLI39.8k
httpie/cli
1. 解决什么问题:一个现代化、人性化的命令行 HTTP 客户端,用于替代 curl 等工具,以更直观的语法测试和调试 API 与 HTTP 服务。
2. 主要技术栈或实现方式:基于 Python 开发,提供 http 和 https 命令,内置 JSON 解析、彩色终端输出、会话持久化及插件扩展能力。
3. 亮点或适用场景:以极简自然语法发送请求、自动格式化高亮响应,特别适合开发者在终端快速调试 RESTful API、模拟请求和下载文件。
Python工具/CLI38.5k
Textualize/textual
1. 解决什么问题 / 是什么:一个用纯 Python 编写、可在终端和 Web 浏览器中运行复杂用户界面的轻量级应用框架。
2. 主要技术栈或实现方式:基于 Python 异步框架,采用声明式 API 和 CSS 样式,内置按钮、表格、树形控件等丰富组件。
3. 亮点或适用场景:一套代码即可同时在终端和 Web 端运行,适合开发跨平台 TUI 工具、仪表盘和需要终端与浏览器双栖的交互式应用。
Python工具/CLI37.3k
kovidgoyal/kitty
1. 一个为重度终端用户设计的跨平台、基于GPU加速的高性能终端模拟器。
2. 使用Python编写核心逻辑,结合C语言与OpenGL实现GPU渲染以提升速度和流畅度。
3. 亮点是硬件加速带来的极速渲染、丰富的原生功能(如分屏、图片显示、扩展脚本),适合日常在终端工作的开发者。
Python工具/CLI35.0k
ocrmypdf/OCRmyPDF
1. 解决什么问题:OCRmyPDF 为扫描版 PDF 自动添加可搜索、可复制的 OCR 文本层,解决扫描文档无法检索和复制的问题。
2. 主要技术栈或实现方式:基于 Python 开发,底层调用 Tesseract OCR 引擎,支持 100 多种语言,并以无破坏方式将识别文本精准嵌入原 PDF,同时可生成符合长期存档标准的 PDF/A。
3. 亮点或适用场景:支持自动纠偏、旋转、图像优化、多核并行处理,且保持原图分辨率;特别适合档案数字化、历史文献存档以及需要全文检索与复制的大批量扫描件场景。
Python工具/CLI34.8k
dgtlmoon/changedetection.io
1. 解决什么问题:一款免费的(也可选付费订阅)网站变更监控与实时告警工具,能自动追踪网页内容、商品价格、库存状态变化以及网站篡改等。
2. 主要技术栈或实现方式:基于 Python 开发,支持 Docker 自托管;内置 Chrome/Playwright 浏览器自动化用于交互与抓取,通过 LiteLLM 对接 OpenAI、Ollama 等
Python工具/CLI34.3k
python-poetry/poetry
1. 解决 Python 项目打包与依赖管理的碎片化问题,用统一的 pyproject.toml
Python工具/CLI34.3k
testerSunshine/12306
1. 这是一个用于自动监控余票、提交订单的12306刷票工具,帮助用户实现智能抢票。
2. 项目基于Python开发,结合TensorFlow本地验证码识别、自托管打码服务、Docker部署和requests网络请求实现自动化。
3. 适用于春运、节假日等抢票高峰期,提供邮件和Server酱实时通知,并支持准点预售、捡漏和智能候补以提升购票成功率。
Python工具/CLI34.1k
共 5,015 个高星项目
GitHub 雷达
仓库语言分类Star
数据来自 GitHub 公开信息,由群岛雷达定期扫描 · 中文摘要与分类由 AI 生成,仅供参考。