Extract And Decode Google News RSS URLs to Clean Article Links
该工作流可以自动抓取Google News的RSS新闻源，提取并解码新闻链接，获取可直接访问的干净文章地址。它支持多语言和地区的新闻，自动限制处理条数以防请求过载，且采用逆向解码机制绕过URL编码和混淆。输出的链接方便后续使用，适合媒体监控、内容采集和数据分析等应用场景，大幅提升了获取新闻链接的效率和准确性。
流程图
工作流名称
Extract And Decode Google News RSS URLs to Clean Article Links
主要功能和亮点
该工作流能够自动抓取Google News的RSS新闻源，提取新闻列表中的编码URL，通过逆向解析和解码请求，获取干净且可直接访问的新闻文章链接。
- 支持多语言和多区域新闻源（通过调整URL参数hl、gl、ceid）
- 自动限制处理新闻条数，避免请求过载
- 逆向工程解码机制，绕过Google对新闻链接的编码和混淆
- 输出的链接为纯净、无需跳转的新闻文章URL，方便后续使用
解决的核心问题
Google News RSS提供的新闻链接通常经过编码和跳转处理，不利于直接抓取或二次利用。该工作流通过解码流程，解决了Google新闻链接被混淆、编码的问题，使得用户能够获得干净、可直接访问的新闻文章地址。
应用场景
- 媒体监控和新闻聚合平台，快速抓取干净新闻链接
- 内容采集和数据分析，便于后续自动化处理新闻正文
- 研究Google新闻流传机制及反爬虫策略
- 自动化新闻推送和情报系统
主要流程步骤
- 手动触发工作流
- 抓取Google News RSS源，根据语言和地域参数获取新闻列表
- 限制新闻条数（默认5条，避免大量请求）
- 访问每条新闻的编码链接，获取HTML内容
- 从HTML中提取解码所需的signature和timestamp等密钥
- 构造解码请求体，调用Google内部解码接口
- 解析解码响应，提取干净的新闻文章URL
- 聚合所有清理后的新闻链接，输出结果
涉及的系统或服务
- Google News RSS Feed
- HTTP请求服务（POST调用Google解码接口）
- n8n节点能力：RSS读取、HTTP请求、HTML解析、代码处理、数据映射与聚合
适用人群或使用价值
- 新闻数据分析师和内容采集工程师
- 媒体和舆情监控人员
- 自动化运营人员和技术开发者，需快速获取Google新闻干净链接者
- 研究和优化新闻抓取及反爬虫技术的技术人员
该工作流为用户节省了手动解析Google新闻链接的复杂流程，实现了自动化、一键式提取干净新闻链接，极大提升数据抓取效率与准确度。