抓取Hacker News -- 资讯、职位、评论与用户

从Y Combinator的Hacker News提取结构化数据。抓取热门资讯、最新资讯、招聘信息、Ask HN讨论、Show HN项目、评论和用户资料。纯HTTP -- 无需Chrome，无需Playwright。

可抓取的数据

• 热门资讯 -- 标题、URL、评分、作者、评论数
• 招聘信息 -- 来自每月"Who is Hiring"帖子的YC创业公司招聘
• 评论 -- 包含嵌套和作者信息的完整评论线程
• 用户资料 -- karma值、注册日期、简介
• Ask HN / Show HN -- 社区提问和项目展示
• 搜索 -- 跨所有HN内容的全文搜索

主要用例

• 技术趋势监控 -- 追踪技术社区正在讨论的话题
• 创业公司招聘数据 -- 抓取YC创业公司招聘信息进行市场情报分析
• 情绪分析 -- 分析社区对产品发布或技术新闻的反应
• 内容研究 -- 发现技术博客的热门内容主题
• 竞争情报 -- 监控您的公司或竞争对手的提及

API示例

# 通过Apify API启动一次运行
curl -X POST "https://api.apify.com/v2/acts/santamaria-automations~ycombinator-scraper/runs?token=YOUR_TOKEN" \
 -H "Content-Type: application/json" \
 -d '{
 "mode": "top",
 "maxResults": 100,
 "includeComments": true
 }'

# 或通过MCP与AI代理一起使用：
# https://mcp.apify.com?tools=santamaria-automations/ycombinator-scraper

集成

• n8n / Make / Zapier -- 触发运行并通过Webhook处理结果
• AI代理 (MCP) -- Claude Desktop、Cursor、VS Code、LangChain、LlamaIndex
• Python / Node.js -- 通过Apify SDK进行编程访问
• Google Sheets / Airtable -- 通过Apify集成导出

对比

输出字段

直接在 Apify 上运行此 actor（无需代码）

点击上方 在 Apify 上打开，在浏览器中运行 ycombinator-scraper — 无需代码，无需安装。在 Apify 控制台，您可以获得：

• 一键测试 — 填写输入表单，或将上面的 JSON 示例粘贴到 JSON 编辑器 选项卡，然后点击 Start。
• 实时输出 — 观看行数据流入交互式 Output 表格，或切换到原始 JSON / Log 视图。
• 任意格式导出 — 一键下载数据集为 JSON、CSV、XML、Excel、HTML 表格、RSS 或 JSONL。
• 计划任务 — 每日、每周、每小时或自定义 cron 运行此 actor。Apify 处理时间调度并存储每次数据集运行。
• 集成与 Webhook — 成功/失败时触发 webhook，或从 Actions 选项卡连接 Zapier、n8n、Make、Airbyte、Google Sheets、Slack、S3、Postgres 等。
• 透明成本 — 在花一分钱之前查看您的 每月 5 美元免费额度 的确切用量。

获取您的 Apify API 令牌

要从自己的代码运行此 actor，您需要一个 Apify API 令牌。大约一分钟完成：

1. 免费注册 Apify 账户（Google、GitHub 或电子邮件）。
2. 前往 设置 → 集成 → API 令牌。
3. 点击 创建新 API 令牌。复制并妥善保存。

免费额度：Apify 每月为您的账户提供 5 美元平台使用额度，无需信用卡。足以有意义地测试任何 actor — 按典型 scraper 每条结果 0.001 美元计算，每月大约 5,000 条免费结果。

从代码调用

通过 Apify REST API 从任何语言运行此 actor。将 YOUR_TOKEN 替换为您的 API 令牌，并根据需要调整输入 JSON。

curl -X POST "https://api.apify.com/v2/acts/santamaria-automations~ycombinator-scraper/run-sync-get-dataset-items?token=YOUR_TOKEN" \
  -H "Content-Type: application/json" \
  -d '{}'

// npm install apify-client
import { ApifyClient } from 'apify-client';

const client = new ApifyClient({ token: 'YOUR_TOKEN' });
const run = await client.actor('santamaria-automations/ycombinator-scraper').call({});
const { items } = await client.dataset(run.defaultDatasetId).listItems();
console.log(items);

# pip install apify-client
from apify_client import ApifyClient

client = ApifyClient('YOUR_TOKEN')
run = client.actor('santamaria-automations/ycombinator-scraper').call(run_input={})
items = list(client.dataset(run['defaultDatasetId']).iterate_items())
print(items)

// dotnet add package Apify.Client
using Apify.Client;

var client = new ApifyClient("YOUR_TOKEN");
var run = await client.Actor("santamaria-automations/ycombinator-scraper").CallAsync(new { });
var items = await client.Dataset(run.DefaultDatasetId).ListItemsAsync();

// Maven: com.apify:apify-client
import com.apify.client.ApifyClient;

ApifyClient client = new ApifyClient("YOUR_TOKEN");
ActorRun run = client.actor("santamaria-automations/ycombinator-scraper").call(Map.of());
List<Map<String,Object>> items = client.dataset(run.getDefaultDatasetId()).listItems();

与 AI 代理配合使用 (MCP)

此 actor 可在 Apify MCP 服务器上使用，因此您可以从任何兼容 MCP 的 AI 客户端驱动它 — Claude Desktop、Claude.ai、Cursor、VS Code、LangChain、LlamaIndex 或自定义 agent — 无需编写代码。

https://mcp.apify.com?tools=santamaria-automations/ycombinator-scraper

连接后的示例提示：

"使用 ycombinator-scraper 运行一次 scrape，并将结果以表格形式返回给我。"

支持动态工具发现的客户端（Claude.ai、VS Code）会通过 add-actor 自动接收完整的输入 schema。

与无代码平台配合使用

从您喜欢的自动化工具触发此 actor。下面的每个平台都可以点几下就调用 Apify API — 无需代码。