Substack Scraper: Posts, Volltext und Kommentare

Holen Sie die Posts jedes Substack-Newsletters. Geben Sie einen Namen wie lenny, eine .substack.com-Adresse oder eine eigene Domain ein und erhalten Sie Titel, Datum, Autoren, Reaktionen, Kommentarzahl, Tags und Titelbild jedes Posts. Volltext und öffentliche Kommentare lassen sich zuschalten. Kein Login, kein API-Schlüssel.

Was Sie bekommen

• Post: IDs, Titel, Untertitel, Beschreibung, URL, Datum, Typ, Zielgruppe und Bezahl-Kennzeichen, Wortzahl, Tags, Titelbild
• Engagement: Reaktionen nach Emoji, Kommentarzahl und Restacks
• Publikation: Autoren mit Name und Handle, Rubrik, Host und ID der Publikation, Podcast-Audio und -Länge
• Inhalt: Anfangstext; mit includeContent der ganze Text als HTML und Klartext (bei Bezahl-Posts nur die öffentliche Vorschau)
• Kommentare: eine Zeile pro öffentlichem Kommentar mit Text, Datum, Autor, Reaktionen und Antwort-Ebene

Typische Anwendungsfälle

• Content-Archiv: Titel, Daten und Engagement aller Posts eines Newsletters sammeln
• Research: Post-Texte für Analysen, Zusammenfassungen oder Datensätze
• Nischen-Monitoring: mehrere Publikationen vergleichen und die meistdiskutierten Posts finden
• Community-Analyse: öffentliche Kommentar-Threads für Stimmungsanalysen

Eingabe

Publikationen kommen in publications: ein Name (lenny ist lenny.substack.com), ein .substack.com-Host, eine eigene Domain wie lennysnewsletter.com oder eine Post-URL, die auf ihre Publikation gekürzt wird. Dieselbe Publikation in mehreren Schreibweisen wird nur einmal gelesen. maxPostsPerPublication (Standard 20, 0 für alle) nimmt die neuesten Posts, maxResults (Standard 100, 0 ohne Limit) begrenzt alle Zeilen zusammen. includeContent fügt body_html und body_text hinzu; includeComments fügt eine Zeile pro öffentlichem Kommentar hinzu, bis maxCommentsPerPost (Standard 20, Antworten eingeschlossen). Jede Zeile hat ein Feld type: post oder comment. Eine leere Eingabe liest bis zu 10 Posts einer Beispiel-Publikation.

Beispiel-Eingabe

{
  "publications": [
    "lennysnewsletter.com",
    "thezvi.substack.com"
  ],
  "maxPostsPerPublication": 24,
  "includeContent": false,
  "includeComments": false
}

Was das kostet

0,0007 $ pro Post (0,70 $ pro 1.000), 0,0014 $ pro Post mit Volltext statt des Post-Preises, 0,0004 $ pro Kommentar. Bezahl-Posts liefern die Vorschau und kosten wie ein normaler Post. Ein Lauf ohne Ergebnis kostet nichts. Apify schreibt Konten im Free-Plan 5 $ Plattformguthaben pro Monat gut; damit sind die ersten Läufe gratis. Kein Monatsabo.

Direkt auf Apify ausführen (kein Code)

Klicken Sie oben auf Auf Apify öffnen, um substack-scraper im Browser auszuführen – kein Code, keine Installation. In der Apify-Konsole erhalten Sie:

• Test mit einem Klick – füllen Sie das Eingabeformular aus oder fügen Sie das obige JSON-Beispiel in den JSON-Editor ein und klicken Sie auf Start.
• Live-Ausgabe – sehen Sie zu, wie Zeilen in eine interaktive Output-Tabelle einfließen, oder wechseln Sie zur rohen JSON- / Log-Ansicht.
• Export in jedem Format – Datensatz mit einem Klick als JSON, CSV, XML, Excel, HTML-Tabelle, RSS oder JSONL herunterladen.
• Zeitpläne – Actor täglich, wöchentlich, stündlich oder mit benutzerdefiniertem Cron ausführen. Apify übernimmt das Timing und speichert jeden Datensatz-Lauf.
• Integrationen & Webhooks – Webhook bei Erfolg/Fehler auslösen oder mit Zapier, n8n, Make, Airbyte, Google Sheets, Slack, S3, Postgres u.v.m. aus dem Actions-Tab verbinden.
• Transparente Kosten – exakte Nutzung im Rahmen Ihres Gratiskontingents von 5$/Monat sehen, bevor Sie etwas ausgeben.

Ihren Apify API-Token erhalten

Um diesen Actor aus Ihrem eigenen Code auszuführen, benötigen Sie einen Apify API-Token. In etwa einer Minute erledigt:

1. Kostenlos bei Apify registrieren (Google, GitHub oder E-Mail).
2. Gehen Sie zu Einstellungen → Integrationen → API-Tokens.
3. Klicken Sie auf Neuen API-Token erstellen. Kopieren und geheim halten.

Gratiskontingent: Apify schreibt Ihrem Konto 5$ Plattformnutzung pro Monat gut, keine Kreditkarte erforderlich. Genug, um jeden Actor sinnvoll zu testen. Wie viele Ergebnisse das sind, hängt vom Preis pro Ergebnis des Actors ab.

Aus Code aufrufen

Führen Sie diesen Actor aus jeder Sprache über die Apify-REST-API aus. Ersetzen Sie YOUR_TOKEN durch Ihren API-Token und passen Sie das JSON-Input an.

curl -X POST "https://api.apify.com/v2/acts/santamaria-automations~substack-scraper/run-sync-get-dataset-items?token=YOUR_TOKEN" \
  -H "Content-Type: application/json" \
  -d '{}'

// npm install apify-client
import { ApifyClient } from 'apify-client';

const client = new ApifyClient({ token: 'YOUR_TOKEN' });
const run = await client.actor('santamaria-automations/substack-scraper').call({});
const { items } = await client.dataset(run.defaultDatasetId).listItems();
console.log(items);

# pip install apify-client
from apify_client import ApifyClient

client = ApifyClient('YOUR_TOKEN')
run = client.actor('santamaria-automations/substack-scraper').call(run_input={})
items = list(client.dataset(run['defaultDatasetId']).iterate_items())
print(items)

// dotnet add package Apify.Client
using Apify.Client;

var client = new ApifyClient("YOUR_TOKEN");
var run = await client.Actor("santamaria-automations/substack-scraper").CallAsync(new { });
var items = await client.Dataset(run.DefaultDatasetId).ListItemsAsync();

// Maven: com.apify:apify-client
import com.apify.client.ApifyClient;

ApifyClient client = new ApifyClient("YOUR_TOKEN");
ActorRun run = client.actor("santamaria-automations/substack-scraper").call(Map.of());
List<Map<String,Object>> items = client.dataset(run.getDefaultDatasetId()).listItems();

Mit KI-Agenten verwenden (MCP)

Dieser Actor ist auf dem Apify MCP-Server verfügbar, sodass Sie ihn von jedem MCP-kompatiblen KI-Client aus steuern können – Claude Desktop, Claude.ai, Cursor, VS Code, LangChain, LlamaIndex oder einem eigenen Agent – ohne Code zu schreiben.

https://mcp.apify.com?tools=santamaria-automations/substack-scraper

Beispiel-Prompt nach Verbindung:

"Verwende substack-scraper, um einen Scrape durchzuführen, und liefere mir die Ergebnisse als Tabelle."

Clients mit dynamischer Tool-Discovery (Claude.ai, VS Code) erhalten das vollständige Input-Schema automatisch via add-actor.

Mit No-Code-Plattformen verwenden

Triggern Sie diesen Actor aus Ihrem Automatisierungstool. Alle unten aufgeführten Plattformen können die Apify-API in wenigen Klicks aufrufen — kein Code erforderlich.

Verwandte Actors

• RSS & Atom Feed Reader
• Google News Scraper
• Reddit Scraper