Traduzione automatica
Questa pagina è stata tradotta automaticamente dall'IA e potrebbe contenere errori. In caso di dubbi, fare riferimento alla versione inglese.
Modello dati e contratto di directory¶
1. Modello dati (core/models.py)¶
Tutto il JSON grezzo del sito viene mappato dai parser in queste dataclass; i componenti a valle (render/writer/relations)
dipendono solo da questo livello. Conversation._blocks/_plain sono montature fedeltà delle risposte grezze (repr=False).
classDiagram
class Account {
+str username
+str display_name
+str plan
+folder (property: display_name or username)
}
class Space {
+str uuid / title / slug / emoji
+int n_threads
}
class Conversation {
+str web_uuid (web entryUUID)
+str psc_uuid (platform context_uuid, nullable)
+str url / title / author / export_via
+str mode (default search)
+str last_updated
+int thread_access
+list~Turn~ turns
+list~Citation~ citations (aggregated, deduped by url)
+list~Asset~ assets
+Report report
+dict metadata (thread_metadata verbatim)
+list~dict~ unconsumed_bgs (attribution waterfall ③ appendix)
+list~dict~ answer_variants (answer-rewrite variant registration, offline-operations.md)
+list~SubAgent~ sub_agents (filled by relations offline rebuild, offline-operations.md §15)
+dict _blocks (schematized fidelity; writer persists raw_blocks.json)
+dict _plain (plain fidelity; writer persists raw_entries.json)
+str exported_at
+n_turns (property)
}
class Turn {
+int index (re-numbered after created_us sort)
+str uuid / context_uuid / query / author
+int created_us / updated_us
+list~Step~ steps (parsed from plain text)
+str answer (extract_answer)
+list~Citation~ citations (turn-level dedupe)
+list~SubAgent~ sub_agents
+dict wf_block (schematized workflow block, mounted by adapter)
+list~dict~ stub_wfs (stub-turn-associated background payloads, mounted by parsers)
+dict metadata (report_info / locked_reason / wf_status, filled by parsers)
}
class Step {
+str step_type (INITIAL_QUERY / FINAL / ASI_TOOL_* / RESEARCH_ANSWER / CODE ...)
+dict content
+str timestamp / tool_name / title / icon / step_id
}
class SubAgent {
+str sub_id (workflow_payload.id, toolu_X)
+str headline / prompt (objective_chunks concatenation)
+list~Step~ steps / str answer / list~Citation~ sources
+str status (background-side true workflow status)
+str locked_reason
}
class Citation {
+str name / url / snippet / timestamp
+str category (default web)
+int turn_index
}
class Asset {
+str uuid / asset_type / filename / url
+str version (default v1) / int n_versions / str created_at
+bool final / str downloaded_to
}
class Report {
+str title / file_name / url / content_md
}
class RelationEdge {
+str src_uuid / dst_uuid / kind / evidence
}
Conversation "1" --> "*" Turn
Conversation "1" --> "0..1" Report
Conversation "1" --> "*" Asset
Conversation "1" --> "0..1" Space
Turn "1" --> "*" Step
Turn "1" --> "*" SubAgent
Turn "1" --> "*" Citation
SubAgent "1" --> "*" Step
SubAgent "1" --> "*" Citation
Note sulle responsabilità (numeri di riga relativi a core/models.py):
Turn.wf_block(models.py:127): il blocco di workflow schematizzato di computer/council, montato daparsers.attach_workflow_blocksper uuid di entry (parsers.py:231-256); il rendering e il fallback delle risposte (_turn_answer, render.py:489) dipendono da esso; writer è in sola lettura.Turn.stub_wfs(models.py:131): payload di background associati agli stub di subagent_result tramite la finestra di 10s (montati da parsers.match_stub_workflows).Turn.metadata(models.py:134): tre chiavi —report_info(passo RESEARCH_ANSWER, parsers.py:199-204),locked_reason(parsers.py:205-208),wf_status(parsers.py:256).Conversation.unconsumed_bgs(models.py:165-170): la fonte dati del fallback di terzo livello della cascata di attribuzione,[{wp, locked_reason, updated, bg_uuid}], renderizzato come appendice alla fine di conversation.md.Conversation.answer_variants(models.py:171-177): registrazione delle varianti di riscrittura delle risposte (fonte dati di thread.json.answer_variants);parsers.collect_answer_variants(parsers.py:589) estrae daentries[].side_by_side_metadatacon criteri di restrizione — catena di rilevamento in §18.Conversation.sub_agents(models.py:178-182): elenco delle esecuzioni di subagent a livello di conversazione, popolato daadapter.sub_agentssolo durante la ricostruzione offline dicmd_relations; la pipeline di esportazione non retropropaga questo campo (writer renderizza con una sub_map locale; relations legge qui) — vedere §15.Conversation._blocks/_plain(models.py:183-190): fedeltà della risposta grezza;fs_writerli persiste verbatim come raw_*.json (fs_writer.py:257-266);get_report/get_assets/ sub_agentsand offline re-render all read from them.PerplexityAdapter(None)può essere costruito con un trasporto None per riutilizzare l'assemblaggio puro dei dati (rerender_cmd.py:138).- Dual ID:
web_uuid= web entryUUID (URL thread);psc_uuid= UUID della piattaformapast_session_contexts, preso dal primo turno non vuoto dicontext_uuid(adapter.py:99).
2. Limiti di scrittura e contratto di directory¶
2.1 L'archivio thread di web_archive (generato da strumenti; file di contenuto non modificati a mano)¶
web_archive/
├── <account display name>/ # author_folder → _safe_folder cleanup
│ │ # (fs_writer.py:40-51; spaces kept, e.g. "Alice Example")
│ ├── <mode>/ # search | deep-research | computer | council | study
│ │ └── <YYYY-MM-DD>_<title-slug>_<uuid8>/ # thread_dir_for (fs_writer.py:58-72)
│ │ ├── thread.json # metadata + interruptions / answer_variants (optional keys) + report_info + psc_uuid
│ │ ├── conversation.md # compact: per-turn Query/Answer + background appendix (render.py:641)
│ │ ├── turns/turn_NNNN.md # full: complete work-process detail (render.py:596)
│ │ ├── sources.json / sources.md # thread-wide citations (deduped by url)
│ │ ├── report.md # deep-research report (exists only when there is one)
│ │ ├── raw_entries.json # plain response fidelity (always present)
│ │ ├── raw_blocks.json # schematized fidelity (absent for search)
│ │ └── assets/
│ │ ├── assets_manifest.json # versioned manifest (uuid/type/version/destination)
│ │ └── files/ # downloaded bodies (resolve_ext decides extensions)
│ └── ...
├── index/ # state and indexes (see 14.2)
├── relations/ # edges.jsonl + graph.md (rebuilt by the relations command)
├── crosscheck/ # cross-validation reports (manual/review artifacts)
└── <account 2>/ ...
2.2 File di stato web_archive/index/ (gestiti da strumenti, non modificare a mano)¶
| File | Writer | Semantica |
|---|---|---|
library_<account>.json |
cmd_index (index_cmd.py) |
indice thread dell'account (GraphQL); merge incrementale per default (--full riscrive); contiene anche last_full_index_at / incremental_runs_since_full; input per indici batch/scheduling/space |
batch_state.json |
BatchState (state.py) |
checkpoint: uuid → stato(ok/error/expired/deleted) + lastUpdated; scritture atomiche; file corrotti salvati automaticamente come .corrupt-<ts> |
.cookies.json |
CookieCache (common.py:111, 150) |
cache dei cookie (freschezza 12h), con fonte ed email dell'account; scrittura atomica: file temporaneo creato con 0o600 poi os.replace (cookies/cache.py:59-67 — credenziali di sessione leggibili solo dal proprietario; nell'ambito di gitignore) |
space_<slug>.json |
cmd_space_index (spaces_cmd.py:106-167) |
elenco thread "tutti" per space (incl. mappatura dual-ID context_uuid) |
space_meta.json |
cmd_spaces --fetch-meta (spaces_cmd.py:299-330) |
cache proprietario/membro dello space (riutilizzata durante la ricostruzione degli indici, evitando un nuovo recupero) |
credit_usage_<account>.json |
cmd_usage_backfill (usage_backfill_cmd.py:17) |
utilizzo crediti per thread (idempotente e riprendibile, scaricato ogni 25 voci) |
cron_snippet.txt |
cmd_schedule (scheduler.py:48-78) |
snippet di invocazione cron (percorsi assoluti) |
answer_variants_log.jsonl |
variant_log.append_registry (variant_log.py:76) |
registro centrale delle varianti di riscrittura delle risposte (deduplicato per thread+entry, idempotente; file tracciato, non logs/) — catena di rilevamento in §18 |
logs/ |
--log-file (common.py:218-229) |
log DEBUG completi (gitignorati) |
Il config.toml a livello utente contiene inoltre una tabella [models] gestita automaticamente
(il catalogo dei modelli più last_refreshed), scritta da pplx-ask models --refresh e
inizializzata da pplx-export init attraverso un round-trip tomlkit che preserva le
altre tabelle e i commenti dell'utente — schema in Configurazione.
Nota per il manutentore — costanti di protocollo fissate. I fatti del protocollo wire Perplexity che
sono accoppiati al parser/renderer — l'API version, l'envelope ask
supported_block_use_cases, supported_features, e la lettura thread
SCHEMATIZED_BLOCK_USE_CASES — sono a fonte singola in
pplx_export/sites/perplexity/platform.py e devono essere aggiornati in sincronia con
parsers.py / render.py quando l'API della piattaforma cambia (fissato manualmente, mai
aggiornato automaticamente; un test vieta copie spurie del letterale di versione). Gli ID dei modelli, al
contrario, sono dati lato server disaccoppiati e risiedono nel catalogo [models] aggiornabile
sopra.
2.3 Il livello indice spaces/ (radice del repository, generato da strumenti)¶
cmd_spaces ricostruisce aggregando index/library_*.json (spaces_cmd.py:259-389):
un <slug>.md per space (aggregazione account partecipanti + intestazione proprietario/membro +
tabella thread + backlink alla posizione di esportazione) più il registro spaces.json. Nota: la directory
di output è spaces/ relativa a CWD (spaces_cmd.py:332) — non segue --out;
le informazioni sugli account partecipanti sono aggregate puramente localmente, mentre proprietari/membri provengono
dalla cache index/space_meta.json. Non modificare a mano — la prossima ricostruzione sovrascrive.
2.4 Modificabile a mano vs gestito da strumenti¶
- Modificabile a mano: il documento di progettazione del sistema, il riferimento API, il README del progetto e altri
documenti di specifica, e i report di revisione
web_archive/crosscheck/(documenti di specifica e artefatti di revisione). - Gestito da strumenti (non modificare a mano i file di contenuto): tutti gli artefatti nelle directory thread
web_archive/,index/,spaces/,relations/— quando sono necessarie modifiche, modificare lo strumento e rieseguire (le correzioni di rendering passano attraverso un re-render, le correzioni dei dati attraverso il corrispondente comando di backfill), mantenendo una singola fonte di artefatti riproducibili.