The composer takes PDF, text and Markdown files, within a budget per member - #2123
Merged
Conversation
wintermeyer
force-pushed
the
claude/attachments-2104
branch
2 times, most recently
from
September 10, 2026 12:29
3a9bfbd to
7cf68ee
Compare
…Kontingents Ein Beitrag konnte bisher nur Fotos und einen Clip tragen; wer ein Papier oder eine Preisliste teilen wollte, musste anderswohin verlinken. `Vutuv.Attachments` ist der eine Eingang dafür: Format aus den Bytes statt aus der Endung, PDF-Gate über poppler, und erst danach landet etwas auf der Platte. Das Kontingent zählt angenommene Uploads in einer Ledger-Tabelle, damit Hochladen-und-Löschen es nicht zurücksetzt. Ein reiner Byte-Scan im PDF hätte nicht gereicht: ein Lauf von `qpdf --object-streams=generate` versteckt `/JavaScript`, `/OpenAction` und `/EmbeddedFile` in einem komprimierten Objekt-Stream, wo `grep` nichts mehr findet. Deshalb antwortet poppler auf drei der vier Fragen selbst, und der Scan entpackt zusätzlich jeden Stream, den er entpacken kann. Diesen Text hat ein KI-Agent in meinem Namen geschrieben. Ich weiß, dass das problematisch ist. Claude-Session: https://claude.ai/code/session_013VnEsuePUe2CB2QvDcshcp
Die `/OpenAction`-Regel liest, was hinter dem Namen steht, und lässt ein Ziel
durch. Zwei Dateien kamen deshalb vorbei, die genau den Effekt haben, den die
Regel verhindern soll: ein `/OpenAction << /S /GoTo … /Next << /S /Launch >> >>`,
dessen `/GoTo`-Anfang die Prüfung zufriedenstellt und dessen zweite Hälfte
niemand ansah, und eine Seite mit `/AA << /O << /S /Launch >> >>`, die beim
Öffnen dasselbe tut, nur unter anderem Namen. `pdfinfo` meldet für beide
`JavaScript: no`.
Jetzt sind `/Launch`, `/SubmitForm` und `/ImportData` selbst benannt, überall wo
sie stehen. Über 1.051 echte lokale PDFs gemessen: keines enthält einen dieser
drei Namen, die Verschärfung kostet also kein gewöhnliches Dokument (dieselben
3 Ablehnungen von 1.055 vor und nach der Änderung). Beide Regressionstests sind
kalibriert — ohne `@acting_names` werden sie mit `{:ok, _}` rot. Nebenbei trug
der englische Katalog "Remove %{name}" als "Remove %{pattern}", ein Fuzzy-Fill
mit falschem Platzhalter, der den Platzhalter selbst rendert.
Diesen Text hat ein KI-Agent in meinem Namen geschrieben. Ich weiß, dass das
problematisch ist.
Claude-Session: https://claude.ai/code/session_013VnEsuePUe2CB2QvDcshcp
…hören
Zwei Wege kamen am Byte-Scan vorbei, beide gemessen. (1) Ein Katalog auf 9 MB
gepolstert und einmal durch `qpdf --object-streams=generate` gejagt legt
`/OpenAction << /S /Launch >>` in eine ~10 KB kleine Datei, deren einziger
Objekt-Stream über die Entpack-Grenze quillt; der Scan übersprang ihn. (2) Ein
unkomprimierter Deflate-Block trägt die neun Bytes `endstream` vor dem echten,
komprimierten `/Launch`, sodass die nicht-gierige Regex den Stream zu früh
abschnitt und nur den Köder entpackte.
Jetzt läuft der Scan von jeder `stream`-Marke bis zum Dateiende und lässt `:zlib`
an dessen eigenem Endmarker anhalten, und ein Stream, den er nicht fertig
entpacken kann, wird abgelehnt statt übersprungen. Über 1.051 echte lokale PDFs
gemessen: der größte einzelne entpackte Stream ist 3 MB, keiner erreicht 4 MB,
die Grenze kostet also kein gewöhnliches Dokument. Beide Regressionstests sind
kalibriert (Zweig zurückdrehen, dann rot mit `{:ok, _}`); der endstream-Köder
braucht kein externes Werkzeug.
Diesen Text hat ein KI-Agent in meinem Namen geschrieben. Ich weiß, dass das
problematisch ist.
Claude-Session: https://claude.ai/code/session_013VnEsuePUe2CB2QvDcshcp
wintermeyer
force-pushed
the
claude/attachments-2104
branch
from
September 10, 2026 12:50
7cf68ee to
fdca727
Compare
wintermeyer
enabled auto-merge (squash)
September 10, 2026 12:51
This file contains hidden or bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
Sign up for free
to join this conversation on GitHub.
Already have an account?
Sign in to comment
1 participant
Add this suggestion to a batch that can be applied as a single commit.This suggestion is invalid because no changes were made to the code.Suggestions cannot be applied while the pull request is closed.Suggestions cannot be applied while viewing a subset of changes.Only one suggestion per line can be applied in a batch.Add this suggestion to a batch that can be applied as a single commit.Applying suggestions on deleted lines is not supported.You must change the existing code in this line in order to create a valid suggestion.Outdated suggestions cannot be applied.This suggestion has been applied or marked resolved.Suggestions cannot be applied from pending reviews.Suggestions cannot be applied on multi-line comments.Suggestions cannot be applied while the pull request is queued to merge.Suggestion cannot be applied right now. Please check back later.
A post could carry photos and one clip; anything else had to be linked somewhere else.
Vutuv.Attachments.create_pending/3is now the one door for PDF, plain text and Markdown: it reads the format from the bytes (a ZIP calledinvoice.pdfis refused), runs the PDF throughVutuv.Uploads.PdfGate, and only then writes anything. The composer's picker sits beside Add photos / Add video and shows what is left of the member's allowance.A raw-byte scan is not enough, measured. One
qpdf --object-streams=generaterun hides/JavaScript,/OpenActionand/EmbeddedFilewheregrepfinds nothing. So poppler answers three of the four questions itself, and the scan also inflates every stream it can. Calibrated: remove the inflation pass and the/OpenActionfile is accepted.To decide:
ATTACHMENT_UPLOADERSdefaults toadmins, as video did — a post cannot yet show or hand out its files (#2106, #2108), so the budget is inert until that flips.Where:
lib/vutuv/attachments.ex,lib/vutuv/uploads/pdf_gate.ex,/feedcomposer,docs/architecture/attachments.md.Closes #2104
https://claude.ai/code/session_013VnEsuePUe2CB2QvDcshcp