0.2.0 · Raccolta riscritta: ricette che non dipendono dalla mappa dei bersagli #36
Notifications
Due Date
No due date set.
Blocks
Depends on
Reference: Alby96/Febe#36
Reference in new issue
Block a user
0.2.0 — Raccolta che funziona su Instagram · Specifica:
docs/SPECIFICA.md§6.0, §6, §7.4Obiettivo
Le ricette trovano gli account, leggono profilo, post, storie e raccolte e mettono in coda i file, senza dipendere da una mappa della pagina raccolta a mano.
Decisione (16 novembre 2026)
Alberto accede a mano nel browser di Febe. Poi Febe copia la sessione e lavora con richieste HTTP dirette, senza browser in sottofondo, come Mimante con Bidoo (§1, §2, §6.0).
Tappe
ResponseDelivery,ISiteRequester,RequestCatalogcon i divieti nel codice,ScriptedRequester(#53)HttpSiteRequesternon segue rinvii, fa una richiesta per volta e registra solo l'operazione e lo stato;ISiteSessionin memoria;SiteAnswerSignals(#55)richieste.<sito>.json; con Instagram nessuna operazione configurata, quindi nessun cambiamento fino a S4 (#56)doc_iddai moduli, dietro l'opzione «raccolta» (#57). Chiuse le fonti__rev,__hs,__hsi,__ccg,dpr,__comet_req,x-fb-entry-nonce; restano aperte__spin_*,__req,__s,__dyn,__csre altre, in attesa delle risposte del commento del 17 novembreHttpFileFetcher)Fatto quando
Ogni ricetta è verde contro il sito di prova, casi di arresto compresi, e la prova dal vivo può partire. Governatore, tetti e segnali restano invariati e la simulazione di 30 giorni non supera i tetti.
Valgono sempre le regole di §2 della specifica e quelle di
CLAUDE.md.Confronto: da dove prendere il
doc_id, e che cosa serve davvero alla strada BL'analisi poggia solo sul repository: specifica, decisioni, codice CDP, sonda e campioni ripuliti. Nessun contatto con Instagram, nessun HAR o campione grezzo aperto. Le cose che il repository non può confermare sono segnate (da verificare). Tre lettori, quattro revisori con punti di vista diversi (regole, tenuta nel tempo, costo, altre vie) e due verificatori avversi. Gli errori di citazione che hanno trovato sono già corretti qui.
In breve
doc_idè la parte più facile. Qualunque via si scelga, lo script nella pagina deve comunque riempire i campi di sessione:fb_dtsg,lsd, il valore dix-csrftokene una ventina di campi di versione (__rev,__hs,__spin_*,__dyn…,docs/sonda/richieste-instagram.md:87-95).tools/Febe.Sonda/HarImporter.cs:164-182), e nel campione 000015 i nomi interni sono sostituiti.x-csrftokenoggi non c'è nessuna fonte ammessa, perchédocument.cookieè vietato (ReadOnlyScriptGuard.cs:41, §2 regola 2).doc_id.Le vie per il
doc_iddoc_iddal codice della paginafetchpostData) diNetwork.requestWillBeSentfb_dtsg, passa in memoria anche se se ne leggono due campiNetwork.getRequestPostData, che non è nell'elencodoc_idper le pagine successive, solo in memoria e solo finché la pagina non si ricaricadoc_idsbagliatodoc_idsta inrichieste.instagram.json, preso dafebe-sonda richiesterichieste-instagram.md:84-85dice «mai salvati», mentre §14.5 edecisioni.md:318ammettono gli identificativi delle operazioniEscluse:
fetcho XHR nella pagina, perché modifica la pagina (§6.1);doc_iddai file JavaScript conNetwork.getResponseBody: non sono mai stati catturati, la cattura non legge gli script (DataResponses.cs:12-13) e i nomi sono offuscati.Da non dimenticare:
GET /api/v1/media/{numero}/info/non usa ildoc_id(richieste-instagram.md:45). Se l'elenco dei seguiti risultasse una chiamata dello stesso tipo, anche lì non servirebbe. Conviene decidere operazione per operazione, quando arrivano i campioni mancanti.Problemi che valgono per tutta la strada B
fetchsegue i reindirizzamenti in silenzio. Una richiesta mandata verso/challengeo/accounts/loginnon diventa una navigazione, e Verifica e Scollegamento non scattano (§2 regola 8; le regole disegnali.jsonguardano solo navigazioni e documenti). Servonoredirect: "manual"nello script e una regola dei segnali per queste risposte, scritta su un campione reale.Runtime.evaluate, ilfetchnella pagina va avanti. Servono unAbortControllere un tempo massimo dentro la pagina, altrimenti «una richiesta per volta» (§6.1) non è garantita.__reqe__ssembrano contatori per richiesta (da verificare). Farli avanzare modifica lo stato della pagina; non farli avanzare produce richieste che la pagina non manderebbe mai.fetchdello script passa probabilmente anche dalla cattura (da verificare): arriverebbe ai lettori due volte e prenderebbe un numero d'ordine della ricerca. Proposta: lo script restituisce solo un esito da un elenco chiuso, e il corpo si legge dalla cattura, che ha già il limite di 32 MiB, il tempo massimo e i segnali.richieste-instagram.md:91-92). Senza quel nome nessuna via può rifare «la stessa richiesta della pagina»: serve una correzione della sonda.Mutationnon basta, perché una scrittura senza nome o con un altro nome passerebbe. Serve un elenco chiuso di operazione, metodo e percorso; il controllo suMutationresta come seconda difesa.x-ig-app-idex-asbd-idsono uguali per tutti e possono stare nel modello.x-fb-entry-noncenon si sa che cosa sia.requestWillBeSentintero in memoria, anche se ne legge solo l'indirizzo (CdpClient.cs:274-283,CoreWebView2DevTools.cs:42). Se Chromium vi mette il corpo (da verificare), il corpo confb_dtsgpassa già per un attimo nel processo. ChiederemaxPostDataSize: 0aNetwork.enablelo impedirebbe (da verificare): è un rafforzamento utile se non scegli la 2 o la 2b.doc_iddelle storie non serve: il primo lavoro le lascia fuori.docs/stato.md:171è superato: il HAR è arrivato il 12/11, e il blocco oggi sono i campioni mancanti.Proposta
doc_id: via 2b. Ildoc_idsi tiene solo in memoria. Si prende solo dalle richieste partite dalla pagina, e dall'evento si leggono solodoc_ide il nome dell'operazione; il resto si scarta subito, con prove che nessun valore finisca nei registri. Se non vuoi che il corpo delle richieste passi nel processo di Febe, il ripiego è la via 4.x-csrftoken, mai i valori. Deve anche correggere il nome di campo tolto (punto 5). Senza questo passo la strada B resta ferma, qualunque via si scelga.doc_idche ruota, perché i casi di arresto si possano provare senza Instagram;Decisioni per Alberto
doc_id: 2b (consigliata), 4 oppure 1.doc_idpuò stare in un file del repository?redirect: "manual"nello script, insieme a una regola dei segnali per le risposte di verifica e di uscita dall'account?Decisioni di Alberto del 16 novembre 2026 e disegno nuovo
Decisioni (prese in chat, con i rischi già spiegati):
CLAUDE.mdle regole 3, 4 e 7), §6.1 e §6.5. Restano invariati:doc_ide gettoni dai moduli della pagina (<Operazione>_instagramRelayOperation,DTSGInitialData,LSD,CurrentUserInitialData), letti nel browser al momento dell'accesso e conservati con la sessione.x-csrftoken: va bene la funzione della paginagetCSRFToken(); con la sessione copiata il valore è quello del cookiecsrftoken.Scelte tecniche mie, una riga ciascuna in
docs/decisioni.md:Dati/sessione/sessione.json, fuori dal database e dalle copie giornaliere. Su Windows è cifrata con DPAPI dell'utente, senza pacchetti nuovi. In Docker con AES-GCM e una chiave in un file0600o nella variabile d'ambienteFEBE_CHIAVE_SESSIONE.richieste.instagram.json), scritto solo dalle forme reali. Vengono rifiutati i nomi…Mutation, la telemetria, la chat e la sincronizzazione con facebook.com.Tappe (un ramo, una PR e la CI verde per ciascuna; niente contro Instagram)
CLAUDE.md, §1, §2, §3, §6, appendice A), righe indecisioni.mdISiteRequester, catalogo delle richieste dalle forme reali, richiedente di prova sui campioni ripuliti/api/graphql,/graphql/querye/api/v1/media/{n}/info/nella forma dei campioni, più i casi d'arresto;HttpSiteRequester(senza rinvii, una richiesta per volta, nessun valore nei registri)doc_iddai moduli; «Scollega» cancella anche la sessioneHttpClient(§6.5 punto 3)Servono ancora campioni con le risposte, cioè un HAR più corto senza scorrere la home (#35):
Tolgo l'etichetta «Bloccata»: il lavoro riparte da S0.
S0 e S1 unite in main (#53, CI 348 verde: controlli, prove, installatore, immagine).
Il catalogo di Instagram ha 10 operazioni, ma nessuna è ancora configurata. Le forme scritte da
febe-sondanon bastano per tre motivi:__dyn,__csr,__rev,__spin_*,__req,sec-ch-ua*,x-fb-entry-noncee altri campi;Queste fonti restano «pending» fino alla tappa S4. Le operazioni con dati mancanti restano «non configurate» e non si inventano: è la regola 9.
Domande per Alberto
__usereavsono l'identificativo del tuo account,reel_ids_arrquello dell'account di cui si leggono le storie, ereel_ids/initial_reel_idl'identificativo di una raccolta in evidenza.Mutation, non solo quelli che finiscono così.PolarisProfilePostsQuery, non damedia/{numero}/info.S2 unita in main (#55, CI 360 verde). Il client del sito funziona contro il sito di prova; non è ancora collegato al motore.
Scelte da confermare, Alberto (oggi sono applicate in modo prudente):
segnali.jsondirebbe Disconnessione.HTTP_PROXY,HTTPS_PROXYoALL_PROXY, perché WebView2 non le userebbe e le due strade uscirebbero da reti diverse.x-ig-www-claimparte da «0» finché il sito non ne manda uno. Non viene da un campione (H13).HttpClientmette comunque i suoi pseudo-header e il suo ordine. È parte del rischio di impronta già accettato (§1).S3 unita in main (#56, CI 364 verde).
Cosa fa Febe ora. Otto ricette possono andare per richieste dirette. Ogni richiesta ha il suo permesso e i segnali fermano la ricetta. Se manca un valore o la pagina successiva non è configurata, la ricetta torna alle pagine per quella volta. Con Instagram oggi non cambia nulla, perché nessuna delle sue operazioni è configurata.
Simulazioni di 30 giorni. Nessun superamento dei tetti, né per pagine né per richieste. Il costo per richieste è quello delle operazioni separate di Instagram.
Domande per Alberto, da chiudere prima di S4:
account_iddi un account aggiunto a mano?highlight_idsu Instagram ha il prefissohighlight:o no? Serve per configurare le raccolte (H20).posts-next, altrimenti il vuoto resta da colmare. Confermi l'ordine?Non verificato. Le pagine successive della raccolta in evidenza, perché non c'è un campione paginato. Niente è stato provato su Instagram.
S4: sessione salvata cifrata (PR !57)
Fatto
pagineè la predefinita,richiestesi attiva con--raccoltaoFEBE_RACCOLTA.Fonti «pending» del catalogo
__rev,__hs,__hsi,__ccg,dpr,__comet_req,x-fb-entry-nonce. Le leggo dai moduliSiteData,WebConnectionClassServerGuesseBootloaderConfig, oltre afb_dtsg,lsd,USER_ID,APP_IDedoc_id.__spin_r,__spin_b,__spin_t,__req,__s,__dyn,__csr,__hblp,__hsdp,__sjsp,__crn,__d,referer,priority,sec-ch-ua*,x-ig-max-touch-pointse ogni «(nome tolto)». Sono valori che la pagina calcola mentre gira, oppure il codice pubblico non mostra chi li aggiunge.Domande
Valori calcolati dalla pagina (
__req,__s,__dyn,__csr,__spin_*, …). Quattro strade:Consiglio (b) per
__spin_*, (d) per il resto, finché la sonda non mostra quali sono davvero necessari.Nuovo giro della sonda per i campi «(nome tolto)»: lo lanci tu, quando puoi?
H21: chiamare
require("SiteData")e gli altri moduli nella pagina viva di Instagram fa partire qualcosa, per esempio telemetria o errori segnalati? Si verifica una volta sola dalla console di DevTools, guardando la scheda Rete.H22: i moduli dei
doc_id(<Op>_instagramRelayOperation) sono già caricati sulla pagina dove premi «Ho finito», o solo dopo aver aperto un profilo?Quando copiare la sessione. Oggi la copio solo a «Ho finito». Va copiata anche quando chiudi la finestra su Windows, o quando scade il permesso di guida?
Lo stato «Collegato» deve richiedere anche una sessione salvata leggibile, quando la raccolta è «richieste»?
«Scollega» cancella
sessione.jsone tienechiave.bin. Va bene così?Valori che invecchiano: quanto restano validi
fb_dtsg,lsd,__revedoc_iddopo la copia? Va messo un limite oltre il quale Febe chiede un nuovo «Ho finito»?Copia incompleta: oggi una copia con valori mancanti sostituisce comunque una copia completa precedente, perché quella vecchia potrebbe avere i cookie di un altro accesso. Va bene così?
Stato della sessione nell'interfaccia: va mostrato nella pagina Collegamento, cioè data della copia e valori presenti o mancanti, mai i valori stessi?
Regola 7: nella stessa sessione del motore, alcune operazioni possono passare dal client e altre dal browser? Oggi no: un valore mancante ferma la raccolta come disconnessione.
Restano aperte le domande dei commenti precedenti (tetti delle storie e le altre).
Un errore mio da sapere
Mentre cercavo
x-fb-entry-noncenella HAR, uno dei miei script di mascheramento ha sbagliato. Così il valore di un cookiecsrftokene di un nonce registrati nella HAR sono comparsi nell'output della mia sessione. Non sono finiti in nessun file né nel repository.Per sicurezza puoi uscire da Instagram e rientrare: così la sessione di quella HAR viene ruotata.
Risposte di Alberto alle domande di S4 (18 novembre 2026, in chat)
__spin_*copiata a «Ho finito». Le operazioni che chiedono gli altri valori calcolati (__req,__s,__dyn,__csr…) restano al browser finché la sonda non mostra quali servono davvero.require()innocuo nella pagina viva): lo verifica Alberto in DevTools.doc_idcaricati a «Ho finito»): lo verifica Alberto.chiave.binresta.Le risposte 1, 5, 6, 9 e 10 diventano codice in una tappa S4b, prima di S5.