Kako ukloniti metapodatke na Google disku: kompletan vodič i posebni slučajevi

Informatec Digital » The Cloud » Kako ukloniti metapodatke na Google disku: kompletan vodič i posebni slučajevi

Izbriši metapodatke na Google disku

Ako ste zabrinuti zbog toga koje dodatne informacije putuju s vašim datotekama u oblaku, vjerovatno ste se pitali kako očistiti ili kontrolirati te nevidljive podatke. U Google Driveu, metapodaci se kreću od oznaka i indeksiranog teksta do sličica i svojstava datoteka. Ključno je razumjeti šta se može ukloniti, šta se može samo ažurirati, a šta se ne može dirati , kako biste mogli djelovati precizno bez ikakvog oštećenja.

U ovom vodiču smo na jednom mjestu prikupili informacije koje su raštrkane po raznim službenim Google dokumentima i člancima pomoći. Naučit ćete kako ukloniti metapodatke oznaka iz datoteke, upravljati indeksiranim tekstom i sličicama te razumjeti ograničenja i izuzetke . Također pojašnjavamo slične scenarije (prijenosi pohrane u oblaku i metapodaci virtualne mašine u Compute Engineu) kako bismo izbjegli zabunu ako radite s Google Cloudom.

Šta su metapodaci na Disku i koliko daleko se taj termin odnosi?

Na Google disku, metapodaci uključuju informacije kao što su naziv, MIME tip, izvedena ekstenzija, oznake, tekst koji se može indeksirati i povezane sličice. Neki dijelovi se mogu uređivati ​​ili brisati (npr. oznake), drugi se ažuriraju indirektno (tekst koji se može indeksirati i sličice), a treći se ne mogu izbrisati jer su dio sistema (kao što su veličina datoteke ili interni datumi kreiranja i ažuriranja).

Također ćete vidjeti reference na metapodatke u drugim Google Cloud proizvodima, kao što su Cloud Storage ili Compute Engine. Ne biste trebali miješati metapodatke virtuelne mašine ili objekta u Cloud Storageu s metapodacima datoteke na Driveu.Dijele koncept, ali im se upravljanje i ograničenja razlikuju.
Upravljanje metapodacima na Disku

Šta se zapravo može ukloniti na Disku

Sa praktične tačke gledišta, ono što se najčešće smatra "uklanjanjem metapodataka" na Disku jeste uklanjanje oznaka primijenjenih na datoteku. Oznake mogu sadržavati polja (tekst, korisnik, itd.), a njihovim uklanjanjem se brišu njihove povezane informacije iz te datoteke . Ovo brisanje se vrši putem API-ja korištenjem atomskih operacija.

Indeksirajući tekst (contentHints.indexableText) se ne "briše" jednostavno pritiskom na dugme; on se prepisuje ili ostavlja prazan kada ažurirate resurs datoteke . Dizajniran je da poboljša mogućnost otkrivanja tipova datoteka koje Drive ne indeksira izvorno.

Prilagođene sličice se obrađuju slično: možete prenijeti drugu sliku sličice ili prestati s pružanjem jedne . Ako Drive može generirati standardnu ​​sličicu, koristit će svoju vlastitu; ako ne, koristit će onu koju vi pružite.

Neki metapodaci na Disku, kao što su veličina datoteke i interne vremenske oznake, ne mogu se izbrisati. Ova sistemska svojstva ažurira sama usluga i ne mogu se direktno izbrisati.

Uklanjanje oznaka iz datoteke na Google disku

Drive API vam omogućava da mijenjate ili uklanjate oznake pomoću metode files.modifyLabels. Zahtjev uključuje objekt tipa ModifyLabelsRequest s jednom ili više modifikacija koje se primjenjuju atomski. (ako bilo koji nisu važeći, ništa se ne primjenjuje).

Da biste potpuno uklonili oznaku iz datoteke, pošaljite LabelModification sa identifikatorom oznake i instrukcijom brisanja. Ovaj proces uklanja sva polja iz te oznake u datoteci.Ako trebate onemogućiti samo određeno polje, možete "poništiti" to polje bez uklanjanja cijele oznake.

Konceptualni koraci za uklanjanje oznake iz određene datoteke: 1) identificira labelId oznake prisutne u datoteci (možete ih navesti sa files.listLabels), 2) Pošaljite modifikaciju s aktiviranom opcijom removeLabel, 3) potvrđuje da odgovor uključuje konačno stanje ažuriranih oznaka.

Indeksirajući tekst: kontrola, ograničenja i dobre prakse

Ako vaša aplikacija sprema tipove datoteka koje Drive ne indeksira samostalno (crteži, videozapisi, prečice itd.), možete povećati mogućnost pretraživanja popunjavanjem contentHints.indexableText. Ovaj tekst se obrađuje kao HTML, indeksira i može se pojaviti u sažecima rezultata. na više površina za pretraživanje.

Važne preporuke i ograničenja: maksimalna veličina indexableText-a je 128 KB ; uhvatite termine i koncepte koji zaista opisuju sadržaj; ne pokušavajte sortirati tekst po relevantnosti, indekser već određuje prioritete; ažurirajte tekst pri svakom spremanju ; izbjegavajte "dopunjavanje" nepovezanim ključnim riječima (to na kraju frustrira korisnike i može potaknuti brisanje).

Imajte na umu da, budući da se tretira kao HTML, indeksira se tekstualni sadržaj, a ne atributi . Na primjer, ako vaš string sadrži oznake s atributima, indeksirat će se vidljivi tekst, a ne vrijednosti tih atributa.

Sličice: Otpremanje, Zamjena i Oporavak

Drive automatski generira minijature za Dokumente, Tablice, Slajdove i druge vrste dokumenata. Ako vaša vrsta datoteke ne generira standardnu ​​sličicu, možete je pružiti. konfiguriranje contentHints.thumbnail prilikom kreiranja ili ažuriranja datoteke.

Zahtjevi za prilagođene sličice: Koristite PNG, GIF ili JPG; preporučena širina 1600 px (minimalno 220 px); maksimalna veličina datoteke 2 MB; pruža sliku kodiranu u base64 formatu, sigurnu za URL i mimeType Tačno. Sličica se mora ažurirati pri svakom spremanju, jer se poništava kada se sadržaj datoteke promijeni (same promjene metapodataka ga ne poništavaju).

Da biste preuzeli sličicu, označite polje thumbnailLink resursa files. To je kratkotrajna veza i pojavljuje se samo ako vaša aplikacija može pristupiti sadržaju.Ako datoteka nije javna, trebat će vam vjerodajnice da biste koristili tu vezu.

Primjeri upita metapodataka sa sličicama putem REST-a:

GET https://www.googleapis.com/drive/v3/files/FILE_ID?fields=id,name,mimeType,thumbnailLink
GET https://www.googleapis.com/drive/v3/files?q=mimeType='application/vnd.google-apps.spreadsheet'&fields=files(id,name,mimeType,thumbnailLink)

Imena datoteka i ekstenzije: šta trebate znati

Prilikom umetanja datoteke putem API-ja, preporučuje se navođenje ekstenzije u svojstvu name (na primjer, mačka.jpg). Drive će propagirati tu ekstenziju kao fileExtension samo za čitanje u sljedećim odgovorima, a kada korisnik preuzme datoteku ili je sinhronizuje sa desktop klijentom, puno ime će biti generisano na osnovu naslova.

Ako ne navedete ekstenziju, Drive će pokušati da je odredi na osnovu MIME tipa . Kad god je moguće, navedite je kako biste izbjegli iznenađenja.

Ne miješajte uklanjanje metapodataka s brisanjem datoteka.

Uklanjanje metapodataka i brisanje datoteka su različite radnje. Ako posjedujete datoteku i pošaljete je u korpu za smeće, ne brišete metapodatke; uklanjate datoteku sa svog diska . Opcija brisanja (kada niste vlasnik) jednostavno je skriva od vas, ali će je drugi i dalje vidjeti.

Da biste poslali datoteku u smeće na webu: idite na drive.google.com, kliknite desnim tasterom miša i odaberite Premjesti u smeće . Ako je neko drugi vlasnik datoteke, vidjet ćete opciju Ukloni. Da biste trajno izbrisali datoteku, ispraznite smeće. Nijedan od ovih koraka ne uklanja metapodatke iz sačuvane datoteke: ili brišete datoteku ili upravljate njenim metapodacima koristeći objašnjene opcije.

Prijenos i zadržavanje metapodataka u pohrani u oblaku (u slučaju premještanja podataka)

Prilikom rada sa uslugom prijenosa pohrane do/iz pohrane u oblaku, postoje pravila o tome koji se metapodaci zadržavaju, a koji ne. Ovo je ključno ako koristite Drive s kontejnerima ili migrirate podatke između oblaka.

Od Amazon S3 ili kompatibilnog do Cloud Storage-a

• Oni su konzervirani polja metapodataka fiksnog ključa (npr. kontrola keša, raspoređivanje sadržaja, tip sadržaja).
• Korisnički definirani metapodaci se prosljeđuju prilagođeni metapodaci u Cloud Storageu (moguće uređivanje).
• El ETag Sačuvano je kao personalizovano sa ključem x-goog-source-etag.
• Veličina objekta je sačuvana kao size.
• S3 liste kontrole pristupa i oznake objekata: nisu sačuvani.
• Metapodaci vremenske oznake S3: nisu sačuvaniU pohrani u oblaku, timeCreated y updated odražavaju trenutak kreiranja/ažuriranja na odredištu.
• Klasa skladištenja: konfigurabilna tokom prenosa (podrazumevano, ona odredišne ​​kutije).

Od Microsoft Azure Blob-a do pohrane u oblaku

• Fiksna ključna polja metapodataka: oni su konzervirani.
• Korisnički definirani metapodaci: spremaju se kao prilagođeni u pohrani u oblaku.
• ETag Sačuvano je kao x-goog-source-etag.
• Veličina kao sizeADLS Gen2 POSIX dozvole i specifična kontrola pristupa: nisu sačuvani.
• Metapodaci vremenske oznake Azure: nisu sačuvani. timeCreated/updated se preračunavaju na odredištu.
• Klasa skladištenja: konfigurabilna kao u slučaju S3.

Između kontejnera za pohranu u oblaku

• Fiksni i prilagođeni ključni metapodaci: oni su konzervirani.
• Generiranje objekta: sačuvano kao prilagođeni metapodaci x-goog-reserved-source-generation.
• Zadržavanja: Privremena zadržavanja se zadržavaju prema zadanim postavkama; zadržavanja zasnovana na događajima se ne zadržavaju. Pazite na LCAMožete ih zadržati, ali izbjegavajte stvaranje nepristupačnih objekata.
• Klasa skladištenja: Zadrži, postavi novu ili koristi onu iz odredišne ​​memorije.
• CMEK enkripcija: opcionalno zadržavanje; po zadanim postavkama se koristi metoda odredišne ​​​​kabine.
• timeCreated može se čuvati u customTime; updated br.
• Ostali metapodaci koji se ne mogu uređivati ​​(npr. etag, componentCount): Ne..

Liste URL-ova za pohranu u oblaku

• Fiksna ključna polja metapodataka: za uređivanje na odredištu.
• Content-Length y MD5: nije moguće uređivati i sačuvani su ako ih izvor pruža.
• Vremenske oznake izvora: Ne.Klasa skladištenja: konfigurabilna.

POSIX u pohranu u oblaku (i obrnuto)

• mtime sačuvano kao prilagođeni metapodaci goog-reserved-file-mtime.
• Veličina je sačuvana kao sizeUID, GID, MODE i simboličke veze: neobavezna preko metadataOptions.
• U POSIX-u do POSIX-a, UID/GID/MODE se mogu sačuvati na datotekama i folderima; mtime Sprema se za datoteke (u mapama se koristi vrijeme kreiranja na odredištu).

Ovi detalji su važni prilikom premještanja podataka između servisa. Nemojte očekivati ​​da će brisanje metapodataka u jednom sistemu magično učiniti da oni nestanu u drugom ; poštujte pravila zadržavanja svakog transfera.

Metapodaci Compute Engine-a (VM): Ograničenja i brisanje, ako koristite Google Cloud

Iako nije Drive, mnogi timovi pristupaju metapodacima VM-a u Compute Engine-u. Da biste ovo upravljali, potrebne su vam odgovarajuće IAM dozvole i poznavanje ograničenja veličine i opsega.

Prije svega: Instalirajte Google Cloud CLI i pokrenite ga prvi put sa gcloud init (Ako koristite eksternog provajdera identiteta, prijavite se federirano.) Redovno ažurirajte CLI gcloud components update i postavite zadanu regiju i zonu kako biste izbjegli greške u opsegu.

Tipične potrebne dozvole: Ako virtuelne mašine koriste servisne račune, je potrebno iam.serviceAccounts.actAsZa metapodatke na nivou projekta: compute.projects.get y compute.projects.setCommonInstanceMetadata. Za zonske metapodatke: compute.instanceSettings.get y compute.instanceSettings.updateZa metapodatke na određenoj VM-u: compute.instances.get y compute.instances.setMetadata.

Ključna ograničenja: Metapodaci postavljeni po VM-u imaju kombinovani maksimum 512 KB; svaki ključ do 128 bajtova i svaka vrijednost do 256 KBSSH ključevi se čuvaju u ssh-keysako prekoračite ograničenje, Vrijeme je da očistite nekorištene ključeveAko skripte za pokretanje/gašenje stavite kao direktni sadržaj, one se računaju u ograničenje; umjesto toga, sačuvajte skriptu u Cloud Storage i pruža samo URL.

Velika/mala slova: tipke su osjetljive na velika i mala slova; vrijednosti također, osim logičkih vrijednosti. Za zonske metapodatke: upravlja se samo pomoću gcloud-a ili REST-a; Ne možete duplirati ključeve s istim tekstom promjenom velikih i malih slova (npr. kreirajte ZONAL-METADATA-KEY ako zonal-metadata-key već postoji); i ne možete definirati zonske vrijednosti za ssh-keys.

Logičke vrijednosti prihvataju ekvivalente: TAČNO/NETAČNO i alternative kao što su D/Da/1 i N/Ne/0, bez razlikovanja velikih ili malih slova.

Opseg i prioritet: Isti naziv ključa može postojati i na nivou projekta i na nivou zone, ali zonska vrijednost ima prioritet u svojoj zoni . Ako dodate zonsku vrijednost, ona se koristi za virtuelne mašine u toj zoni čak i ako postoji vrijednost na nivou projekta; dodavanje vrijednosti projekta ne poništava postojeće zonske vrijednosti.

Uobičajene operacije: Možete konfigurirati metapodatke projekta (primjenjuje se na sve VM-ove), zonske metapodatke (utječe na sve VM-ove u zoni unutar tog projekta) i metapodatke instance (samo za jednu VM). Za uklanjanje metapodataka, gcloud ili REST vam omogućavaju brisanje metapodataka projekta, zone ili instance po potrebi.

Lokalno korištenje REST-a: REST API primjeri koriste vjerodajnice koje ste naveli gcloud CLI-ju. Autentifikujte svoje okruženje i ponovo upotrijebite te vjerodajnice za testiranje poziva sa svog računara.

Praktični savjeti za bolju higijenu metapodataka na Disku

Ako želite smanjiti svoj utjecaj na Drive, usredotočite se na ono što možete kontrolirati: oznake (uklonite ih ako ne dodaju vrijednost), tekst koji se može indeksirati (prilagodite ga ili ispraznite ako vam nije potreban) i sličice (zamijenite ih ili izbjegavajte njihovo postavljanje) . Svojstva sistema služe za reviziju, a ne za brisanje.

Kada se datoteka dijeli, a vi niste njen vlasnik, imajte na umu da uklanjanjem iz vašeg prikaza ne brišete ništa za druge. Koordinirajte se s vlasnikom ako je cilj potpuno uklanjanje povezanog sadržaja ili metapodataka.

Ako integrirate Drive s tokovima u Cloud Storageu ili s VM-ovima, dokumentirajte očekivanja. Mnogi metapodaci se mijenjaju ili ne putuju između sistema ; izbjegavajte automatizacije koje se oslanjaju na vremenske oznake ili ACL-ove koji nisu sačuvani.

Pomoću ovih smjernica imat ćete kontrolu nad onim što zaista čini razliku. Precizno upravljajte oznakama, kontrolišite šta se može indeksirati i odlučite kada i kako koristiti sličice kako biste postigli ravnotežu između privatnosti, mogućnosti pretraživanja i korisničkog iskustva.