Hub documentation
Dosya biçimleri
Dosya biçimleri
Polars, Hugging Face'ten okuma sırasında aşağıdaki dosya biçimlerini destekler:
Aşağıdaki örnekler yalnızca varsayılan ayarları gösterir. API referans kılavuzunda kullanılabilir tüm parametreleri görüntülemek için yukarıdaki bağlantıları kullanın.
Parquet
Parquet, şema ile tip bilgisini dosyanın içinde sakladığı için tercih edilen dosya biçimidir. Bu, ayrıştırma ile ilgili belirsizlikleri ortadan kaldırır ve okumayı hızlandırır. Polars'ta bir Parquet dosyasını okumak için read_parquet işlevini kullanın:
pl.read_parquet("hf://datasets/roneneldan/TinyStories/data/train-00000-of-00004-2d5a1467fff1081b.parquet")CSV
read_csv fonksiyonu, bir CSV dosyasını okumak için kullanılabilir:
pl.read_csv("hf://datasets/lhoestq/demo1/data/train.csv")JSON
Polars, read_ndjson işleviyle yeni satır ile ayrılmış JSON — json lines olarak da bilinir — okumayı destekler:
pl.read_ndjson("hf://datasets/proj-persona/PersonaHub/persona.jsonl")