Ana içeriğe geç

Doküman Yükleyiciler

Doküman yükleyici, içeriğinizin bulunduğu yer ile onu arayacak depo arasındaki köprüdür. Flowera bunlardan 38 tanesiyle gelir.

Yükleyici ne yapar​

Sırayla üç iş:

  1. İçeriği getirir — bir dosyayı okur, bir sayfayı tarar, bir API çağırır.
  2. Ondan metni çıkarır; biçimin tuhaflıklarını ele alarak.
  3. O metni, seçtiğiniz ayırıcıyla parçalara böler.

Çıktı, depoya ait bir parça kümesidir. Bir depo birçok yükleyici tutabilir ve her biri kendi yapılandırmasını korur — bir PDF kılavuz ile taranmış bir SSS sayfası yan yana durup birlikte aranabilir.

Yükleyici tipi seçme​

İçeriğiniz…Şunu kullanın
PDF, Word, Excel, PowerPoint, EPUB, CSV veya düz metin dosyasıPdf File, Microsoft Word, Microsoft Excel, Microsoft PowerPoint, Epub File, Csv File, Text File
Karışık dosyalardan oluşan bir klasörAynı anda birden çok dosya alan File Loader
Herkese açık bir web sayfasıCheerio Web Scraper (hızlı) ya da JavaScript ağırlıklı sayfalar için Playwright / Puppeteer
Bütün bir siteApify Website Content Crawler, FireCrawl ya da Spider
Bir SaaS aracındaNotion, Confluence, Jira, Github, GitBook, Airtable, Figma
Google Workspace'teGoogle Drive, Google Sheets
Bulut depolamadaS3, S3 Directory
Kendi API'nizin ardındaAPI Loader ya da diğerlerinin ifade edemediği mantık için Custom Document Loader

Web tarama ve SaaS yükleyicileri servis için bir bağlantı bilgisine ihtiyaç duyar. Dosya yükleyicileri duymaz.

Yükleyici yapılandırma​

Depoda Document Loader Ekle düğmesine basın, türü seçin ve alanlarını doldurun. Yükleyicilerin çoğu üç tür şey ister:

  • Kaynak — yüklenecek bir dosya, bir URL, bir Notion veritabanı, bir S3 kovası.
  • Bir metin ayırıcı — çıkarılan metni parçalara nasıl keseceği. Bkz. Parçalara ayırma. Boş bırakmak her dokümanı tek parça olarak saklar; bu yalnızca hâlihazırda kısa olan içerik için doğrudur.
  • Meta veri — bu yükleyiciden gelen her parçaya iliştirilen isteğe bağlı anahtar/değer çiftleri. Bir pasajın nereden geldiğini kaydetmek için kullanışlıdır; böylece bir yanıt kaynak gösterebilir.

Kaydetmeden önce parça önizleme​

Her yükleyicide Parçaları Önizle vardır. Kullanın. Her seferinde.

Önizleme saklanacak şeyi tam olarak gösterir — her parçanın gerçek metni, sırasıyla ve toplam sayısıyla. Buradaki otuz saniye, aksi hâlde bir müşteri kötü yanıt alana kadar görünmeyecek sorunları yakalar:

  • Anlamsız çıkan bir PDF — taranmış bir belgedir ve Flowera okuyabilmeden önce OCR gerekir.
  • Cümlenin ortasında kesilen parçalar — bu doküman için ayırıcı ya da parça boyutu yanlış.
  • Yalnızca çerez bildirimini yükleyen bir web sayfası — sayfa JavaScript çalıştırabilen bir tarayıcı ister.
  • Tek devasa parça — hiç ayırıcı seçilmemiş.

Önizlemede yanlış görünen parçalar kötü getirilir ve sonrasındaki hiçbir talimat mühendisliği bunu düzeltmez.

Kaydettikten sonra​

Kaydedilen bir yükleyici arka planda işlenir — bu bitene kadar depo Bayat, sonra Senkron gösterir. Her iki durumda da içerik siz upsert edene kadar aranabilir olmaz.

İlgili​