Bu döviz verilerini çekmek için bu kodu kullanıyorum fakat çıktı şu şekilde oluyor…
- User
Bu döviz verilerini çekmek için bu kodu kullanıyorum fakat çıktı şu şekilde oluyor "{"bist_100":"34,3715","usd_try":null,"eur_try":null,"eur_usd":null,"faiz":null,"altin_ons":null,"brent":null}". Sitedeki bütün veriler olması gerektiği gibi ve bir yasak yok
- Assistant
Sorununuzun nedeni, web sitesinin içeriğinin JavaScript kullanılarak dinamik olarak yüklenmesinden kaynaklanıyor olabilir. Kullanmış olduğunuz
curlisteği, sayfanın ilk HTML içeriğini getirir, ancak JavaScript tarafından daha sonra eklenen içeriği içermez. Bu nedenle, DOM'yu parse ettiğinizde sadece başlangıçta yüklenen ve JavaScript tarafından dinamik olarak güncellenmeyen verileri görürsünüz.Çözüm Önerileri:
-
Headless Tarayıcı Kullanımı:
JavaScript tarafından oluşturulan içeriği almak için bir headless tarayıcı kullanabilirsiniz. Örneğin, PHP ile entegrasyonu bulunan Puppeteer veya Selenium kullanabilirsiniz. Bu araçlar, sayfayı gerçek bir tarayıcı gibi yükler ve JavaScript'in çalışmasına izin verir. Örneğin, puppeteer PHP kütüphanesini kullanarak aşağıdaki gibi bir kod yazabilirsiniz:
<?php require 'vendor/autoload.php'; use Nesk\Puphpeteer\Puppeteer; $puppeteer = new Puppeteer; $browser = $puppeteer->launch(); $page = $browser->newPage(); $page->goto('https://www.bloomberght.com/doviz/dolar'); $content = $page->content(); // Sonrasında $content değişkenini DOMDocument ile parse edebilirsiniz -
API Kullanımı:
Web sitesi, genellikle verileri almak için kullanılan bir API sunuyor olabilir. Tarayıcınızda geliştirici araçlarını açarak (F12 tuşu ile), Ağ (Network) sekmesinde sayfa yüklenirken yapılan istekleri inceleyebilirsiniz. İlgili API endpoint'ini bulup doğrudan o URL'ye istek yapabilirsiniz.
Örneğin, sitedeki döviz verileri aşağıdaki gibi bir API'den geliyor olabilir:
https://www.bloomberght.com/piyasalar/kurlar/dolarBu URL'yi
curlile çekip gelen JSON verisini doğrudan kullanabilirsiniz. -
Gerekli Header Bilgilerini Eklemek:
Bazı web siteleri, tarayıcıdan gelen istekler ile botlardan gelen istekleri ayırt etmek için
User-Agent,Accept,Accept-Languagegibi header bilgilerini kontrol ederler.curlisteğinize uygun header bilgilerini ekleyerek gerçek bir tarayıcıdan geliyormuş gibi davranabilirsiniz. Örneğin:curl_setopt($curl, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 10.0; Win64; x64)');Ancak bu yöntem, içeriğin JavaScript ile yüklendiği durumlarda yeterli olmayabilir.
-
Alternatif Veri Kaynakları:
Eğer yukarıdaki yöntemler işe yaramazsa veya kullanmak istemiyorsanız, döviz verilerini sunan başka bir API veya veri kaynağı kullanabilirsiniz. Örneğin, Exchange Rates API veya Open Exchange Rates gibi servisleri inceleyebilirsiniz.
Sonuç olarak, mevcut yaklaşımınız statik HTML içeriği üzerinde çalışmaktadır ve dinamik olarak yüklenen verileri yakalayamamaktadır. Yukarıdaki yöntemlerden birini kullanarak sorunu çözebilirsiniz.
-