G\u00fcn\u00fcm\u00fcz d\u00fcnyas\u0131nda bilgiye an\u0131nda eri\u015fim kritik \u00f6neme sahip. S\u00fcrekli akan haber verilerini otomatik olarak toplay\u0131p i\u015flemek, bir\u00e7ok sekt\u00f6r i\u00e7in rekabet avantaj\u0131 sa\u011flayabilir. Bu makale, Python ve PostgreSQL kullanarak ger\u00e7ek zamanl\u0131 haber verilerini \u00e7ekmek, temizlemek, d\u00f6n\u00fc\u015ft\u00fcrmek ve depolamak i\u00e7in sa\u011flam bir ETL (Extract, Transform, Load) hatt\u0131 olu\u015fturman\u0131n ad\u0131m ad\u0131m rehberini sunuyor. Bu s\u00fcre\u00e7te, veri m\u00fchendisli\u011finin temel prensiplerini uygulayarak, g\u00fcvenilir ve \u00f6l\u00e7eklenebilir bir sistem in\u015fa etmeyi hedefliyoruz.<\/p>\n
G\u00fcn\u00fcm\u00fcz\u00fcn dijital \u00e7a\u011f\u0131nda, bilgi ak\u0131\u015f\u0131 hi\u00e7 olmad\u0131\u011f\u0131 kadar h\u0131zl\u0131 ve yo\u011fun. \u00d6zellikle haberler, k\u00fcresel olaylar\u0131n nabz\u0131n\u0131 tutmak, piyasa hareketlerini anlamak ve toplumsal e\u011filimleri analiz etmek i\u00e7in paha bi\u00e7ilmez bir kaynakt\u0131r. Finans sekt\u00f6r\u00fcnde, \u015firket haberleri hisse senedi fiyatlar\u0131n\u0131 an\u0131nda etkileyebilirken, pazarlama uzmanlar\u0131 \u00fcr\u00fcn lansmanlar\u0131 veya marka itibar\u0131n\u0131 etkileyen haberleri takip ederek stratejilerini h\u0131zla g\u00fcncelleyebilirler. Ara\u015ft\u0131rmac\u0131lar i\u00e7inse, belirli bir konu hakk\u0131ndaki en son geli\u015fmeleri izlemek, \u00e7al\u0131\u015fmalar\u0131n\u0131n g\u00fcncelli\u011fini korumak ad\u0131na hayati \u00f6neme sahiptir. \u0130\u015fte bu noktada, ger\u00e7ek zamanl\u0131 haber verilerinin toplanmas\u0131, i\u015flenmesi ve analiz edilmesi, karar alma s\u00fcre\u00e7lerinde b\u00fcy\u00fck bir fark yarat\u0131r.<\/p>\n
Ancak, ham haber verisi genellikle da\u011f\u0131n\u0131k, yap\u0131land\u0131r\u0131lmam\u0131\u015f ve farkl\u0131 kaynaklardan geldi\u011fi i\u00e7in do\u011frudan kullan\u0131ma uygun de\u011fildir. Bu t\u00fcr veriyi anlaml\u0131 bilgilere d\u00f6n\u00fc\u015ft\u00fcrmek i\u00e7in sistematik bir yakla\u015f\u0131ma ihtiya\u00e7 duyar\u0131z. \u0130\u015fte burada ETL (Extract, Transform, Load – \u00c7ek, D\u00f6n\u00fc\u015ft\u00fcr, Y\u00fckle) kavram\u0131 devreye girer. ETL, farkl\u0131 kaynaklardan gelen veriyi al\u0131p (Extract), belirli kurallar ve mant\u0131k \u00e7er\u00e7evesinde temizleyip, yap\u0131land\u0131r\u0131p, zenginle\u015ftirip (Transform) ve son olarak analiz veya raporlama i\u00e7in uygun bir depolama alan\u0131na (genellikle bir veritaban\u0131 veya veri ambar\u0131) y\u00fckleme (Load) s\u00fcrecini ifade eder. Bu \u00fc\u00e7 a\u015famal\u0131 s\u00fcre\u00e7, verinin kalitesini, tutarl\u0131l\u0131\u011f\u0131n\u0131 ve kullan\u0131labilirli\u011fini art\u0131rarak, ham verinin stratejik bir varl\u0131\u011fa d\u00f6n\u00fc\u015fmesini sa\u011flar.<\/p>\n
Peki, neden \u00f6zellikle Python ve PostgreSQL ikilisini se\u00e7iyoruz? Python, geni\u015f k\u00fct\u00fcphane ekosistemi ( Bir ETL hatt\u0131 olu\u015fturmak, bir binan\u0131n temelini atmaya benzer; her katman bir \u00f6ncekinin \u00fczerine in\u015fa edilir ve sa\u011flam bir yap\u0131 i\u00e7in her bir bile\u015fenin do\u011fru tasarlanmas\u0131 kritik \u00f6neme sahiptir. Ger\u00e7ek zamanl\u0131 haber verilerini i\u015fleyecek bir ETL hatt\u0131 kurarken, ana bile\u015fenleri ve bu bile\u015fenlerin birbirleriyle nas\u0131l etkile\u015fime girdi\u011fini anlamak, ba\u015far\u0131l\u0131 bir sistemin anahtar\u0131d\u0131r. Bu s\u00fcre\u00e7, temelde \u00fc\u00e7 ana a\u015famadan olu\u015fur: Veri \u00c7ekme (Extract), Veri D\u00f6n\u00fc\u015ft\u00fcrme (Transform) ve Veri Y\u00fckleme (Load).<\/p>\n \u0130lk olarak, Veri Kayna\u011f\u0131 (Haber API’leri)<\/strong> se\u00e7imi gelir. Haber verilerine ula\u015fman\u0131n en yayg\u0131n ve verimli yolu, \u00e7e\u015fitli haber ajanslar\u0131n\u0131n veya veri sa\u011flay\u0131c\u0131lar\u0131n\u0131n sundu\u011fu Uygulama Programlama Aray\u00fczleri (API – Application Programming Interface) kullanmakt\u0131r. Bu API’ler, genellikle belirli bir formatta (JSON veya XML gibi) yap\u0131land\u0131r\u0131lm\u0131\u015f veriler sunar. API se\u00e7imi yaparken, veri kapsam\u0131 (hangi konular\u0131, dilleri, b\u00f6lgeleri kaps\u0131yor), veri g\u00fcncelli\u011fi (ne s\u0131kl\u0131kla g\u00fcncelleniyor), kullan\u0131m limitleri (dakikada\/ayda ka\u00e7 istek yapabilirim), maliyeti ve kimlik do\u011frulama (API anahtar\u0131, OAuth vb.) y\u00f6ntemleri gibi fakt\u00f6rleri g\u00f6z \u00f6n\u00fcnde bulundurmak \u00f6nemlidir. \u00d6rne\u011fin, News API, GNews API veya MediaStack gibi servisler pop\u00fcler se\u00e7eneklerdir. Kimlik do\u011frulama, genellikle bir API anahtar\u0131 ile yap\u0131l\u0131r ve bu anahtar, API isteklerinizin ge\u00e7erlili\u011fini ve yetkilili\u011fini sa\u011flar. Bu anahtarlar\u0131n g\u00fcvenli bir \u015fekilde saklanmas\u0131 ve kullan\u0131lmas\u0131, sistem g\u00fcvenli\u011fi a\u00e7\u0131s\u0131ndan elzemdir.<\/p>\n \u0130kinci a\u015fama, Veri \u00c7ekme (Extract)<\/strong>‘dir. Bu a\u015famada, Python programlama dilini kullanarak se\u00e7ti\u011fimiz haber API’sinden ham veriyi alaca\u011f\u0131z. Python’\u0131n \u00dc\u00e7\u00fcnc\u00fc ve en karma\u015f\u0131k a\u015fama, Veri D\u00f6n\u00fc\u015ft\u00fcrme (Transform)<\/strong>‘dir. \u00c7ekilen ham veri, genellikle farkl\u0131 alan adland\u0131rmalar\u0131na, eksik de\u011ferlere, gereksiz karakterlere veya tutars\u0131z formatlara sahip olabilir. D\u00f6n\u00fc\u015ft\u00fcrme a\u015famas\u0131nda, bu ham veriyi temizleyerek, standartla\u015ft\u0131rarak ve analiz i\u00e7in uygun bir yap\u0131ya getirerek i\u015fleriz. Bu s\u00fcre\u00e7 \u015funlar\u0131 i\u00e7erebilir: eksik de\u011ferleri doldurma veya atma, metin alanlar\u0131ndan \u00f6zel karakterleri veya HTML etiketlerini kald\u0131rma, tarih formatlar\u0131n\u0131 standartla\u015ft\u0131rma, kategori etiketlerini birle\u015ftirme veya yeni t\u00fcretilmi\u015f \u00f6zellikler (\u00f6rne\u011fin, haber metninin uzunlu\u011fu, ba\u015fl\u0131kta ge\u00e7en anahtar kelime say\u0131s\u0131) olu\u015fturma. Python’\u0131n Son olarak, Veri Y\u00fckleme (Load)<\/strong> a\u015famas\u0131 gelir. D\u00f6n\u00fc\u015ft\u00fcr\u00fclm\u00fc\u015f ve temizlenmi\u015f veriyi kal\u0131c\u0131 olarak depolamak i\u00e7in bir veritaban\u0131na ihtiyac\u0131m\u0131z var. PostgreSQL, bu t\u00fcr yap\u0131land\u0131r\u0131lm\u0131\u015f veriyi depolamak i\u00e7in m\u00fckemmel bir se\u00e7enektir. Y\u00fckleme a\u015famas\u0131nda, veritaban\u0131nda haber makaleleri i\u00e7in uygun bir tablo \u015femas\u0131 (schema) olu\u015fturulur. Bu \u015fema, haberin ba\u015fl\u0131\u011f\u0131, i\u00e7eri\u011fi, yazar\u0131, yay\u0131n tarihi, URL’si gibi alanlar\u0131 ve bunlar\u0131n veri tiplerini tan\u0131mlar. Python’dan PostgreSQL’e veri y\u00fcklemek i\u00e7in ETL hatt\u0131m\u0131z\u0131n ilk ve en temel ad\u0131m\u0131, ham haber verisini kaynak sistemden, yani genellikle bir haber API’sinden \u00e7ekmektir. Bu “Extract” (\u00c7ekme) a\u015famas\u0131, verinin kalitesi ve g\u00fcncelli\u011fi i\u00e7in kritik bir rol oynar. Python, bu t\u00fcr g\u00f6revler i\u00e7in sundu\u011fu g\u00fc\u00e7l\u00fc ve esnek k\u00fct\u00fcphaneler sayesinde ideal bir ara\u00e7t\u0131r. Bu b\u00f6l\u00fcmde, Python’\u0131n \u0130lk olarak, bir haber API’si se\u00e7memiz gerekiyor. Piyasadaki pop\u00fcler se\u00e7eneklerden biri olan News API’yi veya GNews API’yi \u00f6rnek alabiliriz. Bu API’ler genellikle bir API anahtar\u0131 gerektirir. Bu anahtar, API’ye eri\u015fim yetkinizi do\u011frular ve istek limitlerinizi y\u00f6netir. API anahtar\u0131n\u0131z\u0131 do\u011frudan kod i\u00e7ine yazmak yerine, ortam de\u011fi\u015fkenleri (environment variables) arac\u0131l\u0131\u011f\u0131yla veya bir yap\u0131land\u0131rma dosyas\u0131 kullanarak g\u00fcvenli bir \u015fekilde saklamak en iyi uygulamad\u0131r. B\u00f6ylece, anahtar\u0131n\u0131z\u0131n yanl\u0131\u015fl\u0131kla a\u00e7\u0131k kaynak kod depolar\u0131na s\u0131zmas\u0131n\u0131 \u00f6nlemi\u015f olursunuz.<\/p>\n Veri \u00e7ekme i\u015flemi i\u00e7in Python’\u0131n A\u015fa\u011f\u0131daki \u00f6rnek kod blo\u011fu, bir haber API’sinden belirli bir anahtar kelimeye g\u00f6re haberleri nas\u0131l \u00e7ekece\u011finizi g\u00f6stermektedir. Burada, Yukar\u0131daki kodda, Hata Y\u00f6netimi ve Yeniden Deneme Mekanizmalar\u0131:<\/strong> Ger\u00e7ek zamanl\u0131 sistemlerde, a\u011f kesintileri, API sunucusunun ge\u00e7ici olarak ula\u015f\u0131lamamas\u0131 veya API limitlerine tak\u0131lma gibi durumlar ka\u00e7\u0131n\u0131lmazd\u0131r. Bu nedenle, sa\u011flam bir hata y\u00f6netimi stratejisi uygulamak hayati \u00f6nem ta\u015f\u0131r. Yukar\u0131daki \u00f6rnekte Veri \u00e7ekme (Extract) a\u015famas\u0131ndan sonra elimizde genellikle JSON format\u0131nda, farkl\u0131 yap\u0131 ve kalitede ham haber verileri bulunur. Bu veriyi do\u011frudan bir veritaban\u0131na kaydetmek, gelecekteki analizleri zorla\u015ft\u0131rabilir ve veri kalitesi sorunlar\u0131na yol a\u00e7abilir. \u0130\u015fte bu noktada, “Transform” (D\u00f6n\u00fc\u015ft\u00fcrme) a\u015famas\u0131 devreye girer. D\u00f6n\u00fc\u015ft\u00fcrme, ham veriyi temizleme, standartla\u015ft\u0131rma, zenginle\u015ftirme ve PostgreSQL veritaban\u0131m\u0131z\u0131n \u015femas\u0131na uygun hale getirme s\u00fcrecidir. Bu a\u015fama, ETL hatt\u0131n\u0131n en karma\u015f\u0131k ve kritik par\u00e7alar\u0131ndan biridir, \u00e7\u00fcnk\u00fc verinin kalitesi burada belirlenir.<\/p>\n \u00c7ekti\u011fimiz haber verisi genellikle bir liste i\u00e7inde Python s\u00f6zl\u00fckleri (dictionary) \u015feklinde gelir. Her s\u00f6zl\u00fck bir haber makalesini temsil eder ve ba\u015fl\u0131k, yazar, a\u00e7\u0131klama, URL, yay\u0131n tarihi gibi alanlar\u0131 i\u00e7erebilir. Ancak, bu alanlar her zaman bekledi\u011fimiz formatta veya eksiksiz olmayabilir. \u00d6rne\u011fin:<\/p>\nrequests<\/code>, pandas<\/code>, beautifulsoup<\/code> vb.) ve basit s\u00f6zdizimi sayesinde veri \u00e7ekme ve d\u00f6n\u00fc\u015ft\u00fcrme i\u015flemleri i\u00e7in ideal bir dildir. H\u0131zl\u0131 prototipleme imkan\u0131 sunmas\u0131 ve b\u00fcy\u00fck veri k\u00fcmeleriyle ba\u015fa \u00e7\u0131kabilme yetene\u011fi, onu veri m\u00fchendisli\u011fi projelerinin vazge\u00e7ilmezi yapar. PostgreSQL ise, a\u00e7\u0131k kaynakl\u0131, g\u00fc\u00e7l\u00fc, \u00f6l\u00e7eklenebilir ve g\u00fcvenilir bir ili\u015fkisel veritaban\u0131 y\u00f6netim sistemidir. Karma\u015f\u0131k sorgular\u0131 desteklemesi, JSON verisi gibi yap\u0131land\u0131r\u0131lmam\u0131\u015f verileri depolayabilmesi ve ACID (Atomicity, Consistency, Isolation, Durability) \u00f6zelliklerini sa\u011flamas\u0131, onu ger\u00e7ek zamanl\u0131 veri depolama ve analiz ihtiya\u00e7lar\u0131 i\u00e7in m\u00fckemmel bir se\u00e7im haline getirir. Bu iki teknolojinin birle\u015fimi, esnek, g\u00fc\u00e7l\u00fc ve bak\u0131m\u0131 kolay bir ETL hatt\u0131 olu\u015fturmak i\u00e7in sa\u011flam bir temel sunar. Bu makale boyunca, bu ara\u00e7lar\u0131 kullanarak nas\u0131l ad\u0131m ad\u0131m bir haber ETL hatt\u0131 kuraca\u011f\u0131m\u0131z\u0131 detayl\u0131ca inceleyece\u011fiz.<\/p>\nETL Hatt\u0131n\u0131n Temel Bile\u015fenleri: Ad\u0131m Ad\u0131m \u0130n\u015fa<\/h3>\n
requests<\/code> k\u00fct\u00fcphanesi, HTTP istekleri g\u00f6ndererek API’lerle ileti\u015fim kurmak i\u00e7in son derece kullan\u0131\u015fl\u0131d\u0131r. \u00c7ekme i\u015flemi s\u0131ras\u0131nda, API’nin belirledi\u011fi parametreleri (anahtar kelime, tarih aral\u0131\u011f\u0131, dil vb.) do\u011fru bir \u015fekilde ayarlamak, istedi\u011fimiz veriye ula\u015fmak i\u00e7in \u00f6nemlidir. Ayr\u0131ca, a\u011f hatalar\u0131, API limitlerine tak\u0131lma veya ge\u00e7ersiz yan\u0131tlar gibi durumlar i\u00e7in hata y\u00f6netimi ve yeniden deneme (retry) mekanizmalar\u0131 uygulamak, ETL hatt\u0131n\u0131n dayan\u0131kl\u0131l\u0131\u011f\u0131n\u0131 art\u0131r\u0131r. Bu a\u015faman\u0131n \u00e7\u0131kt\u0131s\u0131, genellikle bir JSON format\u0131nda gelen, hen\u00fcz i\u015flenmemi\u015f ham haber makaleleri listesidir.<\/p>\npandas<\/code> k\u00fct\u00fcphanesi, bu t\u00fcr veri manip\u00fclasyonlar\u0131 i\u00e7in g\u00fc\u00e7l\u00fc ara\u00e7lar sunar, ancak daha basit senaryolar i\u00e7in \u00f6zel Python fonksiyonlar\u0131 da yeterli olabilir. D\u00f6n\u00fc\u015ft\u00fcrme a\u015famas\u0131n\u0131n amac\u0131, veriyi “temiz” ve “tutarl\u0131” hale getirerek bir sonraki y\u00fckleme a\u015famas\u0131na haz\u0131rlamakt\u0131r.<\/p>\npsycopg2<\/code> gibi veritaban\u0131 adapt\u00f6rleri veya SQLAlchemy<\/code> gibi ORM (Object-Relational Mapping) ara\u00e7lar\u0131 kullan\u0131labilir. Y\u00fckleme i\u015flemi s\u0131ras\u0131nda, ayn\u0131 haberin birden fazla kez kaydedilmesini \u00f6nlemek i\u00e7in benzersiz anahtarlar (\u00f6rne\u011fin, haber URL’si) \u00fczerinden “upsert” (ekle veya g\u00fcncelle) i\u015flemleri uygulamak, veri tekrar\u0131n\u0131 (duplication) engellemek i\u00e7in \u00f6nemlidir. Bu a\u015faman\u0131n sonunda, t\u00fcm i\u015flenmi\u015f haber verileri, sorgulanabilir ve analiz edilebilir bir formatta PostgreSQL veritaban\u0131m\u0131zda saklanm\u0131\u015f olur.<\/p>\nPython ile Veri \u00c7ekme (Extract) Mekanizmas\u0131 Nas\u0131l Kurulur?<\/h3>\n
requests<\/code> k\u00fct\u00fcphanesini kullanarak bir haber API’sinden nas\u0131l veri \u00e7ekece\u011fimizi, kimlik do\u011frulama stratejilerini ve hata y\u00f6netimi mekanizmalar\u0131n\u0131 nas\u0131l uygulayaca\u011f\u0131m\u0131z\u0131 ad\u0131m ad\u0131m inceleyece\u011fiz.<\/p>\nrequests<\/code> k\u00fct\u00fcphanesini kullanaca\u011f\u0131z. E\u011fer y\u00fckl\u00fc de\u011filse, pip install requests<\/code> komutuyla kolayca y\u00fckleyebilirsiniz. Bu k\u00fct\u00fcphane, HTTP istekleri (GET, POST vb.) g\u00f6ndermeyi ve API yan\u0131tlar\u0131n\u0131 i\u015flemeyi son derece basitle\u015ftirir. Bir haber API’sinden veri \u00e7ekerken, genellikle belirli parametreler (anahtar kelime, dil, tarih aral\u0131\u011f\u0131, sayfa numaras\u0131 vb.) ile birlikte bir GET iste\u011fi g\u00f6ndeririz. Bu parametreler, API’nin belgelerinde (documentation) detayl\u0131ca a\u00e7\u0131klan\u0131r.<\/p>\nNEWS_API_KEY<\/code> ve NEWS_API_URL<\/code> de\u011ferlerinin ortam de\u011fi\u015fkenlerinden al\u0131nd\u0131\u011f\u0131n\u0131 varsay\u0131yoruz:<\/p>\n\nimport requests\nimport os\nimport time\n\ndef fetch_news_data(query, page_size=100, language='tr'):\n api_key = os.getenv('NEWS_API_KEY')\n api_url = os.getenv('NEWS_API_URL', 'https:\/\/newsapi.org\/v2\/everything') # Varsay\u0131lan URL\n \n if not api_key:\n print(\"Hata: NEWS_API_KEY ortam de\u011fi\u015fkeni tan\u0131ml\u0131 de\u011fil.\")\n return []\n\n params = {\n 'q': query,\n 'pageSize': page_size,\n 'language': language,\n 'apiKey': api_key\n }\n \n all_articles = []\n page = 1\n total_results = 0\n \n while True:\n params['page'] = page\n print(f\"Haberler \u00e7ekiliyor... Sayfa: {page}\")\n try:\n response = requests.get(api_url, params=params, timeout=10)\n response.raise_for_status() # HTTP hatalar\u0131n\u0131 yakalar (4xx veya 5xx)\n data = response.json()\n \n if not data['articles']:\n break # Daha fazla makale yoksa d\u00f6ng\u00fcy\u00fc sonland\u0131r\n \n all_articles.extend(data['articles'])\n total_results = data.get('totalResults', 0)\n \n # API'nin sayfa limitini veya toplam sonu\u00e7lar\u0131 kontrol et\n if len(all_articles) >= total_results or page * page_size >= 1000: # News API max 1000 sonu\u00e7\n break\n \n page += 1\n time.sleep(1) # API limitlerine tak\u0131lmamak i\u00e7in bekletme\n \n except requests.exceptions.HTTPError as e:\n print(f\"HTTP Hatas\u0131: {e}\")\n if e.response.status_code == 429: # Too Many Requests\n print(\"API limitine ula\u015f\u0131ld\u0131, biraz bekleyip tekrar denenecek...\")\n time.sleep(60) # 1 dakika bekle\n continue\n break # Di\u011fer HTTP hatalar\u0131nda d\u00f6ng\u00fcy\u00fc sonland\u0131r\n except requests.exceptions.ConnectionError as e:\n print(f\"Ba\u011flant\u0131 Hatas\u0131: {e}. A\u011f ba\u011flant\u0131n\u0131z\u0131 kontrol edin.\")\n break\n except requests.exceptions.Timeout as e:\n print(f\"Zaman A\u015f\u0131m\u0131 Hatas\u0131: {e}. \u0130stek zaman\u0131nda tamamlanamad\u0131.\")\n break\n except requests.exceptions.RequestException as e:\n print(f\"Genel \u0130stek Hatas\u0131: {e}\")\n break\n except ValueError as e:\n print(f\"JSON \u00c7\u00f6z\u00fcmleme Hatas\u0131: {e}. API'den beklenen formatta yan\u0131t al\u0131namad\u0131.\")\n print(f\"Yan\u0131t metni: {response.text[:500]}...\") # Hata durumunda yan\u0131t\u0131n bir k\u0131sm\u0131n\u0131 yazd\u0131r\n break\n \n print(f\"Toplam {len(all_articles)} makale \u00e7ekildi.\")\n return all_articles\n\nif __name__ == '__main__':\n # \u00d6rnek kullan\u0131m:\n # NEWS_API_KEY ve NEWS_API_URL ortam de\u011fi\u015fkenlerini ayarlad\u0131\u011f\u0131n\u0131zdan emin olun.\n # export NEWS_API_KEY=\"YOUR_API_KEY\"\n # export NEWS_API_URL=\"https:\/\/newsapi.org\/v2\/everything\"\n \n # Yerel olarak test etmek i\u00e7in:\n # os.environ['NEWS_API_KEY'] = 'YOUR_API_KEY' # Kendi anahtar\u0131n\u0131z\u0131 buraya yaz\u0131n\n # os.environ['NEWS_API_URL'] = 'https:\/\/newsapi.org\/v2\/everything'\n \n news_articles = fetch_news_data('teknoloji')\n if news_articles:\n print(f\"\u0130lk makale ba\u015fl\u0131\u011f\u0131: {news_articles[0].get('title')}\")\n <\/code><\/pre>\n<\/div>\nfetch_news_data<\/code> fonksiyonu, belirli bir sorgu (query<\/code>) i\u00e7in haberleri \u00e7eker. os.getenv()<\/code> kullanarak API anahtar\u0131n\u0131 ortam de\u011fi\u015fkeninden al\u0131r. Bu, g\u00fcvenlik a\u00e7\u0131s\u0131ndan \u00f6nemlidir. Ayr\u0131ca, API limitlerine tak\u0131lmamak ve daha fazla veri \u00e7ekebilmek i\u00e7in sayfalama (pagination) mant\u0131\u011f\u0131 ve time.sleep(1)<\/code> ile k\u0131sa bir bekleme s\u00fcresi eklenmi\u015ftir. \u00c7ekilen verinin JSON format\u0131nda oldu\u011funu varsayarak response.json()<\/code> ile Python s\u00f6zl\u00fc\u011f\u00fcne d\u00f6n\u00fc\u015ft\u00fcr\u00fcl\u00fcr.<\/p>\ntry-except<\/code> bloklar\u0131 kullan\u0131larak \u00e7e\u015fitli requests.exceptions<\/code> t\u00fcrleri yakalanm\u0131\u015ft\u0131r. \u00d6zellikle requests.exceptions.HTTPError<\/code>, sunucudan gelen 4xx veya 5xx durum kodlar\u0131n\u0131 (\u00f6rne\u011fin, 401 Unauthorized, 404 Not Found, 429 Too Many Requests, 500 Internal Server Error) yakalamak i\u00e7in kritik \u00f6neme sahiptir. E\u011fer bir “429 Too Many Requests” hatas\u0131 al\u0131n\u0131rsa, belirli bir s\u00fcre (\u00f6rne\u011fin 60 saniye) bekleyip iste\u011fi yeniden denemek, API limitlerini a\u015fmadan veri \u00e7ekmeye devam etmenin yayg\u0131n bir yoludur. Ba\u011flant\u0131 hatalar\u0131 veya zaman a\u015f\u0131m\u0131 durumlar\u0131 i\u00e7in de uygun mesajlar ve \u00e7\u0131k\u0131\u015f stratejileri belirlenmelidir. Bu t\u00fcr hata y\u00f6netimi, ETL hatt\u0131n\u0131z\u0131n daha dayan\u0131kl\u0131 ve kesintisiz \u00e7al\u0131\u015fmas\u0131n\u0131 sa\u011flar, b\u00f6ylece veri ak\u0131\u015f\u0131n\u0131z\u0131n s\u00fcreklili\u011fi garanti alt\u0131na al\u0131n\u0131r.<\/p>\n\u00c7ekilen Ham Veriyi PostgreSQL’e Uygun Hale Getirme (Transform)<\/h3>\n
\n