Makale ve bildirilerimde geliştirdiğim yazılımların kodlarını açık kaynak olarak paylaşıyorum. Her projenin altında ilgili yayınlar yer alıyor; tam liste için Yayınlar sayfasına bakabilirsiniz.

Web veri çıkarımı ve arama

Web sayfalarından içerik, kural ve görsel çıkarımı üzerine araştırmalarımın açık kaynak yazılımları.

WebRuleBench Python · MIT

Büyük dil modellerinin ürettiği web çıkarım kurallarını (CSS, XPath, regex) insan etiketli veriyle karşılaştıran açık kaynak test ortamı.

UzunExt C#

Web sayfalarından ek bilgiler kullanarak içeriği hızlı ve doğru çıkaran web içerik çıkarım çatısı.

  • A Novel Web Scraping Approach Using the Additional Information Obtained from Web Pages · IEEE Access, 2020
  • Evaluation of Hap, AngleSharp and HtmlDocument in web content extraction · UNITECH’17, 2017

REGEXN Python

CSS seçici kalıplarını düzenli ifadelere çevirerek HTML sayfalarından veriyi daha hızlı çıkarır.

Relevant-Image-Scraping Python

Web sayfalarındaki ilgili görselleri, görselleri indirmeden yalnızca metin verisiyle bulur.

iCrawler C#

Tarama (crawling) sürecini iyileştiren, etkili ve verimli bir web içerik çıkarıcı.

  • An effective and efficient web content extractor for optimizing the crawling process · Software: Practice and Experience, 2014

WebCE C#

Bilgi taşımayan blokları eleyip içerik bloklarını çıkaran iki algoritma içeren web içerik çıkarıcı.

  • A hybrid approach for extracting informative content from web pages · Information Processing and Management, 2013
  • Web content extraction by using decision tree learning · SIU, 2012
  • A lightweight parser for extracting useful contents from web pages · ISCSE, 2011
  • Analyzing of the Evolution of Web Pages by Using a Domain Based Web Crawler · Techsys, 2011

REA C#

Web sayfalarındaki kullanıcı yorumlarının yerleşimini keşfedip yorumları verimli biçimde çıkaran algoritma.

  • A novel algorithm for extracting the user reviews from web pages · Journal of Information Science, 2017

WebDataExtractionInPython Python

Web veri çıkarımında kullanılan Python kütüphanelerinin karşılaştırması.

  • Comparison of Python Libraries used for Web Data Extraction · TechSys 2018, 2018

ImageCrawler Python

Web’deki görselleri indirip makine öğrenmesinde kullanılmak üzere özniteliklerini çıkaran tarayıcı.

SET Proje

Search Engine for Turkish

Türkçe metinler için geliştirilmiş arama motoru.

Kütüphaneler ve araçlar

Web ve algoritma çalışmalarımda geliştirdiğim yeniden kullanılabilir kütüphaneler.

obfc.js JavaScript · MIT

Web sayfalarında nesneler oluşturarak SVG tabanlı akış şemaları çizer.

  • Object-based flowchart drawing library · UBMK, 2017

entrel.js JavaScript

obfc.js üzerine kurulu, basit JavaScript metotlarıyla varlık-ilişki (ER) diyagramları çizen kütüphane.

  • Object-based Entity Relationship Diagram Drawing Library: EntRel.JS · TechSys 2018, 2018

SMA.NET C#

Dizgi eşleştirme (string matching) algoritmalarını değerlendirmek için kütüphane.

  • Comparison of string matching algorithms in web documents · UNITECH’17, 2017

Animation.js JavaScript · GPL-3.0

Web sayfasındaki bir öğeyi ya da alt öğelerini kolayca canlandırmak için küçük bir kütüphane.