Pinotator ile Hızlı İmge İşaretleme
Fast Image Annotation with Pinotator
İsmail Arı, Yunus Açıköz
Bilgisayar Mühendisliği Bölümü
Boğaziçi Üniversitesi, İstanbul, Türkiye
{ismailar,yunus.acikoz }@boun.edu.tr




Özetçe
Bu çalışma imge işleme ve bilgisayarla görü gibi alanlarda
sıklıkla ihtiyaç duyulan imge işaretleme çabalarını ortak bir
çatı altında toplamayı hedeflemektedir. Araştırmacıların
önemli mesaisini gerektiren imge işaretleme ve veritabanı
oluşturma sürecini hızlandırmak için genel bir yöntem
önerilmiş ve destek olarak geliştirilen işaretleme aracı
sunulmuştur. Farklı kullanım durumları için çizilen örnek
senaryolarla aracın nasıl kullanılacağı gösterilmiştir. Açık
kaynak olarak araştırmacıların hizmetine sunulan araç ile
işaretleme sürecinin otomatize edilmesi amaçlanmıştır.
Abstract
This work aims to combine the image annotation efforts
commonly spent in fields such as image processing and
computer vision. A generic flow is proposed to improve the
process of annotating images and gathering databases, which
takes considerable time of the researchers, and an
accompanying tool is presented. Sample scenarios for
different use cases are taken into consideration to show the
usage of the tool. The process of image annotation is planned
to be automatized with the free tool, open for the use of
researchers.
1. Giriş
Bilgisayarla görü ve imge işleme araştırmalarının güvenirliği,
bu amaçla toplanmış veritabanlarında sergiledikleri
performansları ile ölçülmektedir. Veritabanı oluşturmak ve
gerçeklik verilerini işaretlemek, yoğun bir emek istemekte,
araştırmada önemli bir işgücü ve zaman teşkil etmektedir.
Ortak bir araç ile farklı kullanımlar için çoklu ortam
(imge, video, ses) işaretlemeyi hedefleyen çalışmalar
yapılmaktadır [1]. Fakat bu çalışmalar genellikle semantik
işaretlemeye odaklanmış, ses veya videoya ait zaman
çizelgesinde metin eklemek amacıyla tasarlanmıştır.
Bu çalışma; farklı amaçlar için sarf edilen imge işaretleme
çabalarını ortak bir çatıda toplamayı ve bu süreci otomatize
etmeyi önermektedir. Bu amaçla platformdan bağımsız ve
açık kaynaklı yeni bir imge işaretleme aracı sunulmakta,
örnek kullanım senaryoları ile desteklenerek işaretleme
sürecine katkıları gösterilmektedir.

2. Pinotator: İmge İşaretleme Aracı
Pinotator iki temel bileşenden oluşmaktadır. İlki nirengi
noktası, ikincisi ise dikdörtgen işaretleme işlevleridir.
2.1. Nirengi noktası işaretleme
Yüz işleme, biyomedikal imge işleme, nesne tanıma ve
takibi, 2B’den 3B bilginin geri-çakımı gibi birçok alanda
nirengi noktalarına ihtiyaç duyulur. Pinotator bu alanlardaki
araştırmacıların genel kullanımına imkân verecek özellikleri
içerir. Bu özellikler şöyle sıralanabilir: Nokta ekleme: Nirengi
noktalarını eklemek için kullanılır. Grafik tablet ile bu işlemi
kolaylaştırmak mümkündür (bkz. Şekil 1). Nokta sürükleme:
İşaretli noktaların yer değiştirilmesi için kullanılır.
2.2. Dikdörtgen işaretleme
İmge işleme ve bilgisayarla görü çalışmalarında
kullanılan diğer önemli işaret bilgisi imgeler üstünde
belirlenen belli kutucuklardır. Araç şu işlevleri sunar:
Dikdörtgen ekleme: İmge üstünde kutular seçmeyi sağlar.
Dikdörtgen sürükleme: Nokta sürüklemeye benzer işlevdedir.
Dikdörtgeni yeniden boyutlandırma: Seçili kutuların
boyutlarını güncellemek için kullanılır.

Şekil 1: İşaretleme anındaki ekran görüntüsü
2.3. Güvenilirlik ve İşaretlemelerin Uyumu
Her ne kadar gerçeklik verisi olarak insanların işaretlediği
verileri kullansak da, bu işaretlemeler küçük hatalar içerebilir.
Genelde nirengi noktası konumları ışık şiddeti varyasyonunun
çok olduğu bölgelerde seçilmektedir. Bu düşünceyle imge
yatay ve dikey Sobel filtreleriyle evriştirilmiş (konvolüsyon),
elde edilen değerlerle doğru orantılı olarak Şekil 1’de sol
alttaki yakın imgede görüldüğü gibi noktanın rengi
kırmızılaştırılmıştır.