Ana içeriğe atla

Kayıtlar

DOĞALDILISLEME etiketine sahip yayınlar gösteriliyor

DOĞAL DIL IŞLEME’NIN ALT DALI: VARLIK ISMI TANIMA

Doğal Dil İşleme , yaygın olarak  NLP  (Natural Language Processing) olarak bilinen  yapay zeka  ve  dilbilim  alt kategorisidir. Bu yazımda geliştiricisi olduğum projenin temelindeki konu olan doğal dil işlemenin alt dallarından biri varlık ismi tanıma konusuna değinmek istiyorum. Öncelikle girişte tanımını yaptığım doğal dil işleme konusuna biraz daha yakından bakalım. Doğal dil işleme kısaca NLP; sohbet botları(chatbots), makale veya yazıların özeti, dil çeviri ve veriden görüş tanımlama gibi birçok akıllı uygulamada kritik bir rol oynamaktadır. NLP ön-işleme, varlık(entity) çıkarımı, kelime frekanslarının ölçümleri gibi aşamaları içerir. Metin ön-işlemede gürültü giderme (noise removel), sözlük normalize edilmesi (lexicon normalization), nesne standart oluşumu (object standarization) teknikleri kullanılır. Ön işlemeden sonra entity extraction(varlık çıkarma) özne yüklem ve nesnelerin belirlenmesi bu aşamada yapılır. Bu aşamada met...