Yapay Zeka ve Veri Madenciliği Uygulamalarında Yüksek Başarımlı Hesaplama Yazılımlarının Kullanımı ve Örnek Tasarım ile Performans Analizleri

Abstract

Verileri depolama ve işleme araçlarının sayısı oldukça artmıştır. Bu artış beraberinde ilk yıllarda depolama ortamlarının yetersizliğini gündeme getirse de yaklaşık olarak her yıl defalarca katlanan depolama kapasitesi sayesinde bu sorun büyük ölçüde giderilmiştir. Ancak bu defa da depolanan büyük verilerin analiz edilmesi ve faydalı bilginin ortaya çıkarılması aşamasında, verinin büyüklüğü ve dolayısı ile analizi gerçekleştiren mikroişlemci ve RAM bellek sorunları ortaya çıkmıştır. Özellikle internetin her gün devasa veriler ürettiği günümüzde bu sorun daha da belirgin bir hal almıştır. Yapay zeka ve veri madenciliği teknikleri büyük verilerden anlamlı ve faydalı bilgiler elde etmeyi amaçlayan birbiri ile derin ilişkili iki disiplindir. Büyük veriler üzerinde bu disiplinlerin ortaya koyduğu metodlar, araştırmacılar tarafından sıklıkla kullanılmaktadır. Yüksek başarımlı hesaplama ise araştırmacıların karşılaştığı donanım yetersizlikleri ve uzun analiz sürelerini ortadan kaldırmayı amaçlamış bir diğer disiplindir. Bu projede yüksek başarımlı hesaplama yöntemlerinin yapay zeka ve veri madenciliği uygulamalarında kullanılabilirliği araştırılmıştır. Araştırmanın ilk bölümünde yapay zeka, veri madenciliği ve yüksek başarımlı hesaplama konularında bilgi verilmiş. İkinci bölümde araştırmada kullanılan yöntem ve gereçler anlatılmış, farklı işletim sistemleri üzerinde yapay zeka, veri madenciliği ve yüksek başarımlı hesaplama yazılımlarının kullanımı ve performansları örnek veri seti ile incelenmiş, son bölümde ise araştırmada elde edilen bulgular ve sonuçlar aktarılarak tartışmaya açılmıştır.

The number of data storage and data processing devices has greatly increased. Although this increase has caused the insufficiency of storage media to be put on the agenda in the previous years, this problem has been tackled on a big scale thanks to the storage capacity multiplied many times. However, this gave rise to the problems of huge amount of data and thus the microprocessor and RAM memory which perform the analysis at the stage of analysing the huge amount of data and extracting useful knowledge. This problem has become more obvious especially at present day because of the massive amount of daily data produced by internet. Artificial intelligence and data mining are two deeply interrelated disciplines aiming to obtain meaningful and useful knowledge from huge amounts of data. The methods developed by these two disciplines on these huge amounts of data are frequently used by researchers. High performance computing is also another discipline which aims to provide solutions to insufficient hardware and long periods of analysis. In this project, whether the methods of high performance computing can be used in artificial intelligence and data mining applications has been searched. In the first part of the study some information related to artificial intelligence, data mining and high performance computing has been given and in the second part the methods and equipment used in the study has been mentioned, and the use and the performance of artificial intelligence, data mining and high computing software on different operating systems have been examined using a sample data set. In the final part the data and results obtained have been presented and opened to debate.