Comments on: Google’a Açık Kaynaklı Rakip: Hadoop

By: Ahmet Tolga Tat

Ahmet Tolga Tat — Wed, 04 Jun 2008 08:02:57 +0000

Bence Hadoop’un en büyük özelligi acik kaynak olmasi ve tabiki Grid Computing olayini kolaylastirmasi. Google’in basarili olmasinin baska nedenleride var. Google’la rakip olabilmek icin Google’dan daha üstün arama makinalari gelistirmek gerek. Bence hakia.com bunu basaracak.

Ayrica Hadoop’a benzer GridGain (http://gridgain.com/) diye bir yazilim daha var ve Ruslar tarafindan gelistirilmis. Kendileri GridGain’in daha üstün oldugunu söylüyorlar.

By: arikan

arikan — Tue, 25 Dec 2007 14:45:45 +0000

Dağıtımlı Sistem Tasarımına Giriş
http://code.google.com/edu/parallel/dsd-tutorial.html

MapReduce ve Paralel Programlamaya Giriş
http://code.google.com/edu/parallel/mapreduce-tutorial.html

By: arikan

arikan — Tue, 25 Dec 2007 14:25:09 +0000

Tuncay bağlantı için sağol. Google içinde de bir çok ağır işlemi düzenlemek için Hadoop kullanılması ve Hadoop’un desteklenmesi kaçınılmaz bir gelişme gibi geliyor bana (gerçi MapReduce’u geliştiren Google programcılarının Hadoop projesine kod ile katkıda bulunmasının yasak olduğunu duymuştum). Her açık kaynaklı geliştirilen yazılımın geçmişte yaptığı gibi Hadoop da bence arama gibi ağır işlemler yapabilme tekelini kıracak bir proje.

Tabi dediğin gibi piyasalar değişiyor, Google’u bu kadar büyüten mantık sadece yazılım veya PageRank gibi patentli mantıklar değil, sürekli dünyanın verisini toplayabiliyor ve bunları veri merkezlerinde depolayabiliyor olması. Hatta enerji tasarrufu için elektrik santrallerine yakın yerlere veri merkezleri kurmaya çalışıyorlar.

Bir veri merkezi kaç para? Bugün ekransız bir bilgisayarın maliyeti $100 diye düşünelim. 500 bin bilgisayarlık bir veri merkezi 50 milyon dolara mal olur. Böyle bir parayı Türkiye’de bile bir çok orta boyutta şirket rahat rahat karşılayabilir.

Sonuçta ortada çok parametre var: yönetici yazılım (Hadoop gibi), donanımın işletilmesi (bilgisayar tarlaları), ve bütün bu öğelerin birbirleriyle düzenli çalışabilmesi. Bütün bu karmaşayla uğraşabilmek yeni norm oluyor.

Data Center Fabric
http://en.wikipedia.org/wiki/Data_center_fabric

Bu da böyle bir tekno-kahve muhabbeti oldu

By: tuncay

tuncay — Tue, 25 Dec 2007 08:53:43 +0000

Başlık biraz yanıltıcı olmuş bence. Aslında Hadoop Google’ın rakibi değil. Hadoop’un yaygınlaşmasını Google da destekliyor. Bu şekilde gelecekte kendisine lazım olacak insan kaynağını da yetiştirmiş olmayı hedefliyor. Örneğin http://code.google.com/edu/tools/ adresinde MapReduce için Hadoop öneriyor.

Ayrıca sadece yazılım ile de artık Google ile mücadele edilmez bence. Şu anda toplamda “500 bin” bilgisayarlı birkaç datacenter sahibi olan Google yakın gelecekte yeni datacenter’lar da açacak. Yazılım hepimizin elinde olabilir ama bu kadar büyük ölçekli yatırımları Google, Microsoft gibi finansal açıdan çok güçlü firmalar yapabilir.