Büyük veri akışlarını gerçek zamanlı (real-time) ve güvenilir bir şekilde işlemeye olanak tanıyan, açık kaynaklı, dağıtık bir hesaplama çerçevesi Apache Storm‘un 3.1.0 sürümü duyuruldu. Hadoop gibi sistemler belirli zaman aralıklarında toplu işleme (batch processing) yaparken, Apache Storm gelen veriyi durmaksızın ve anlık olarak işler. Verileri depolamadan, anlık olarak alıp işleyen (gerçek zamanlı işleme) Apache Storm, çalışma yükünü birden fazla sunucuya otomatik olarak dağıtıp paralelleştiriyor (dağıtık yapı). Bir düğüm veya işlem çöktüğünde verilerin ve işlerin kaybolmamasını, yeniden başlatılabilmesini sağlayan (hataya dayanıklılık (Fault-Tolerant)) yazılım, çekirdeği JVM üzerinde (Clojure ve Java) yazılmış olsa da, herhangi bir programlama dili ile veri işleme mantığı (dil bağımsızlığı) geliştirilebiliyor. Sistem loglarının canlı takibi ve anormallik tespitini yapan Apache Storm, kredi kartı işlemlerinin milisaniyeler içinde analiz edilip şüpheli faaliyetlerin yakalanmasını da sağlıyor. Ayrıca IoT (nesnelerin interneti) sensörlerden gelen sürekli veri akışlarının anlık olarak değerlendirilmesini yapıyor. Apache Storm 3.1.0 hakkında bilgi edinmek için sürüm notlarını inceleyebilirsiniz.
Tag Archives | Hadoop
Apache IoTDB 1.0 nesnelerin interneti veritabanı olarak duyuruldu
Nesnelerin interneti (IoT) için bir veritabanı olarak hizmet etmeye odaklanan bir zaman serisi veritabanı olarak Apache IoTDB‘nin 1.0 sürümü duyuruldu. Apache IoTDB 1.0, IoT veri toplama, depolama ve analiz çevresinde hafif, yüksek performanslı ve kullanılabilir özellikler olmaya odaklanan açık kaynaklı bir zaman serisi veritabanıdır. Apache IoTDB, Spark ve Hadoop gibi diğer Apache yazılım projeleriyle entegre edilebilir. Apache IoTDB 1.0 sürümüyle, bağımsız ve küme çalışma modlarını destekleyen yeni bir yazılım mimarisi, çeşitli yeni yönetim seçenekleri, küme kodunda büyük ölçüde paralel işleme çerçevesi, CSV içe/dışa aktarma desteği, TsFile zaman serisi içe aktarma desteği bulunuyor. Sürümde, 1.0 sürümü için bir dizi başka yeni özellik de var. Docker’e giden yolun şu adreste olduğu belirtiliyor. Apache IoTDB 1.0 hakkında bilgi edinmek için Apache IoTDB 1.0 belgelerini ya da GitHub sayfasını inceleyebilirsiniz.
Apache IoTDB 1.0 edinmek için aşağıdaki linklerden yararlanabilirsiniz.