İsveçli veri gölü şirketi Hopsworks AB, yapay zeka sistemlerinin geliştirilmesi ve işletilmesi için yeni bir platform sunuyor. Şirket, yakında piyasaya süreceği Hopsworks 4.0 sürümüyle, sektörde bir ilki gerçekleştirerek “toplu, gerçek zamanlı ve büyük dil modeli” yapay zeka sistemlerini oluşturmak için birleşik bir platform sunmayı vadediyor.
Yeni sürümde, yapay zeka sistemlerinin gerçek zamanlı verileri daha etkin kullanabilmesi için çeşitli yeni özellikler ekleniyor. Bunlar arasında yeni bir özellik deposu ve vektör veritabanı indeks sistemi yer alıyor. Ayrıca, yerel Python erişimi ve büyük dil modelleri için daha ayrıntılı ince ayar özellikleri de platforma dahil ediliyor. Hopsworks, bu güncellemelerle ekiplerin eşi görülmemiş ölçekte yapay zeka sistemleri oluşturabileceklerini ve en zorlu yapay zeka iş yüklerini destekleyebileceklerini iddia ediyor.
Hopsworks, büyük ölçekli veri boru hatlarının geliştirilmesini ve işletilmesini desteklemek üzere tasarlanmış kurumsal düzeyde bir makine öğrenimi platformunun yaratıcısı olarak biliniyor. Platform, yapay zeka model eğitimi ve çıkarımında kullanılan veri kümelerini yönetmeye olanak tanıyan bir “Özellik Deposu” üzerine kurulu. Bu özelliğiyle Snowflake ve Databricks gibi veri ambarı platformlarına rakip olarak konumlanıyor. Hopsworks platformu, ekiplere özellikleri, deneyleri, yapay zeka modellerini ve veri varlıklarını yönetmek için merkezi bir depo sunuyor. Ayrıca, hassas veriler üzerinde işbirliği yapması gereken kullanıcılar için çoklu kiracılık özelliği de mevcut.
Platform, Apache Spark, TensorFlow, PyTorch ve Scikit-Learn gibi popüler makine öğrenimi araçlarını ve çerçevelerini destekleyerek son derece çok yönlü bir yapı sunuyor. Şirkete göre, hiperparametre ayarlama, özellik mühendisliği ve eğitim gibi yapay zekanın ölçeklendirilmesinin önündeki en büyük engellerin üstesinden gelmeye yardımcı olan entegre bir sistem olarak öne çıkıyor.
Hopsworks 4.0 sürümüyle birlikte şirket, hem performansı hem de kullanılabilirliği artırdığını belirtiyor. Bölgeler arası çoğaltma işlevselliği ile platformun hem donanım hem de ağ arızalarına karşı dayanıklılığı artırılmış. Bir veri merkezi kesintisi durumunda, müşteriler herhangi bir veri kaybı olmaksızın alternatif bir coğrafi bölgeye geçiş yaparak yapay zeka sistemlerinin çalışmasını sürdürebilecek.
Yeni sürümde Hopsworks bünyesine eklenen vektör ve benzerlik arama yetenekleri, ekiplerin büyük dil modellerinin yeteneklerini artırmak için “geri alma ile desteklenmiş üretim” veya RAG tekniklerini kullanarak özel verilerle beslemelerine olanak tanıyacak. Platformun Kubernetes desteği de geliştirilmiş olup, artık Helm Charts aracılığıyla dağıtılabilir, bakımı yapılabilir ve yükseltilebilir hale gelmiş. Bu sayede bulut platformları ve hava boşluklu şirket içi sunucular dahil olmak üzere her türlü bilgi teknolojisi ortamında çalıştırılabilecek.
Yeni Hopsworks Sorgu Hizmeti ile performans artışı sağlanıyor. Bu hizmet, Python istemcilerine veri gölünden veri okurken Databricks ve Vertex AI gibi platformlara kıyasla 45 kat daha yüksek verim sunuyor. Platform ayrıca geliştirilmiş özellik izleme desteği kazanarak, kullanıcıların verilerinin zaman içinde nasıl değiştiğini takip etmelerine ve belirli bir yapay zeka modelini eğitmek için kullanılan bilgilerle karşılaştırmalarına olanak tanıyor.
Hopsworks CEO’su Jim Dowling, platformun 4.0 sürümünü şirketin “şimdiye kadarki en yenilikçi sürümü” olarak nitelendirirken, yapay zeka sistem geliştirmede “oyunu değiştiren yenilikler” için bir temel sağladığını vurguluyor.