Veri gölü, ham verileri kendi doğal biçiminde depolar. Yazma işleminde herhangi bir şema uygulanmaz. Yapılandırılmış tablolar, JSON günlükleri, resimler ve videolar aynı depoda bulunur. Şema, veriler depolandığında değil, okunduğunda uygulanır. Bu esneklik, cazibesini oluşturur. Veri gölü her şeyi kabul eder. Verileri depolamadan önce nasıl kullanacağınızı bilmenizi gerektirmez.

Esneklik de bir sorun. Yönetişim olmadan, veri gölü bir veri bataklığına dönüşür. İçinde ne olduğunu kimse bilmez. Dosyaların şifreli adları vardır. Meta veriler eksiktir. Veriler klasörler arasında tekrarlanır. Analistler ihtiyaç duydukları şeyi bulamazlar. Veri bilimciler analiz etmek yerine temizleme ve keşfetme ile zaman kaybederler. Göl bir varlık değil, bir maliyet merkezi haline gelir. Çözüm yönetişimdir: kataloglar, meta veriler, erişim kontrolleri ve net sahiplik. Modern veri gölü mimarileri, şema zorunluluğu, ACID işlemleri ve sorgu performansını göle getiren Delta Lake ve Iceberg gibi tablo formatları ekler. Göl ve veri ambarı birleşir. İkisinin de en iyisi: ham depolamanın esnekliği ve yapılandırılmış tabloların güvenilirliği. Teknoloji gelişti. Yönetişim gereksinimi devam ediyor.

Veri gölü özellikleri

• Okuma sırasında şema uygulama — sorgulama yaparken yapıyı uygula
• Ham depolama — verilerin orijinal biçiminde saklanması
• Ölçeklenebilir — standart depolama alanında petabaytlarca veriyi işleyebilir
• Esnek — yapılandırılmış, yarı yapılandırılmış ve yapılandırılmamış verileri destekler
• Yönetime bağımlı — kataloglanmadığı takdirde bataklığa dönüşür.

Veri gölü bir rezervuardır. Harita olmadan, sadece bir su kütlesidir.