01Sorun ve çözüm
Big data danışmanlığı hizmetimizde teknolojiyi en sona bırakıyoruz. Önce veriyi kimin, hangi karar için kullanacağını ve bu kararın bugün nasıl verildiğini çıkarıyoruz. Ardından eldeki verinin hacmini, büyüme hızını, güncellik ihtiyacını ve kalitesini ölçüyoruz. Mimari öneri ancak bu iki resim yan yana konduğunda yapılır ve her seçeneğin işletim yükü açıkça yazılır.
Devamını okuDaha az göster
Sonuç, hangi adımın hangi sırayla atılacağını ve hangi aşamada durup değerlendirme yapılacağını gösteren bir yol haritasıdır.
02Kimler için
Big data danışmanlığı hangi noktada değer katar
Bu hizmet, büyük veri konusunda karar vermek üzere olan ya da verdiği karardan emin olamayan yönetimlere yöneliktir.
- Satış, üretim ve saha verilerini bir araya getirip ilk kez bütünleşik analiz yapmak isteyen orta ölçekli şirketler
- Bir veri platformuna bütçe ayırmadan önce bağımsız bir mimari değerlendirme isteyen yönetim kurulları ve BT direktörleri
- Hadoop gibi eski bir büyük veri yatırımını sürdürmek ya da modern bir yapıya geçmek arasında karar veremeyen kuruluşlar
- Mobil uygulama, web sitesi ve cihazlardan gelen olay verisi hızla büyüyen dijital ürün şirketleri
- Veri ekibi kurmayı planlayan ve hangi rollerin önce gerektiğini netleştirmek isteyen işletmeler
03İhtiyaçlar
Büyük veri kararında yanıt bekleyen sorular
Mimari tartışmasına geçmeden önce aşağıdaki soruların yazılı cevabı olmalıdır.
- 01
Verimiz gerçekten büyük mü
Toplam hacim, günlük artış ve sorgu sıklığı birlikte değerlendirildiğinde birçok şirketin ihtiyacı modern bir veri ambarı ya da sütun tabanlı bir veritabanıyla karşılanır. Dağıtık işleme, veri bu sınırları aştığında ya da yapısız veri çoğaldığında gündeme gelir.
- 02
Ne kadar taze veri gerekiyor
Günlük rapor için gece çalışan bir aktarım yeterlidir; dolandırıcılık tespiti ya da canlı stok gibi senaryolar ise saniyeler mertebesinde akış gerektirir. Güncellik ihtiyacı maliyeti ve karmaşıklığı en çok belirleyen etkendir.
- 03
Verinin sahibi kim
Bir tablodaki hatayı kimin düzelteceği, bir metriğin tanımını kimin onaylayacağı belli değilse platform ne kadar iyi kurulursa kurulsun güven kazanmaz. Veri sahipliği teknik kararlardan önce netleşir.
- 04
Ekibimiz bunu işletebilir mi
Kendi kümesini işletmek, dağıtık sistem bilgisi olan mühendisler gerektirir. Bu kapasite yoksa yönetilen bulut servisleri ya da daha sade bir mimari tercih edilir.
04Özellikler
Big data danışmanlığı hizmeti sonunda teslim edilenler
Her teslimat, yönetimin karar vermesine ve teknik ekibin uygulamasına yetecek ayrıntıda hazırlanır.
- 01
Mevcut durum ve veri envanteri
Kaynak sistemler, veri hacimleri, güncelleme sıklıkları, mevcut raporlama araçları ve veri kalitesi sorunları tek bir belgede toplanır.
- 02
Önceliklendirilmiş kullanım senaryoları
İş birimleriyle yapılan görüşmelerden çıkan senaryolar beklenen fayda ve uygulama zorluğuna göre sıralanır. İlk senaryo, kısa sürede somut sonuç gösterecek biçimde seçilir.
- 03
Referans mimari ve araç karşılaştırması
Veri ambarı, data lake ve lakehouse seçenekleri ile her katman için aday araçlar lisans, işletim yükü ve ölçeklenme açısından karşılaştırılır.
- 04
Kavram kanıtlama planı
Seçilen mimarinin riskli noktası, gerçek verinizin bir kesitiyle sınırlı bir denemede sınanır. Başarı ölçütleri deneme başlamadan yazılır.
- 05
Ekip ve yol haritası
Veri mühendisi, analitik mühendisi ve veri analisti gibi rollerin hangi aşamada gerektiği, hangi işlerin dışarıdan alınabileceği aşamalı bir planla gösterilir.
05Entegrasyonlar
Değerlendirmeye aldığımız kaynaklar ve platform seçenekleri
Öneri, şirketinizde zaten var olan sistemlerden ve ekibinizin bildiği araçlardan yola çıkar.
- 01
Kurumsal kaynak sistemler
Logo, Mikro, Netsis veya SAP Business One gibi ERP yazılımları, CRM, e-ticaret ve çağrı merkezi sistemleri verinin ana kaynakları olarak incelenir.
- 02
Olay ve cihaz verisi
Web ve mobil uygulama olayları, üretim hattı sensörleri ya da araç takip cihazlarından gelen veri hacim ve sıklık açısından ayrıca değerlendirilir.
- 03
Bulut veri platformları
BigQuery, Snowflake, Amazon Redshift, Azure Synapse ve Databricks gibi platformlar ihtiyaç ve bütçeyle karşılaştırılır.
- 04
Açık kaynak bileşenler
Apache Spark, Apache Kafka, Apache Flink, Trino ve ClickHouse gibi araçlar, kendi altyapınızda çalıştırma seçeneği isteniyorsa değerlendirmeye girer.
- 05
Raporlama katmanı
Power BI, Looker Studio ya da Metabase gibi araçlar, son kullanıcıya hangi verinin hangi hızda ulaşacağına göre mimariye bağlanır.
06Süreç
Big data danışmanlığı hizmeti nasıl ilerler?
Adım 01
Analiz
İş akışınızı, kullanıcılarınızı ve mevcut sistemlerinizi dinleriz; kapsamı, öncelikleri ve kabul ölçütlerini yazılı hâle getiririz.
Adım 02
Tasarım
Ekran akışlarını ve veri modelini çıkarırız. Arayüzü sizinle gözden geçirip onay almadan geliştirmeye geçmeyiz.
Adım 03
Geliştirme
Kısa döngülerle çalışırız; her döngü sonunda çalışan bir sürümü test ortamında görürsünüz.
Adım 04
Test
İşlevsel testler, entegrasyon testleri ve temel güvenlik kontrolleriyle hataları yayından önce yakalarız.
Adım 05
Yayın
Sunucu, alan adı, yedekleme ve izleme ayarlarını yaparak canlıya alırız; ekibinize kısa bir kullanım eğitimi veririz.
Adım 06
Bakım
İsterseniz bakım ve destek anlaşmasıyla güncellemeleri, izlemeyi ve yeni geliştirmeleri sürdürürüz.
07Teknoloji
Platform karşılaştırmasını nasıl yapıyoruz
Önerilerimizi belirli bir ürünün lisansı değil, kendi kullanım senaryonuz belirler. Karşılaştırmaları kâğıt üzerindeki özelliklerle değil, verinizin örnek bir kesitiyle ve ekibinizin yazacağı tipik sorgularla yapıyoruz. Bir aracın neden elendiği de raporda en az seçilen araç kadar açık yazılır.
Devamını okuDaha az göster
Büyük veri platformları kişisel veriyi çoğu zaman beklenenden geniş bir alana yayar. Bu yüzden mimariye kişisel verinin hangi katmanda maskeleneceğini, kimin hangi alana erişeceğini ve saklama süresi dolan verinin nasıl imha edileceğini en baştan ekliyoruz; KVKK aydınlatma ve imha politikalarınızla uyumu hukuk danışmanınızla birlikte netleştirmenizi öneriyoruz.
Yol haritasını tek seferde büyük bir yatırım olarak değil, her aşamanın sonunda devam kararının verildiği küçük adımlar olarak kuruyoruz. Böylece ilk senaryo beklenen faydayı göstermezse kayıp sınırlı kalır.
08Çalışma modelleri
Bu hizmette çalışma modelleri
09Sık sorulan sorular
Big data danışmanlığı hakkında sık sorulan sorular
Big data danışmanlığı fiyatları neye göre değişir?
Görüşülecek iş birimi sayısı, incelenecek kaynak sistemler, kavram kanıtlama çalışmasının olup olmadığı ve teslimatların ayrıntı düzeyi kapsamı belirler. Ön görüşmeden sonra aşamaları ve çıktıları yazılı olarak tanımlayan bir teklif sunuyoruz.
Büyük veri ile veri ambarı arasındaki fark nedir?
Veri ambarı, yapılandırılmış ve temizlenmiş veriyi raporlama için düzenli tablolar hâlinde tutar. Büyük veri yaklaşımı ise yapısız ve yarı yapılandırılmış veriyi de kapsayan, çok yüksek hacim ya da hız gerektiren senaryolara yöneliktir. Günümüzde lakehouse mimarileri bu iki dünyayı tek platformda birleştirebiliyor.
Big data danışmanlığı firması olarak kurulumu da siz mi yaparsınız?
Bu hizmet danışmanlık modelindedir: mimariyi, araç seçimini ve yol haritasını hazırlarız. Uygulama aşamasında data lake kurulumu, ETL geliştirme ya da gerçek zamanlı veri işleme gibi hizmetleri ayrı bir proje olarak üstlenebilir ya da kendi ekibinizin uygulamasına danışman olarak eşlik edebiliriz.
Elimizdeki eski Hadoop kümesini ne yapmalıyız?
Kümenin hangi işleri çalıştırdığı, donanım ömrü ve ekibin bilgi birikimi incelenir. Bazı durumlarda kümeyi bir süre daha işletip yeni işleri modern bir yapıda başlatmak, bazen de işleri aşama aşama buluta ya da nesne depolama tabanlı bir yapıya taşımak daha mantıklıdır.
Veri ekibimiz yok; yine de başlayabilir miyiz?
Başlayabilirsiniz. Yol haritası, ilk aşamada hangi işlerin dışarıdan alınacağını ve hangi rolün önce işe alınması gerektiğini gösterir. İlk senaryo genellikle küçük bir ekiple yürütülebilecek kapsamda seçilir.
Analizlerde müşteri verisini kullanmak KVKK açısından sorun yaratır mı?
Kişisel verinin hangi amaçla ve hangi hukuki sebeple işleneceği önceden belirlenmelidir. Teknik tarafta takma ad kullanma, toplulaştırma ve erişim kısıtlamasıyla riski azaltan bir yapı öneriyoruz; işleme şartlarını hukuk danışmanınızla netleştirmenizi tavsiye ederiz.
10İlgili hizmetler