Yaşanan Kesinti Hakkında Detaylı Bilgilendirme

Sonradan ekleme: Sorun çözülmüştür ve tüm hizmetler aktif duruma getirilmiştir.

Merhabalar, 18:30~19:300 saatleri arasında başlayan ve şuandada devam eden hizmetlerimizdeki kesinti için ilk olarak üzgün olduğumuzu ve çalıştığımızı bildirmek isteriz. 

Belli bir kaç webailesi ürününü barındıran bize ait olan HP DL360P G8 cihazımızın nedeni bilinmeyen sebebten ötürü ana kartında ciddi hasar oluştu ve cihazın şuanda ana kartı kullanılamaz halde. Durum hakkında direkt olarak çalışmalara başladık ve ana kart tedariğini en hızlı şekilde sağlamak için çalışıyoruz. Ana kart tedariği, ana kartın yanan kart ile değiştirilmesi ve sistemin tamamı ile aktif duruma gelmesi en az 17 saat daha süreceğini ön görüyoruz. Yaşattığımız mağduriyetten dolayı üzgünüz sorunun çözülmesi içinde şuanda tüm ekibimiz çalışmaktadır.


Nedeni bilinmeyen sebebten ötürü etkilenen ana kart aşağıdaki şekildedir,

Yeni ana kartı dün sistemimize dahil ettik. Ancak arzalı olan ana kartın yanma sebebini tam olarak saplamakta güçlük çekiyoruz. Eski ana kartın yanmasına neden olan arzanın hayla devam ettiğini düşünüyoruz ve cihazı tam kapsamlı bir bakıma almamız gerektiğini düşünüyoruz(Çalıştırılan cihaz 6 aylık yeni yani 0 bir cihazdır). Ekibimiz ile en doğru zamanı seçerek arza yataran cihazın müşterilerini diğer cihazlarımıza ortak olarak dağıtmayı düşünüyoruz ve geçişi planlıyoruz. Korkmanıza gerek yok tüm disklerimiz stabil şekilde çalışmaktadır ve her hangi bir veri kaybı söz konusu değildir. Geçiş sağlanması onaylanması durumundada siz hizmetlerinizde ortalama 20 saniyelik kesinti dışında ekstra bir olay görmeyeceksinizdir.

Merhabalar, durum üzerinden uzun süre geçti ancak son durum hakkında tam bilgi vermedik. Son durum şu şekildedir,
Ana kartı yenisi ile değişmemize rağmen cihaz üzerinde +10 defa ilk süreçte anlam verilemeyen hatalar ile karşılaştık bunlar belli sürede bir kendini restartlama ve benzer sorunlardı. Cihaz üzerinde çok yüklü bir donanım olmasından ötürü riske atmayarak yedek olarak beklettiğimiz diğer cihazlarımızı up konuma getirerek sorunlu G8 deki tüm alt sanal sunucu ve hizmetleri bir gece kimse fark etmeden özel yapımız ile sorunlu cihazın disklerinden yedek sunuculara klonlarla ilettik. Sorunların düzelmesinin sebebi yedek sunucuları up konuma getirip tüm hizmetleri onlara taşımamızdan ötürü çözümlenmişti. Taşıma sonrasındaki gün ana kartını değiştirdiğimiz G8 cihazı verimerkezinden aldırıp detaylı inceleme ve tamir için sektörde bilinen tamirci ile anlaştık. Sorunları detaylı bakıma soktuğumuz zaman anlamaya başladık. Cihaz üzerinde bulunan fanların 3 tanesi hatalı çalıştığı için ram ve işlemcilerin ısısı 120° ulaştığını tespit ettik ve cihaz koruma moduna girerek sunucuya durmadan restart atmaya başladığını fark ettik tahminimizde ilk ana kartın yanması bu restartları fark ettiğimiz gibi acil olarak bakım talebimizden oluştu. Cihazda ilk sorunu fark edince bakım içinden kabinden çıkartıp verimerkezi tarafından ard arda bir den fazla kez güç verilip kesildiği için ilk ana kartın yandığını düşünüyoruz. Hatalı olan 3 fanın yeni fanlar ile değiştirdik ve raid kart üzerinde bulunan özel pildede bir sorun olduğunu fark ettik bu şuan için sorun oluşturacak bir durum değildi ancak bu durumdan ötürü yeni özel pil alınıp raid kart üzerindede değişim sağlandı. Cihazı verimerkezindeki kabinlere götürüp aktif etmeden önce cihazı zorlamak için cihazı 4 gündür aktif olarak sınıyoruz bu sınama cihazı yorarak sıcaklık değerlerini incelemek içindir ortalama +350GB aktif ram kullanımı ve 2697v2x2 işlemcilerin %100 bir çalışma ile tam enerji tüketim modunda testler gerçekleştirdik. 4 Gündür bir sorun oluşmadı ve cihazı ILO ve fiziksel olarak 7/24 takibe aldık ve şuandada hiç bir arzasının kalmadığını görüyoruz. 48 Saat içersinde cihazı tekrar verimerkezi üzerinde up konuma getirip yedek sunucuları tekrar G8 cihazına aktarmayı planlıyoruz altını çizerek demek isteriz tüm hizmetlerimiz tek cihazda değildir ilk ana kart yanması mevzusundan etkilenen sayılı hizmetlerimiz G8 cihazı üzerinde olduğu için etkilendi. Süreci en şeffaf şekilde sizlere bildirmek istedim. Sorunun tekrar yaşanmaması için verimerkezi üzerindeki diğer cihazlarımızada yatırım yaparak olası durumlarda direkt yedekli sunuculara taşımalar ile kısa sürelerde aktif etmek için planlar oluşturduk ve tekrar durumun yaşanmaması için sırasıyla tüm cihazlarımızda kontroller gerçekleştirdik.