Het Duinspook – uit de serie Onregelmatige Sterke Verhalen

Een blog in de categorie "mooi sterk verhaal" van onze consultant Rolf Zwart

In een gemeente ergens op zandgrond in Nederland, waar OSP af en toe komt om ondersteuning te leveren op backup-, Unix- en clustergebied, is de Aptomox-productieomgeving net ge-upgrade naar de nieuwste Oracle Database. Omdat ook de backup daarvan weer moet gaan werken, word ik opgetrommeld. Een gerenommeerd backuppakket met RMAN, een ijzersterke combinatie, met voor de hand liggende connect strings en usernamen. Over de passwords mag ik niks zeggen.

De backup deed het de eerste week en de week erna. Maar op dag 15 faalde opeens de archive log backup. Om 8 uur deed hij het nog, om 10 uur niet meer.  Ik belde eerst met de beheerder om er een vinger achter te krijgen en daarna ging een collega nog verder met het zoeken naar fouten. Inmiddels kreunde onze mailserver onder het levendige mailverkeer dat binnen osp.nl ontstond. In de configuratie van het backuppakket bleek niks veranderd. Iedereen beloofde plechtig dat niemand ergens aan had gezeten. Daardoor op het verkeerde been gezet, gingen we het tevergeefs in andere richtingen zoeken. Geruchten over een Duinspook deden we uiteraard af als bijgeloof.

Twee collega’s besluiten het probleem te onderzoeken en stappen in de auto. Na de nodige hoofdbrekens en wat probeersels bleef de conclusie dat het password van RMAN ongeldig moest zijn. En inderdaad bleek het terugzetten van het RMAN password de remedie. Alles weer goed dus, totdat… twee weken later hetzelfde gebeurde. Gelukkig was de workaround nu ook bij de beheerders bekend: het password laten resetten (door de softwareleverancier!). Toen ik een week later weer ter plaatse was voor een paar klusjes, was de betreffende backup weer mislukt. De oorzaak bleef in het vage. Een destijds nieuwe feature in de Oracle Database waardoor passwords automatisch verlopen was nog een optie. Maar waarom dan steeds na andere periodes? Het bleef een mysterie. Of waren die huiveringwekkende verhalen over het Duinspook dan toch waar?

Ondertussen had een gemeenteambtenaar ook af en toe last van een mysterieus verschijnsel: na de upgrade kon hij niet meer inloggen in Aptomox. Na een week of twee het account van een collega gebruikt te hebben, had hij de helpdesk gevraagd zijn account weer goed te zetten. Daarna kon hij een paar dagen werken, maar opeens was het weer afgelopen. Helpdesk bellen, alles OK, maar nu ging het na een halve dag alweer mis. Het verhaal kwam beheerders via de wandelgangen ter ore en ze begonnen dingen te combineren… De conventie voor gebruikersnamen is: <voorletter><achternaam-zonder-voorvoegsels>; de medewerker heette Roderick de Man; de tijdstippen kwamen overeen. Je raadt het al, de naamconventie is niet veranderd, maar er is een uitzondering gemaakt voor deze medewerker: hij mag zijn voorvoegsel houden. De beslissing had security-implicaties: meneer De Man had sysdba rechten, zonder dat hij het wist!

De moraal van dit verhaal: voorkom dit soort problemen structureel, door strikte naamconventies te hanteren voor functionele gebruikers en 'mortal users' die niet kunnen overlappen. Leg wachtwoordbeheer niet neer bij een externe partij. Spoor samenhangende verschijnselen op door logfiles en incidenten in de tijd te visualiseren. Doe DevOps: slecht om te beginnen de muren tussen helpdesk, 2e en 3e lijnsbeheer en ontwikkelaars. En praat ook meer met elkaar bij de koffieautomaat!

 

 

Accelerating the Cloud event 21 september 2017 in het Spoorwegmuseum

Vandaag hebben we samen met Veritas, Amazon Web Services en easytocloud.com ons Accelerating the Cloud event gehouden in het Spoorwegmuseum in Utrecht. Hierbij een sfeerindruk van deze ochtend op deze prachtige locatie.

IMG_3393

fullsizeoutput_2

fullsizeoutput_3

We bedanken de sprekers Marco Saarloos en Marcel Hoek van Open Solution Providers, Wilco Vonk van Veritas, Matthijs ten Seldam van AWS en Erik Meinders van easytocloud.com voor hun inzet en onze gasten voor hun aanwezigheid.

IMG_3398

fullsizeoutput_4

fullsizeoutput_6

Heeft u ook interesse in bijvoorbeeld een demo over Business Continuity/Disaster Recovery as a Service/Migration Acceleration neem dan contact met ons op om de mogelijkheden te bespreken.

IMG_3411

Event Accelerating the Cloud op 21 september a.s.

Omdat er in juni heel veel klanten/geinteresseerden waren verhinderd hebben wij besloten samen met VERITASeasytocloud en AWS om nogmaals een informatieve sessie bij Het Spoorwegmuseum in Utrecht te organiseren.

De nieuwe datum die hiervoor is gekozen is donderdag 21 september a.s.

Op zoek naar meer informatie over efficiënte oplossingen die de adoptie van cloud en specifieke cloud-toepassingen voor enterprise omgevingen kunnen versnellen?  Klik dan op deze link om in te schrijven. De sessie wordt zowel 's ochtends als 's middags gegeven.

Het is mogelijk om na de ochtendsessie of voorafgaand aan de middagsessie een gratis bezoek te brengen aan het museum. Ontdek het verhaal achter 175 jaar spoorwegen in Nederland, een aanrader! Klik hier voor meer informatie over het museum en de routebeschrijving.

Voor meer informatie bel ons op 020-4950222 of stuur een mail aan acceleratingthecloud@osp.nl.

AWS-VTAS event September 21

 

A backup schedule for the modern world

A blog post by our Technical consultant Andries Faassen

For a longtime backup has meant tape. With tape we used a backup schedule and versioning/retention scheme often called "Grandfather, father, son" it was a retention scheme based on keeping copies of your backup with ever growing intervals. This was done to reduce tape usage and the directly linked costs associated with it, while still providing a reasonable restore capability.

What is a backup if you ask me? In pure principal a backup is for meant for disaster recovery, which means, to provide a point-in-time copy of all your data to be used in the event of a disaster and your company’s data suddenly disappears overnight. With ever growing threats such as crypto lockers, data corruption and other threats, having a copy of your data in a separated safe "vault" has become more important than ever.

The same backup system traditionally also gets “abused” as a data archive but in principal this is not what a disaster recovery backup is intended for. Recently we’ve started to see a change in that trend though, the practice of classifying data and archiving it using software tools has started to gain more and more traction over the last decade. Data is classified better, and stored at more appropriate locations.

Getting back to backups, the available techniques for making backups have changed, especially in the last 5 years. The main backup target has changed from directly to tape, to staging it using a disk stage or VTL to now using Deduplication pools which can efficiently hold large amounts of backup copies without needing a 1:1 extra amount of space (or tapes) as was needed before. It has also opened the door for replicating data off-site (to a second location or the cloud) in an efficient manner.

Because of that I invite everyone reading this blog post who are already using the newer techniques such as deduplication to not only look at how they backup or when (the schedule) but also take a critical look at their retention policy for backups.

Is the “traditional” Grandfather-father-son retention scheme still the best solution for your data?

All though the “traditional” schema still works for modern storage devices such as deduplication the corporate landscape in regards to data retention and the time you need (or are allowed) to keep your data is rapidly changing.

The “traditional” schema does not allow for incremental changes necessary in the current corporate landscape. Either corporate or government policies now often dictate how long you are mandated to keep certain data but maybe even more important after how long certain data has to be removed. An example, starting 2018 you will need to honor requests of deleting data you keep in relation to person’s entity.

As mentioned above, your backup should not be used as an archive. Archiving software is much better at performing this task. But what happens when you are using archiving software, and it cleanly deletes the data in its archives as mandated but you have backup copies that are kept for a year or sometimes even indefinitely?

Your company will still be out of compliance, even while using archiving software.

A different schema for keeping backup data

Because of this and new forms of backup storage, we see more and more companies switching to a retention schema which does not keep backup data for very long periods of times. They rely on their archiving tools to keep their data and rely on the backup for disaster recovery. Backups older than a few weeks hold no value, since each full backup copy already holds all of the data (including the archives) each time the backup runs.

That way you could think of a backup retention schema which does not keep backup data for years but more efficiently uses the valuable deduplicated storage space to keep recent copies of backup data. Some companies determine that they want to be able to restore the last 6 months but others go as far as saying that being able to go back 2 months is more than enough. In the event of a disaster you are more likely to restore the copy from last week, not one from 8 months ago.

This blog post is meant as a bit of food for thought. How does your current retention policy look? Are you keeping a lot of very old backup copies, using valuable deduplication or cloud storage space? Are you currently archiving old data and thus categorizing it to intelligently handle it instead of just storing everything?

In the current age of ever rapidly expanding data, common practices of yesteryears might warrant a re-think and I believe your retention policy might be one of those.

 

 

Accelerating the Cloud Event 29 juni as

Op 29 juni a.s. organiseert OSP samen met VERITAS, easytocloud en AWS een informatieve sessie bij Het Spoorwegmuseum in Utrecht.

Op zoek naar meer informatie over efficiënte oplossingen die de adoptie van cloud en specifieke cloud-toepassingen voor enterprise omgevingen kunnen versnellen?  Klik dan op deze link om in te schrijven. De sessie wordt zowel 's ochtends als 's middags gegeven.

Het is mogelijk om na de ochtendsessie of voorafgaand aan de middagsessie een gratis bezoek te brengen aan het museum. Ontdek het verhaal achter 175 jaar spoorwegen in Nederland, een aanrader! Klik hier voor meer informatie over het museum en de routebeschrijving.

Voor meer informatie bel ons op 020-4950222 of stuur een mail aan acceleratingthecloud@osp.nl.

AWS-VTAS-OSP Event

Vernieuwing backup infrastructuur Provincie Noord-Brabant

pnb-logo

Begin 2016 heeft Open Solution Providers de hele backup infrastructuur bij de Provincie Noord-Brabant vernieuwd. Het systeem, dat bestond uit Veritas NetBackup servers en een third party storage oplossing, is in zijn geheel vervangen door twee Veritas 5230 appliances en onderliggende storage.

Het overzetten van de NetBackup server database, de catalog, was een van de grootste uitdagingen in het traject. Dit moest gebeuren omdat de NetBackup master server migreerde van een Linux based- naar een Microsoft Windows server OS. Voor deze migratie is gebruik gemaakt van Catman. De tooling is door VERITAS zelf ontwikkeld en OSP is gecertificeerd voor het gebruik en inzet ervan.

Naast de catalog migratie moest ook de complete configuratie worden overgeheveld naar de nieuwe omgeving. De provincie Noord-Brabant maakt gebruik van een groot aantal functionaliteiten waaronder:

  • Virtual Machine backup (VADP)
  • Accelerator backup
  • Exchange Database and Granular backup
  • NetBackup for Oracle Application backup
  • SAP-Oracle backup
  • Client Side Deduplication

In het najaar van 2015 vond de kickoff van het project plaats. De uitvoering van de werkzaamheden is in het tweede kwartaal van 2016 afgerond. OSP is nauw betrokken geweest tijdens de hele duur van het project en heeft bijgedragen door onder andere adviezen te geven over de aanschaf, technische inrichting en implementatie van de apparatuur. Tijdens de installatie werd vastgehouden aan een testplan en wekelijks was er overleg over de voortgang van de werkzaamheden. Uiteindelijk is het traject succesvol en voor de gestelde deadline afgerond.

Provincie Noord-Brabant werkt intussen alweer een aantal maanden met de nieuwe backup omgeving en is zeer tevreden met het resultaat en de inzet van OSP.

Ruud Aarts, Provincie Noord-Brabant: “OSP levert ons al jaren hoogwaardige expertise. Ook in dit project zien we weer dat zij over de hele linie een waardevolle partner is die in staat bleek om complexe werken tot een goed resultaat te brengen.”

Projectmanagement gebaseerd op Prince2, inhoudelijk advies over aanschaf, techniek en implementatie en kundige begeleiding bij de installatie en configuratie van hard- en software: de veelzijdige expertise maakt OSP een gedegen partner die alles in huis heeft om VERITAS backup oplossingen tot een succes te maken.

Backup Implementatie- en Migratieproject AZG succesvol afgerond

In het najaar van 2014 heeft Open Solution Providers (OSP) in opdracht van Antonius Zorggroep (AZG) en in samenwerking met VERITAS een redesign van de bestaande NetBackup omgeving uitgevoerd. Daarbij is gebruik gemaakt van nieuwe hardware: 2 VERITAS NetBackup 5230 76 TB appliances. Er kan met tevredenheid terug worden gekeken op dit succesvolle project.

Na de kick off, waarbij het volledige projectteam van AZG en OSP bij elkaar waren, heeft OSP gedurende de maanden januari t/m maart 2015 de nieuwe omgeving op basis van fixed price afspraken geïmplementeerd. Daarbij zijn de volgende NetBackup technieken toegepast:
•  NetBackup Accelerator voor zowel Windows fileservers als ook NetApp CIFS volumes;
•  NetBackup Replication Director t.b.v. de snapshot integratie van NetApp;
•  VMware vStorage API backups in combinatie met NetBackup Accelerator;
•  SQL, Exchange en Enterprise Vault Agent integraties met NetBackup;
•  NetBackup Client side deduplicatie.
Tevens is de bestaande omgeving gemigreerd.

Het projectteam had op wekelijkse basis overleg en waar nodig zijn veranderingen doorgevoerd ten opzichte van het oorspronkelijke design. Het project is opgeleverd binnen de gestelde deadline. AZG werkt intussen een aantal maanden met de nieuwe backupomgeving en laat weten zeer tevreden te zijn met het resultaat en de inzet van OSP. Jorrit Jorritsma (projectleider AZG): “Door de uitermate goede inzet en zeer uitgebreide productkennis van OSP op het gebied van de NetBackup producten hebben wij nu een zeer goede backupomgeving waar we de komende jaren op kunnen vertrouwen.”

OSP heeft alle kennis in huis om met de oplossingen van VERITAS NetBackup, tezamen met haar gedegen projectmanagement op basis van de Prince2-aanpak, implementatieprojecten van deze grootte tot een succes te maken.

VeritasAntonius

Nieuwe website OSP online!

Het zal niemand zijn ontgaan, de website van OSP was toe aan vernieuwing. Omdat OSP klantgericht is en staat voor een goede kwaliteit, vinden wij dat we ons online ook zo moeten presenteren. Vanaf nu is de nieuwe website dan eindelijk een feit.

OSP kiest er bewust voor de website helder en overzichtelijk te houden. Natuurlijk zijn wij altijd bereid extra informatie te geven over onze diensten. Stuur vrijblijvend een e-mail of bel 020 495 02 22.