Sun Cluster 3.2 und iSCSI

So, ich habe jetzt einen SunCluster 3.2 gebaut (low cost, eine Netra20, eine Blade1000 und ein Multipack mit 4 146G Disks), davon 3 Disks in einem RaidZ Diskpool.
Auf dem ZPool gibts 3 Volumes: eines fuer ein Zoneroot, eines fuer Oracle Binaries und eines fuer Datafiles. (Im echten Leben wuerde man natuerlich noch Redo/Arch-Logs, etc in eigene Volumes tun)
Diese drei Volumes sind per iSCSI freigegeben.
Im SunCluster gibts eine normale HAStoragePlus RG für den ZPool sowie einen LogicalHostname "strongbow".

(6645120) bow:/# zfs list
NAME                        USED  AVAIL  REFER  MOUNTPOINT
sharedpool                 28.0G   239G  28.0K  /sharedpool
sharedpool/oracle          20.0G   239G  24.0K  /sharedpool/oracle
sharedpool/oracle/data1       8G   247G  21.3K  -
sharedpool/oracle/orabin     12G   251G  21.3K  -
sharedpool/zones           8.00G   239G  24.0K  /sharedpool/zones
sharedpool/zones/testzone     8G   243G  4.41G  -

(6645144) bow:/# zfs get all sharedpool/zones/testzone
NAME                       PROPERTY         VALUE                  SOURCE
sharedpool/zones/testzone  type             volume                 -
sharedpool/zones/testzone  creation         Tue Dec 23 17:20 2008  -
sharedpool/zones/testzone  used             8G                     -
sharedpool/zones/testzone  available        243G                   -
sharedpool/zones/testzone  referenced       4.41G                  -
sharedpool/zones/testzone  compressratio    1.00x                  -
sharedpool/zones/testzone  reservation      none                   default
sharedpool/zones/testzone  volsize          8G                     -
sharedpool/zones/testzone  volblocksize     8K                     -
sharedpool/zones/testzone  checksum         on                     default
sharedpool/zones/testzone  compression      off                    default
sharedpool/zones/testzone  readonly         off                    default
sharedpool/zones/testzone  shareiscsi       on                     local
sharedpool/zones/testzone  copies           1                      default
sharedpool/zones/testzone  refreservation   8G                     local

Soviel zur ZFS Config.
Hier noch die Konfiguration der Resourcen im Cluster:

(6645145) bow:/# scstat -g

-- Resource Groups and Resources --

         Group Name     Resources
         ----------     ---------
Resources: space-rg       space-zfs-stor strongbow


-- Resource Groups --

         Group Name     Node Name                State          Suspended
         ----------     ---------                -----          ---------
  Group: space-rg       bow                      Online         No
  Group: space-rg       saint                    Offline        No


-- Resources --

         Resource Name  Node Name                State          Status Message
         -------------  ---------                -----          --------------
Resource: space-zfs-stor bow                      Online         Online
Resource: space-zfs-stor saint                    Offline        Offline

Resource: strongbow      bow                      Online         Online - LogicalHostname online.
Resource: strongbow      saint                    Offline        Offline - LogicalHostname offline.

(6645147) bow:/# scrgadm -pv

Res Type name:                                     SUNW.LogicalHostname:2
(SUNW.LogicalHostname:2) Res Type description:   Logical Hostname Resource Type
(SUNW.LogicalHostname:2) Res Type base directory: /usr/cluster/lib/rgm/rt/hafoip
(SUNW.LogicalHostname:2) Res Type single instance: False
(SUNW.LogicalHostname:2) Res Type init nodes:    All potential masters
(SUNW.LogicalHostname:2) Res Type failover:      True
(SUNW.LogicalHostname:2) Res Type proxy:         False
(SUNW.LogicalHostname:2) Res Type version:       2
(SUNW.LogicalHostname:2) Res Type API version:   2
(SUNW.LogicalHostname:2) Res Type installed on nodes: 
(SUNW.LogicalHostname:2) Res Type packages:      SUNWscu
(SUNW.LogicalHostname:2) Res Type system:        True

Res Type name:                                     SUNW.SharedAddress:2
(SUNW.SharedAddress:2) Res Type description:     HA Shared Address Resource Type
(SUNW.SharedAddress:2) Res Type base directory:  /usr/cluster/lib/rgm/rt/hascip
(SUNW.SharedAddress:2) Res Type single instance: False
(SUNW.SharedAddress:2) Res Type init nodes:      All nodes
(SUNW.SharedAddress:2) Res Type failover:        True
(SUNW.SharedAddress:2) Res Type proxy:           False
(SUNW.SharedAddress:2) Res Type version:         2
(SUNW.SharedAddress:2) Res Type API version:     2
(SUNW.SharedAddress:2) Res Type installed on nodes: 
(SUNW.SharedAddress:2) Res Type packages:        SUNWscu
(SUNW.SharedAddress:2) Res Type system:          True

Res Type name:                                     SUNW.HAStoragePlus:6
(SUNW.HAStoragePlus:6) Res Type description:     HA Storage Plus
(SUNW.HAStoragePlus:6) Res Type base directory:  /usr/cluster/lib/rgm/rt/hastorageplus
(SUNW.HAStoragePlus:6) Res Type single instance: False
(SUNW.HAStoragePlus:6) Res Type init nodes:      All potential masters
(SUNW.HAStoragePlus:6) Res Type failover:        False
(SUNW.HAStoragePlus:6) Res Type proxy:           False
(SUNW.HAStoragePlus:6) Res Type version:         6
(SUNW.HAStoragePlus:6) Res Type API version:     2
(SUNW.HAStoragePlus:6) Res Type installed on nodes: 
(SUNW.HAStoragePlus:6) Res Type packages:        SUNWscu
(SUNW.HAStoragePlus:6) Res Type system:          False

Res Group name:                                    space-rg
(space-rg) Res Group RG_description:             
(space-rg) Res Group mode:                       Failover
(space-rg) Res Group management state:           Managed
(space-rg) Res Group RG_project_name:            default
(space-rg) Res Group RG_SLM_type:                manual
(space-rg) Res Group RG_affinities:              
(space-rg) Res Group Auto_start_on_new_cluster:  True
(space-rg) Res Group Failback:                   False
(space-rg) Res Group Nodelist:                   bow saint
(space-rg) Res Group Maximum_primaries:          1
(space-rg) Res Group Desired_primaries:          1
(space-rg) Res Group RG_dependencies:            
(space-rg) Res Group network dependencies:       True
(space-rg) Res Group Global_resources_used:      
(space-rg) Res Group Pingpong_interval:          3600
(space-rg) Res Group Pathprefix:                 
(space-rg) Res Group system:                     False
(space-rg) Res Group Suspend_automatic_recovery: False

(space-rg) Res name:                             space-zfs-stor
 (space-rg:space-zfs-stor) Res R_description:
 (space-rg:space-zfs-stor) Res resource type:   SUNW.HAStoragePlus:6
 (space-rg:space-zfs-stor) Res type version:    6
 (space-rg:space-zfs-stor) Res resource group name: space-rg
 (space-rg:space-zfs-stor) Res resource project name: default
 (space-rg:space-zfs-stor{bow}) Res enabled:    True
 (space-rg:space-zfs-stor{saint}) Res enabled:  True
 (space-rg:space-zfs-stor{bow}) Res monitor enabled: True
 (space-rg:space-zfs-stor{saint}) Res monitor enabled: True

(space-rg) Res name:                             strongbow
 (space-rg:strongbow) Res R_description:
 (space-rg:strongbow) Res resource type:        SUNW.LogicalHostname:2
 (space-rg:strongbow) Res type version:         2
 (space-rg:strongbow) Res resource group name:  space-rg
 (space-rg:strongbow) Res resource project name: default
 (space-rg:strongbow{bow}) Res enabled:         True
 (space-rg:strongbow{saint}) Res enabled:       True
 (space-rg:strongbow{bow}) Res monitor enabled: True
 (space-rg:strongbow{saint}) Res monitor enabled: True

Ein dritter Server "flunder" soll eine Zone bekommen mit dem Namen "scholle", welche sich dann bitte auf dem testzone Volume befinden soll. Zuerst also die iSCSI config auf dem Cluster ansehen. Achtung, das ist eine Failovergroup - daher funktioniert das natuerlich nur auf dem Node der die RG aktiv hat:

(6645163) bow:/# iscsitadm list target
Target: sharedpool/zones/testzone
    iSCSI Name: iqn.1986-03.com.sun:02:2abc5e6f-1535-6403-ca9f-d3d2f2e652a4
    Connections: 1
Target: sharedpool/oracle/orabin
    iSCSI Name: iqn.1986-03.com.sun:02:d5078ccd-ed73-cf83-d77a-df383470df86
    Connections: 0
Target: sharedpool/oracle/data1
    iSCSI Name: iqn.1986-03.com.sun:02:b63b6a43-31f5-cdac-e62d-918cd4b83851
    Connections: 0

Anschliessend muss die Disk auf "flunder" bekannt gemacht werden:

(50) flunder:/# iscsiadm list discovery-address
Discovery Address: 172.20.23.1:3260

(zu setzen mit iscsiadm add discovery-address 172.20.23.1)

(51) flunder:/# getent hosts 172.20.23.1
172.20.23.1     strongbow

"Strongbow" ist wie oben zu sehen der LogicalHostname des Clusters.

(52) flunder:/# iscsiadm modify discovery --static enable
(53) flunder:/# iscsiadm add static-config iqn.1986-03.com.sun:02:2abc5e6f-1535-6403-ca9f-d3d2f2e652a4,172.20.23.1

Dies ist das target gefolgt von der Host-IP. Das target haben wir aus dem Output von iscsitadm des Clusters.
Jetzt muss die Disk OS-Seitig noch bekannt werden:

(54) flunder:/# devfsadm -i iscsi

Legt jetzt die entsprechenden Device-Eintraege an und wir koennen die Disk per format sehen:

(89) flunder:/# format
Searching for disks...done


AVAILABLE DISK SELECTIONS:
       0. c0t0d0 
          /pci@1c,600000/scsi@2/sd@0,0
       1. c4t0d0 
          /iscsi/disk@0000iqn.1986-03.com.sun%3A02%3A2abc5e6f-1535-6403-ca9f-d3d2f2e652a4FFFF,0
       2. c4t1d0 
          /iscsi/disk@0000iqn.1986-03.com.sun%3A02%3Ad5078ccd-ed73-cf83-d77a-df383470df86FFFF,0
       3. c4t2d0 
          /iscsi/disk@0000iqn.1986-03.com.sun%3A02%3Ab63b6a43-31f5-cdac-e62d-918cd4b83851FFFF,0
Specify disk (enter its number): 1
selecting c4t0d0
[disk formatted]

FORMAT MENU:
        disk       - select a disk
        type       - select (define) a disk type
        partition  - select (define) a partition table
        current    - describe the current disk
        format     - format and analyze the disk
        repair     - repair a defective sector
        label      - write label to the disk
        analyze    - surface analysis
        defect     - defect list management
        backup     - search for backup labels
        verify     - read and display labels
        save       - save new disk/partition definitions
        inquiry    - show vendor, product and revision
        volname    - set 8-character volume name
        !     - execute , then return
        quit
format> p


PARTITION MENU:
        0      - change `0' partition
        1      - change `1' partition
        2      - change `2' partition
        3      - change `3' partition
        4      - change `4' partition
        5      - change `5' partition
        6      - change `6' partition
        7      - change `7' partition
        select - select a predefined table
        modify - modify a predefined partition table
        name   - name the current table
        print  - display the current table
        label  - write partition map and label to the disk
        ! - execute , then return
        quit
partition> p
Current partition table (original):
Total disk cylinders available: 32766 + 2 (reserved cylinders)

Part      Tag    Flag     Cylinders         Size            Blocks
  0       root    wm       0 - 32765        8.00GB    (32766/0/0) 16776192
  1 unassigned    wu       0                0         (0/0/0)            0
  2     backup    wu       0 - 32765        8.00GB    (32766/0/0) 16776192
  3 unassigned    wm       0                0         (0/0/0)            0
  4 unassigned    wm       0                0         (0/0/0)            0
  5 unassigned    wm       0                0         (0/0/0)            0
  6 unassigned    wm       0                0         (0/0/0)            0
  7 unassigned    wm       0                0         (0/0/0)            0

partition> ^D
(90) flunder:/#

Jetzt kann mit newfs ein UFS auf das slice0 gelegt werden. Die Details dazu duerften bekannt sein. Ebenfalls das installieren einer Zone sollte klar sein.

Jetzt haben wir uns eine Zone auf ein redundantes Storage gelegt das Failovered.
Ein Failover wird vom Host System mit messages in Form von SCSI errors/retransmits quittiert, aber die Zone läuft weiter.

Jetzt werde ich die Oracle-DB in die Zone installieren und sehen ob die genauso stressfrei den Failover ueberlebt. Beim Versuch mit NFS als grundliegende Resource ist die DB ziemlich auf die Bretter gegangen...

ES445 Advanced Cluster Chaos

Danke Remote-Labs, danke Sun...ohne weitere Worte:

Spielzeug!

Endlich ist meine Bestellung von Toplicht da! Neue Schoten! Neue Fallen! Neue Festmacher! Neue Flagleinen! Der Winter ist gerettet ,)

00000000 00000000 00100001 00011110

und wieder ein Jahr älter - diesmal die "Grenze" 30 überschritten. Manchmal hängt man seinen Gedanken nach.

Als Kind dachte ich immer, wenn man "erwachsen" ist dann hat man spätestens mit 30 ein Haus, zwei Kinder und eine gute Ehefrau.

Wie sich die Vorstellungen ändern: man will garnicht unbedingt so erwachsen sein und heiraten und Kinder sind auch weit weg in der Vorstellung. Ein Haus habe ich auch nicht, sondern bin froh mir ein kleines Boot leisten zu können.

Nein, ich bin nicht traurig oder enttäuscht - das Leben ist wie es ist. Man hängt nur ab und an den Gedanken nach und reflektiert über früher und jetzt.

zurück aus den Niederlanden

Und wieder einmal zwei sehr schöne Wochen auf "De Zevenwouden". Diesmal führte unsere Tour von Lemmer über Harlingen, Ameland, Schiermonnikoog (unglaublich viel Regen...war daher nicht ganz so schön...), Dokkum, Franeker, Terschelling (ein Tag Hafentag und lecker Pfannkuchen mit Cranberries gegessen direkt im Cafe am Brandaris), Vlieland (auf der Überfahrt sah das Wetter ganz nach Badestrand aus, danach leider nicht mehr - 5 Bft., auffrischend 6, stark bewölkt...so bin ich dann auch nicht in den eigendlich sehr schönen Ort gegangen, denn das sind 20min Fußweg vom Hafen), anschliessend nach Texel (um eine Liveband zu sehen, ich war aber müde und bin in die Koje), dann via Den Oever (und es stand eine üble Welle im Fahrwasser von Texel weg...lecker Salzwasserdusche...) nach Stavoren (bester Kibbeling überhaupt! Und ich empfehle grad mal "M. de Groot" als Laden für Yacht- und Segelzubehör). Von Stavoren sind wir dann nach Enkhuizen und haben uns einen angenehmen Spaziergang durch den Ort gegönnt mit anschliessendem Kaffee und Klönschnack. Am Abend hatten wir Hafenkino in erster Reihe und haben und lauter deutsche Schulkinder antuen dürfen die Teils volltrunken zum Schiff getorkelt sind...inklusive anschliessendem Gespräch mit der Lehrkraft...

Am letzten Tag sind wir dann bei Luxuswetter und halben Wind nach Lemmer zurück mit allen Lappen die wird setzen konnten.

Dieser Urlaub tat mal wieder not und im Moment bin ich super erholt.

Allerdings muss ich wohl morgen zum Doc, weil ich mit auf dem Stadtfest gestern einen Bluterguss im Fuß zugezogen habe (keine Ahnung wie...)

HUP HOLLAND!

ORANJE! ORANJE! HUP!

Einhand nach Vegesack

Eigentlich wollt ich ja nach Sandstedt...aber alleine gegen Strom und Wind - ach ne. Und wie ich in Elsfleth auf die Weser bin, war grad Niedrigwasser durch und ich konnte mit achterlichem Wind und mit dem Strom Richtung Vegesack. Blöderweise habe ich beim setzen des Großsegels in Hektik bringen lassen, wodurch ich blöd aufgetreten bin und umgeknickt bin. Ärgerlicherweise sogar mit dem Knie bei dem ich mir die Kniescheibe schonmal ausgerenkt hatte. Nunja, ausgiebig geflucht, Schmetterling-Kurs gesetzt und Knie ruhig gehalten. Zum Glück isses nich geschwollen, und laufen geht so lala...

Dennoch: schönes Wochenende gehabt, aber trotzdem schon Samstag zurück - denn mit dem kaputten Knie will ich nix riskieren.

Virtualisierung auf Solaris 10...

Einige der Möglichkeiten wie Zones, Branded Zones, Sun xVM VirtualBox zeigt dieser Screenshot von meinem Compaq nc8230 mit Solaris 10u4:

Überführung von "Annemarie"

Heute um 14:00 Uhr habe ich Annemarie in Oldenburg fest gemacht - nach 12 Tagen und 303 Seemeilen (ca. 561 km). Der Weg führte mich von Ferch (Schwielowsee) über Plaue (Brandenburg), Tangermünde (unheimlich schöne Stadt und empfehlenswerte Kneipe/Restaurant "Exempel"), Wittenberge (hier verliess mich mein erster Mitfahrer), Hitzacker (ablegen dort war ein Desaster - die Strömung im Hafen ist nicht zu unterschätzen), Geesthacht (sehr schöner Ort!), Hamburg (City Sport Hafen Baumwall, viel Welle durch Hafenverkehr), Glückstadt (auch sehr schön!), Otterndorf (sehr netter Hafenmeister und unheimlich guter Matjes im Restaurant :)), Bremerhaven und Elsfleth (der Hunte-Anleger "Panorama" ist sehr unruhig durch vorbeifahrenden Schiffsverkehr) nach Oldenburg. Es waren so viele Eindrücke die mir völlig unsortiert durch den Kopf wirren - ich kann das (noch?) garnicht niederschreiben.

Leider ist der alte Mast zu vergammelt (und mittlerweile auch gebrochen) - ich konnte also nicht segeln bisher und bin die ganze Strecke mit meinem Aussenborder gefahren (15PS Mercury, hört auf den Namen "Jacqueline"). Der neue Mast kommt leider erst nächstes Wochenende hier an. Und dann muss ich erst noch das ganze stehende Gut anpassen und die Mastbeschläge anpassen...aber bis Pfingsten soll der neue Mast stehen!

Und jetzt bin ich ziemlich müde und werde mich ausruhen!

Ostersegeln...

die Kurzfassung: es war kalt (1°C tagsüber), es hat geregnet, gehagelt und geschneit - und das nicht zu knapp. Glücklich war, wer etwas zu arbeiten hatte um sich dabei auszuwärmen. Sogesehen klingt das garnicht toll - aber das Gegenteil war der Fall.

Wir sind Freitag morgen von Workum gestartet und sind durch die Schleuse (sehr eng für ein 27m Schiff!) auf die Kanäle und haben nach der letzten Brücke die Fock hochgezogen und das Grosssegel halb hoch ("altes Weib"). So sind wir dann gemütlich nach Lemmer gesegelt - was auf den Kanälen oft schwer ist, wenn der Wind aus der falschen Richtung kommt...war auch mal ein nettes Erlebnis.

In Lemmer haben wir dann an der Emmakade festgemacht und haben das obligatorische Kibbeling-Race gestartet, d.h. möglichst schnell zur Fischbude ;) Allerdings haben wir dann nochmal einen anderen Fischladen aufgesucht und eine zweite Portion verdrückt. Was sich allerdings im Nachhinein als ungut herausstellte denn das Abendessen an Bord war unglaublich Klasse (und so blieb es auch!).

Den Tag hatte es einige Hagelschauer gegeben aber es war soweit ok.

Am Samstag haben wir dann das Schiff wieder aufklariert und sind noch fix in den lokalen Super de Boer Markt und haben eingekauft. Nach der Rückkehr zum Schiff haben wir dann losgemacht, sind durch die Schleuse und aufs IJsselmeer. Dann haben wir recht bald die Fock gesetzt und kurz später Binnenklüver und Gross (wieder "altes Weib").

Mit viel Rollen und Stampfen sind wir dann Richtung Hoorn. Allerdings haben wir dann doch beschlossen nur bis Enkhuizen zu gehen. Hier haben wir auch relativ zügig uns wieder auf den Weg in Richtung Fischladen gemacht um den obligatorischen Kibbeling zu essen. Der war zwar nich ganz so gut wie der zweite in Lemmer, aber dafür is der Fischladen echt schön.

Nach einem wieder sehr leckeren Abendessen an Bord und dem anschliessenen Klönschnack habe ich mich dann in die Koje verholt.

Sonntag sind wir dann von Enkhuizen in Richtung Den Oever abgefahren. Wieder klassisch mit 3 Segeln und knappen 6 Knoten im Schnitt. Etwa eine Stunde vor Den Oever sind wir dann in einen lang anhaltenden Schneefall geraten - mit salzigem Schnee. Eine völlig skurille Erfahrung - Schnee an Bord. Vorallem wenn ich daran denke das es Silvester nach Terschelling 8 Grad wärmer war und kein bisschen geschneit hat. Immerhin haben wir die Motive für die Weihnachtskarten dieses Jahr zusammen...sobald ich die Abzüge habe, poste ich sie :)

Im Schleusenvorhafen sind wir extra nochmal zurück um die eingeschneite Einfahrt zu fotografieren - tolle Bilder!

Dann sind wir durch die Schleuse im Abschlussdeich und dann in den Fischereihafen von Den Oever und haben dort fest gemacht. Und ratet mal was der erste Landgang war...richtig: Kibbeling. Die Fischbude dort ist ok, aber nix besonderes. Dann haben wir noch einen angenehmen Spaziergang durchs Dorf gemacht und sind über den Deich zurück und haben noch eben kontrolliert ob Texel noch da ist ;)

Ostermontag sind wir dann schliesslich zurück nach Workum - wieder durch Schnee und Hagel. Sehr zufrieden (ich zumindest) haben wir dann festgemacht.

Ich bin dann um 1711h mit dem Zug von Workum nach Leeuwarden, von dort nach Groningen, Leer und dann nach Oldenburg. Sehr geschafft aber erholt bin ich dann um 2145h zuhause gewesen und hab mich dann erstmal ins Bett gepackt.

Fazit: seltenes Erlebnis was sehr beeindruckend war und trotz Kälte sehr erholsam

Es wird wieder Zeit...

...das ich aufs Wasser komme. Die Arbeit wird wieder zäh und Unmut macht sich breit.

Zum Glück ist es bald Ostern und da gehts (endlich) wieder mit der Zeven Wouden übers IJsselmeer.

Und am 30. März kommt hoffentlich Annemarie ins Wasser und ich kann sie dann ab dem 5. April nach Oldenburg überführen...