[06:47] <Malinux> raidghost: RoyK fsck kjører fortsatt
[07:34] <RoyK> såpass
[07:34] <Malinux> mhm
[07:34] <Malinux> hm, men rambruken har gått fra 96.4 til 96.3 prosent
[07:35] <Malinux> eh, nei, tilbake på 96.4 igjen nå :p
[09:10] <RoyK> raidghost: ding?
[09:16] <Malinux> han skal spise først
[09:17] <RoyK> ok
[09:17] <RoyK> takk
[10:22] <RoyK> skulle visst spise ganske mye...
[10:51] <RoyK> raidghost: ding
[11:43] <RoyK> Malinux: la til ny swapfil på ssd-en hans - litt mindre pes mot det nye raidet ;) https://munin.malinux.no/erikandre.no/home.erikandre.no/diskstats_utilization/index.html
[12:00] <raidghost> RoyK: meg og madammen sovnet vist tidlig igår;)
[12:02] <RoyK> oki
[12:18] <raidghost> joda
[12:18] <raidghost> Kan taste på irc vettu
[12:19] <RoyK> altså... ext4 egner seg dårlig til store filsystemer, noe som bør være ganske åpenbart når du ser hvor lang tid det tar med fsck på et fillete filsystem
[12:19] <raidghost> Fillete filsystem.   alltid vært fillete eller bare stygg gammelt? :p
[12:19] <RoyK> xfs er bedre der  - eneste ulempa med xfs jeg kan komme på, er at det ikke er mulig å krympe et filsystem - det kan du på ext4 - men igjen - det er ikke ofte du trenger det
[12:20] <RoyK> tja - ødelagt, kanskje - korrumpert som en russisk politiker
[12:21] <RoyK> zfs er noe helt annet - det erstatter både raid, lvm og filsystem og støtter kompresjon, snapshotting og enkel ssd-caching og mye mer
[12:21] <RoyK> det er rett og slett en ny greie, tilsvarende btrfs, kanskje, men langt mer stabilt
[12:23] <RoyK> det jeg snakka med malin om, var at med såpass mange disker og et i hvert fall delvis behov for mye iops (med tanke på vm-lagring), så kunne det være gunstig å sette opp et sett med stripa speil, aka raid-1+0 (noen kaller det også raid10, men det er feil, det er bare speiling og striping)
[12:23] <RoyK> dvs 5 speil pluss en spare
[12:23] <RoyK> ulempa med speiling, er jo at halvparten av plassen går med i redundans
[12:23] <RoyK> men igjen, med stripa speil, kan du fint slenge til et nytt speil og utvide på den måten
[12:24] <RoyK> med raidz2 (tilsvarende raid6) mister du bare plassen tilsvarende to disker, men en VDEV (dvs et raid eller speil) kan ikke utvides - så har du 10 disker i et RAIDz2 og vil utvide, må du legge til en ny VDEV, dvs et nytt raidsett - eller bytte ut samtlige disker i raidet med noe større
[12:26] <RoyK> zfs har også sjekksumming av alt av data og metadata, så hvis det skjer noe humbug som ikke harddisken oppdager, så finner zfs det, og gitt nok redundans (noe du som regel har med speil eller raidz2), så fikser den det i bakgrunnen uten å lage noe krøll - logges vel bare på debug-nivå også, siden det anses for å være normalt at det oppstår småfeil
[12:26] <RoyK> så vidt meg bekjent, er det bare zfs og btrfs som gjør dette, og btrfs er fremdeles såpass ustabilt at jeg ikke på noen måte vil anbefale det
[12:26] <raidghost> zfs meir sikkert en raid?
[12:26] <RoyK> ja
[12:27] <RoyK> siden det ikke stoler på at harddiskene gir deg korrekte data selv om de sier at de gjør det
[12:27] <RoyK> søk litt på youtube eller noe, så finner du sikkert en presentasjon
[12:29] <RoyK> det anbefales også ECC-minne, og noen går så langt som å skrive at det er kritisk. Det er jeg svært uenig i - det er masse meninger der ute... jeg kjører forøvrig uten ECC-minne, og den zfs-greia har vel kjørt i etpar år nå. Det har gått en disk eller to på den tida, og av og til ser jeg det logges at feil har blitt retta, men jeg har ikke mista noe
[12:29] <RoyK> jeg har satt opp flere maskiner med zfs i størrelsesordenen ~100TiB og det bare virker
[12:29] <RoyK> så det eneste negative jeg kan tenke meg, er at det er mindre fleksibelt
[12:31] <RoyK> men igjen, hvis du tror at 18TiB kan holde ei stund, så er det dét du får med 10 disker i stripa speil. I RAIDz2 får du 28,8TiB
[12:31] <RoyK> evet 25,2TiB i RAIDz3, dvs trippel paritet
[12:32] <RoyK> men vil ikke anbefale RAIDz3 - det er suppetreigt å skrive til - jeg har bare brukt det på arkiv/backuptarget der plass var viktigere enn ytelse
[12:33] <raidghost> RoyK: Spørs om jeg går for zfs på nye maskinen min
[12:33] <RoyK> så - det er alltid tradeoffs - du kan velge mdraid, det funker, det er raskt og fint, fleksibelt, men det sjekksummer ikke, du har ikke noen egentlig god snapshotmulighet, selv om det ligger noe i lvm, ingen kompresjon (selv om det ikke er så viktig hvis det mest er video som lagres, siden det allerede er komprimert)
[12:33] <RoyK> så er valget mellom stripa speil eller raidz2
[12:34] <raidghost> Lurt litt på 8 10TB disker
[12:34] <RoyK> driter du penger? ;)
[12:34] <raidghost> om jeg DRITER penger=? :P
[12:34] <RoyK> høres bare litt mye ut å betale for en hjemmeesrver
[12:35] <RoyK> men - jeg vil uansett anbefale å bruke zfs her i stedet for mdraid
[12:36] <RoyK> og skal du ha maks iops, ta stripa speil. ellers kan du velge raidz2 - det går nok greit unna det også, spesielt hvis du hiver på en ssd til caching
[12:36] <RoyK> og du trenger ikke ta en hel en - det holder sikkert med 10 gig eller noe - det er jo begrensa hvor mye det er vits i å cache
[12:37] <raidghost> 2 sek lese litt det du har skrevet her
[12:39] <raidghost> hvordan er zfs på fsck kjøring
[12:39] <raidghost> noe kjappere?
[12:41] <raidghost> siterte deg " zfs har også sjekksumming av alt av data og metadata, så hvis det skjer noe humbug som ikke harddisken oppdager, så finner  zfs det, og gitt nok redundans (noe du som regel har med speil eller raidz2), så fikser den det i bakgrunnen uten å lage  noe krøll - logges vel bare på debug-nivå også, siden det anses for å være normalt at det oppstår småfeil
[12:41] <raidghost> Det høres jo Grise Sweet ut
[13:07] <raidghost> RoyK: var en ting jeg ikke helt forsto. i følge cat /proc/mdstat så mangler jo gamle raidet fortsatt 1 disk
[13:08] <raidghost> Er det meiningen å kjøre ferdig  fsck og så legge til disk i raid 5et med mdadm ?
[13:10] <raidghost> -- borte litt (back later)
[14:02] <RoyK> raidghost: ja, det var det jeg tenkte
[14:07] <RoyK> Malinux: heh - cirka 3,5 kiops fra sdb på boksen til raidghost - *bittelitt* mer enn raidet klarte å levere ;)
[15:57] <raidghost> hæ?
[15:58] <raidghost> å hur vet du hvor mye raidet klare å levere da
[15:58] <raidghost> Stress å ta buss til europris for så drasse med ørten plastesker hjem
[15:59] <raidghost> Stable mest mulig under sengen, Storage plass:P
[17:08] <raidghost> AndyOslo has arrived
[19:12] <RoyK> aue
[19:12] <RoyK> aye
[19:12] <RoyK> ikke aue :)
[19:25] <RoyK> raidghost: fikk du ordna deg crashplan-konto?
[20:30] <RoyK> raidghost: dingeling
[21:16] <RoyK> raidghost: vi har flytta /home bort fra SSD-en din og til det nye raidet for å kunne bruke den plassen på SSD-en til mer swap, for å få opp hastigheten til fsck
[21:19] <RoyK> raidghost: …og i den sammenhengen måtte vi kaste ut brukere med åpne filer på /home, så du må nok logge inn igjen der :)
[21:19] <RoyK> raidghost: fsck kjører fremdeles, da, og med litt hell, så kan det jo hende den er ferdig om ei uke eller tre :D