Pomoc przy przeniesieniu serwera

jendrusk · 2019-09-13T15:48:39.000Z

Cześć

Jak pewnie wszyscy wiecie aktualny serwer stowarzyszenia, na którym stoi nasza strona, wizualizacje Marimila oraz osmapa.pl jest umieszczony na maszynie zVid-a. Dzięki uprzejmości kolegi od kilku lat za niego nie płacimy, za co jesteśmy bardzo wdzięczni, jednak Wiesław prosił żebyśmy ten serwer zmigrowali na nową maszynę, bo ta, na której stoi w tej chwili jest już w całości wyczyszczona i chciałby ją wyłączyć/sprzedać.

Niestety cały serwer jest postawiony dokładnie nie na takich narzędziach jakich ja używam (ja: ubuntu, apache, nginx, mapnik, modtile, renderd i python, a jest Gentoo, lightHTTPd,tilemill i php).

W związku z powyższym bardzo proszę wszystkie osoby, które miałyby wiedzę, czas i możliwości żeby pomóc przy przenoszeniu tego serwera o pilny kontakt.

marimil · 2019-09-17T16:37:15.000Z

Hej

Jeśli chodzi o mój “system”, to mogę pomóc. Może zmobilizuję się, żeby to trochę uporządkować, bo tak prawdę pisząc, to tylko 5-6 wizualizacji jest odwiedzanych regularnie. Reszta będzie do wyłączenia. Oczywiście maszynka działa sama, więc trochę musiałbym sobie przypomnieć.

Co do systemu operacyjnego - nie musi to być Gentoo. Sam siebie migruję do wygodniejszych rozwiązań.
Nie ukrywam, że wolałbym nie zmieniać narzędzi, ponieważ to wymagałoby więcej pracy. Oprócz wykorzystywanego lighttpd z php, korzystam również z maprproxy (działa na pythonie).

Co z bazą danych?

Czy to ma być stawiane od zera i dedykowane tylko do tego co do tej pory działa czy może będzie do wykorzystania gościnnie jakiś serwer? W drugim przypadku dochodzi obciążenie serwera. Nie robiłem nigdy badań ale trzeba się nastawić na dodatkowe wykorzystanie mocy.

jendrusk · 2019-09-17T20:31:11.000Z

Cześć

Super, że jesteś - Twojej części najbardziej się bałem, a nie mam żadnego kontaktu żeby Cię atakować bardziej bezpośrednio.

Php nie obejdziemy, mapproxy i pythona znam i się ich nie boję… Może chociaż lighthttpd udałoby się zamienić na apache lub nginx? Nie powinno być trudno - mogę nawet sam spróbować.

Jak zacząłem grzebać to znalazłem że same kafelki są gdzie indziej - na jakimś serwerze Balrog-a który powoli dokonuje żywota - Andrzej coś mówił że nie ma pewności czy dyski nie padną jak zrobi reimport bazy… Ale z drugiej strony na serwer kafli trzeba zasobów - nie wiem czy zVid będzie mógł nam tyle podarować… Do serwera kafli nie mam dostępu - tylko na podstawie jakichś wspomnień sprzed 6 lat kojarzę że to chyba tilemill zrobiony przez pbabik-a Jakich to będzie potrzebować zasobów to trudno mi szacować.

Nowy serwer mamy na ubuntu 18.04 - przeniosę Twoje klucze i wstawię na serwer adres i login żebyś mógł się połączyć.

kocio · 2019-09-17T21:24:46.000Z

Nie znam tego oprogramowania konkretnie, ale z Linuksem daję sobie radę na codzień i też mogę jakoś pomóc.

kocio · 2019-09-17T22:51:29.000Z

W ogóle to polecam Dockera, który nie ma narzutu na prędkość, a pozwala wirtualizować usługi nawet na najdzikszych dystrybucjach bez robienia bałaganu w systemie. Łatwo się to potem migruje i zawsze jest udokumentowane jak to się stawia od zera, bo pliczek Dockerfile to swego rodzaju skrypt do instalacji środowiska.

jendrusk · 2019-09-18T09:12:51.000Z

Daniel ja raczej używam lxd - wiem, że to nie to samo, ale w tym temacie jest bardzo podobny - przenosisz cały kontener i działa Sam proces tworzenia jest normalniejszy, bo tworzysz kontener z systemem, logujesz się do środka i normalnie instalujesz… jak zawsze. Minusem dockera jest to, że jednak musisz się go nauczyć, więc jakbym miał wybór to poszedłbym w tym kierunku. Nie wiem tylko jaką wirtualizację stosuje zVid i czy to się nie pogryzie… BTW docker też wymaga uprzywilejowanego kontenera - nie na każdej wirtualizacji ruszy.

A pomijając dywagacje to każde ręce chętne do pracy się przydadzą.

jendrusk · 2019-09-23T11:53:56.000Z

OK, środowisko w miarę przygotowane… poszedłem w kierunku konteneryzacji lxd.

@marimil - na starym serwerze jest pliczek, gdzie masz opisane dostępy (/home/marimil/nowy_serwer.txt)

@kocio - dałbyś radę sprawdzić jakie strony (poza wordpressem) serwuje ten serwer i ewentualnie je przenieść? Podeślij mi klucze publiczne.

@RicoElectrico - pomożesz? Dałbyś radę przenieść wordpressa?

kocio · 2019-09-24T23:19:46.000Z

Kolega w pracy lubi LXD. W zasadzie rozumiem czemu - bo jak w klasycznej wirtualizacji ma się kontrolę i można grzebać ręcznie. Ale to jest fajne na początku, a potem się pięknie zabagnia… Zwłaszcza jeśli to kod wspólny i ktoś inny chciałby to gdzieś indziej wdrożyć, ale swoje modyfikacje też można zapomnieć z czasem.

Oczywiście kontenery Dockera też można ręcznie modyfikować i transferować binarnie gdy trzeba, ale pliczek Dockerfile wymusza napisanie swego rodzaju minimalnej dokumentacji co i jak jest instalowane i zmieniane. W efekcie takie kontenery bardzo fajnie się odtwarza na zupełnie innej maszynie z krótkiego skrypciku i garści danych - wczoraj migrowałem innemu koledze laptopa i postawienie skomplikowanego środowiska w Dockerze było o wiele łatwiejsze niż ręczne kombinowanie z jego różnymi danymi i ustawieniami. Zresztą OSM Carto też ma kontenery i wdrożenie nowego dewelopera jest bajką w porównaniu z tym, co mieliśmy wcześniej - najważniejsza część instrukcji to dosłownie kilka wierszy z opisem:

https://github.com/gravitystorm/openstreetmap-carto/blob/master/DOCKER.md#quick-start

Nauka poleceń Dockera nie jest skomplikowana, zwłaszcza jeśli się czyta, ale na pałę da się proste też zrobić kopiując i modyfikując - szczerze polecam choćby takie podstawy: https://github.com/kstaken/dockerfile-examples

A jak jest LXD, to da się pod nim pewnie uruchomić Dockera… To dobre ćwiczenie na robienie porządków i uwalnianie kodu (mam nadzieję, że to możliwe).

Wysłałem klucz i zobaczymy co dalej.

jendrusk · 2019-10-03T20:33:20.000Z

Postawienie dockera w lxd nie jest takie całkiem proste - musisz mieć dostęp do hosta żeby ustawić kontener na uprzywilejowany - inaczej nie rusza

Tu mamy jakąś inną wirtualizację bo na nowej maszynie lxd już postawiłem i planuję podzielić na kontenery funkcjonalne - Marimil już ma swój Jak tam postawi swoje zabawki to przeniesienie ich później zamknie się w 3 komendach z bash-a