Instale o Ubuntu Server em uma unidade flash, permanentemente

20

A primeira coisa que eu queria ter certeza é que existe um entendimento sobre o que este post NÃO é:

O que pretendo fazer é ter um servidor NAS (arquivo) doméstico inicializado a partir de um pendrive ou cartão CF. É irrelevante para o ponto deste post como a unidade flash está conectada (USB, IDE, de alguma outra maneira), o que é relevante: quero ter uma instalação inteira do sistema operacional inicializada e executada a partir da unidade flash. Os motivos pelos quais desejo especificamente esse tipo de instalação são: Desejo fazer facilmente uma cópia de backup do sistema operacional (imagem do flash), desejo garantir que eu possa trocar o sistema operacional instantaneamente e inicializá-lo (substituindo a unidade flash ) e desejo que as unidades em servidores de arquivos sejam substituíveis separadamente do sistema operacional.

Estou ciente de que é possível simplesmente formatar a unidade flash como ext2 e instalar nela. O que estou procurando são recomendações para criar uma solução mais robusta. Aqui estão alguns itens que pretendo fazer:

  • configure a partição raiz como YAFF2 ou LogFS ou como outro sistema de arquivos projetado especificamente para unidades flash.
  • reconfigure o sistema operacional base para minimizar gravações (ramfs em / tmp e outras)

Envie suas recomendações. Gostaria de saber se o Ubuntu é mesmo aplicável a esse cenário realmente ...

Quero esclarecer um pouco meu objetivo. As unidades SSD regulares apresentam firmwares que manterão a unidade ativa por muito tempo usando truques, como: realocar constantemente gravações para novos setores. Os pendrives USB não possuem esse firmware; portanto, o uso de sistemas de arquivos comuns pode matá-los rapidamente. Estou procurando se é possível emular o firmware SSD usando o sistema de arquivos projetado para flash. Em certo sentido, estou tentando fazer com que a unidade USB possa executar um sistema normalmente, como se fosse um SSD real.

galets
fonte
11
Iria perguntar isso em algumas horas, +1.
Bruno Pereira
11
Algumas das informações na resposta vinculada são relevantes, principalmente o noatimesinalizador e outros truques para não gravar na unidade. Eu realmente acho que sua pergunta não é sobre a instalação em uma unidade flash (já que isso é bem respondido), mas como minimizar as gravações na unidade.
Huckle
@ Huckle Eu preferiria uma resposta mais abrangente. Quero executar o SO de uma maneira otimizada para uma unidade flash. Minimizar gravações faz parte, mas não é a resposta. Eu gostaria de executar OS usando sistema de arquivos que especificamente alvos flash drives
Galets
Por que não apenas tentar? Instalei o Linux normalmente dessa maneira e funciona bem.
bntser
@bntser Não se trata de simplesmente arrancar a partir de USB
galets

Respostas:

1

Use LVM . Nesse caso, você pode usar instantâneos - clones instantâneos do seu sistema, para copiar facilmente todo o sistema ou apenas migrá-lo entre unidades flash *.

E se você gostaria de ter uma espécie de "nivelamento de desgaste" , você pode usar aufs para o sistema de arquivos raiz no flash USB . Portanto, você não precisa usar o YAFF2 etc, o ext4 ficará bem.

* Mas / boot, você sempre precisará copiar manualmente + será necessário modificar o UUID do grub / disk . Você precisará de um CD de resgate para redimensionar o volume raiz para o tamanho do USB Flash. E caso você tenha quebrado o grub, leia este manual .

Eu escrevi o manual para isso.

BBK
fonte
Obrigado pela resposta, mas como o endereço aufs usa o nivelamento? Eu não vejo nenhuma indicação de que ele faz
Galets
Quero dizer uma espécie de "nivelamento de desgaste". Aufs ajudará você a salvar seu USB FlashDrive. Na verdade, o FlashDrive se torna somente leitura e todas as gravações / alterações serão armazenadas na memória RAM.
BBK
Espere por algum tempo. Vou adicionar um guia completo para redimensionar a raiz do lvm + migrar para o Flash Drive + aufs em algum tempo, depois de corrigir alguns bugs. Estou fazendo o servidor NAS doméstico também.
BBK
4

Se você tiver o Ubuntu no HDD com LVM (o Ubuntu Server utiliza o LVM por padrão).

Esses scripts foram testados no Ubuntu Oneiric 11.10 x86_64 3.0.0-16-server com os seguintes aplicativos:

LVM version:     2.02.66(2) (2010-05-20)
Library version: 1.02.48 (2010-05-20)
Driver version:  4.20.0
grub-install (GRUB) 1.99-12ubuntu5
aufs - advanced multi layered unification filesystem. version 2.1-standalone.tree-3.0-rcN-20110620

Passo 1. Reduza o FS raiz para o tamanho do seu FlashDrive ou menor. Pule esta etapa se o tamanho do FS raiz for igual ou menor que o FlashDrive.

Inicialize com o CD do Rescue monte sua partição raiz. Execute os próximos comandos:

#make the kernel realize the LVM volumes are there
lvm vgchange -a y

#Before shrinking the file system, it is good practice to check it is all in order.
# Change /dev/ubuntu/root with your root lvm partition
e2fsck -f /dev/ubuntu/root

#After the check, resize2fs can be used to shrink the file system on the LVM volume
# Change /dev/ubuntu/root with your root lvm partition. Replace 6G with your FlashDrive capacity-500Mb
resize2fs -f -p /dev/ubuntu/root 6G
#The e2fsck check command could be run again to make sure the, now significantly smaller, root file system is OK.
# Change /dev/ubuntu/root with your root lvm partition. Replace 6G with your FlashDrive capacity-500Mb
resize2fs -f -p /dev/ubuntu/root 6G

#The lvreduce command reduces the size of LVM volumes.
# Change /dev/ubuntu/root with your root lvm partition. Replace 6G with your FlashDrive capacity-500Mb
lvm lvreduce -L6G /dev/ubuntu/root

#you resided root partition !
reboot

Etapa 2. Preparando o FlashDrive: para migrar

dê uma olhada no seu antigo UUID raiz

blkid  
#it will show something like:
#/dev/sda1: UUID="6b5085da-5b7c-4ca5-a907-1e527c87a478" TYPE="ext2"
#/dev/sda2: UUID="iZjCPX-AwGS-kEmg-zXPc-Z7ne-Xd3N-gXoPQd" TYPE="LVM2_member"

#We will need /dev/sda1's UUID later. Lets remember it (6b5085da-5b7c-4ca5-a907-1e527c87a478) for the future.

# Replace /dev/sdg with your FlashDrive. All data will be last!
fdisk /dev/sdg
make first partition (sdg1) about 500Mb as ext2/ext4
make second partition (sdg2) for example 6GB as LVM partition.

#replace ubuntu with the same LVM VolumeGroup for your root fs
#Extending VG with FlashDrive
vgextend ubuntu /dev/sdg2
modprobe dm-mirror
#Moving root partition to flash drive online :)
#Replace /dev/sdg2 with your Flash Drive's second partition
#Replace /dev/sda5 with your root drive
pvmove --verbose /dev/sda5 /dev/sdg2
#removing old root drive from VolumeGroup, so we can remove HDD from PC after manipulations. But not now.
vgreduce ubuntu /dev/sda5
#Creating boot partition.
#Replace /dev/sdg1 with your Flash Drive's first partition
mkfs -t ext4 -v /dev/sdg1
#Mounting first FlashDrive partition.
mkdir /mnt/boot
#Replace /dev/sdg1 with your Flash Drive's first partition
mount /dev/sdg1 /mnt/boot

#we will need some tools
apt-get install dump
#coping boot drive from HDD to FlashDrive first partition
#Replace /dev/sda1 (source) and /mnt/boot (destination) with your environments
(dump -0f - /dev/sda1) | ( cd /mnt/boot; restore -rf - )
#And let's not forget to restore boot sector (MBR):
# Replace /dev/sdg with FlashDrive disk path
grub-install /dev/sdg

#change UUID for /boot with the one we remember at the beginning of the Step 2 (6b5085da-5b7c-4ca5-a907-1e527c87a478).
vi /etc/fstab

#now we need to write changes to grub.
update-grub

#Now you can power off your PC.
poweroff
#Now you can replace old root FS's HDD.
#Do not forget configure your PC's BIOS to boot from your FlashDrive.

A) Se o seu grub carregou, mas não conseguiu carregar o sistema operacional no início, junte este artigo . tente o comando ls para descobrir o que o grub está vendo.

grub>ls
# Replace (hd0,msdos1) regard to previous output
grub>ls (hd0,msdos1)

# Replace (hd0,msdos1)/grub regard to previous output
grub>ls (hd0,msdos1)/grub

grub>configfile (hd0,msdos1)/grub/grub.cfg

Após a inicialização bem-sucedida, as alterações não são permanentes, então você deve atualizar o grub

update-grub

B) Se você não vê o grub, use o CD de Recuperação para inicializar.

#and install grub
#Lets figure out new name of your FlashDrive
blkid
# Replace /dev/sda with new name of your FlashDrive which system shows you
grub-install /dev/sda
#Reboot without Rescue CD and go to point A)
reboot

Etapa 3. AUFS para sistema de arquivos raiz na unidade flash USB.

apt-get update
 apt-get dist-upgrade
 apt-get install aufs-tools


# Aufs as root with apparmor. Enter dhclient3 to complain mode
# Network interface without it wount start/
apt-get install apparmor-utils
aa-complain dhclient3
# Or disable apparmor
#/etc/init.d/apparmor stop
#update-rc.d -f apparmor remove
#aptitude remove apparmor apparmor-utils

echo aufs >> /etc/initramfs-tools/modules

Agora crie o arquivo / etc / initramfs-tools / scripts / init-bottom / __ rootaufs e coloque o próximo script:

#!/bin/sh
#  Copyright 2008 Nicholas A. Schembri State College PA USA
#
#  This program is free software: you can redistribute it and/or modify
#  it under the terms of the GNU General Public License as published by
#  the Free Software Foundation, either version 3 of the License, or
#  (at your option) any later version.
#
#  This program is distributed in the hope that it will be useful,
#  but WITHOUT ANY WARRANTY; without even the implied warranty of
#  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
#  GNU General Public License for more details.
#
#    You should have received a copy of the GNU General Public License
#    along with this program.  If not, see
#    <http://www.gnu.org/licenses/>.

# https://help.ubuntu.com/community/aufsRootFileSystemOnUsbFlash#rootaufs_Script

# Thank you Voyage Linux for the idea, http://voyage.hk/ Great job on release 0.5
#
# Tested with 8.04.1
# tested with 9.10
# tested with debian live 6.0.1
#
# ****************************************************************************************
# 
#                                 Change log
#
# 2008.08.01  Added debugging comments in "drop to a shell" section. grub option aufs=tmpfs-debug will stop the init script.
#             reviewed *********** fix fstab on tmpfs ******************
#             rootaufs failed when system was booted with /dev/xxx and fstab had uuid= info.
#             BlaYO pointed out the best and simplest solution was to use grep -v. Grep replaces a sed one liner.
#             Add the comment block to fstab
#             
# 2009.12.07 Corrected issue caused by Apparmor.
#            Name changed to __rootaufs.
# 
# 2011.08.19 Changed if condition to avoid issue (sh: bad number) when $aufsdebug is not set.
#            Now checks exists apparmor before delete.
#
# 2011.08.20 For work correctly with Debian Live 6.0.1 (http://live.debian.net/) two lines must be removed from rc.local modification part:
#             'mount -f  /ro'
#             'echo aufs-tmpfs /rw tmpfs rw 0 0 >>/etc/mtab'
#





case $1 in
prereqs)
    exit 0
    ;;
esac

export aufs

for x in $(cat /proc/cmdline); do 
    case $x in 
    root=*)
        ROOTNAME=${x#root=}
        ;;
    aufs=*)
        aufs=${x#aufs=}
        case $aufs in
        tmpfs-debug)
            aufs=tmpfs
            aufsdebug=1
            ;;
        esac    
        ;;
    esac
done


if [ "$aufs" != "tmpfs" ]; then
    #not set in boot loader 
    #I'm not loved. good bye
    exit 0
fi




# This is a simple overview of the steps needed to use aufs on the root file system and see the /rw and /ro  branches.
# initramfs init-botton script 
# move the root file system to aufs/unionfs readonly /ro
# root is mounted on ${rootmnt}
# create tmpfs on /rw
# create a aufs using /ro and /rw
# put some files on the tmpfs to fix mtab and fstab 
# move aufs to rootmnt to finish the init process.
# No changes to the root file system are made by this script.
#
#  Why!
#  This will allow you to use a usb flash drive and control what is written to the drive.
#  no need to rebuild the squashfs file just to add a program. 
#  boot to single user mode.  The system works the way you expect. boot aufs=tmpfs and no changes are written to the flash.
#  run ubuntu on an eeePC .  

# Install 
# Install ubuntu 8.04 Hardy. Hardy has aufs installed by default
# apt-get update
# apt-get dist-upgrade
# apt-get install aufs-tools
# echo aufs >> /etc/initramfs-tools/modules
# put this file in /etc/initramfs-tools/scripts/init-bottom/rootaufs
# chmod 0755 rootaufs
# # clean up menu.lst 
# update-grub
# update-initramfs -u
# vi /boot/grub/menu.lst
# add aufs=tmpfs to the default entry. 
# do not add this line to single user mode.
# boot to single user mode in order to install software. 
# note: if your home account is on the root file system, your files are in ram and not saved.
# 


echo 
echo "       root-aufs:  Setting up aufs on ${rootmnt} as root file system "
echo 

modprobe -q --use-blacklist aufs
if [ $? -ne 0 ]; then
    echo    root-aufs error:      Failed to load aufs.ko
    exit 0
fi

#make the mount points on the init root file system
mkdir /aufs
mkdir /rw
mkdir /ro

# mount the temp file system and move real root out of the way
mount -t tmpfs aufs-tmpfs /rw
mount --move ${rootmnt} /ro 
if [ $? -ne 0 ]; then
    echo    root-aufs error:    ${rootmnt}  failed to move to /ro
    exit 0
fi


mount -t aufs -o dirs=/rw:/ro=ro aufs /aufs
if [ $? -ne 0 ]; then
    echo    root-aufs error:      Failed to mount /aufs files system
    exit 0
fi


#test for mount points on aufs file system
[  -d /aufs/ro ] || mkdir /aufs/ro
[  -d /aufs/rw ] || mkdir /aufs/rw

# the real root file system is hidden on /ro of the init file system.  move it to /ro 
mount --move /ro /aufs/ro
if [ $? -ne 0 ]; then
    echo    root-aufs error:      Failed to move /ro /aufs/ro 
    exit 0
fi

# tmpfs file system is hidden on /rw
mount --move /rw /aufs/rw
if [ $? -ne 0 ]; then
    echo    root-aufs error:      Failed to move /rw /aufs/rw 
    exit 0
fi



#*********** fix fstab on tmpfs ******************
# test for /dev/sdx 
# this is not on the real file system.  This is created on the tmpfs each time the system boots.
# The init process will try to mount the root filesystem listed in fstab. / and swap must be removed.  
# the root file system must be mounted on /ro not on /

if [ "0$aufsdebug" -eq 1 ]; then
    echo  "   root-aufs debug:    Remove the root file system and swap from fstab "
    echo 
    echo 
    echo  "         ROOTNAME $ROOTNAME "
    echo  "         resume   $resume   "
    echo 
    echo  '     BlaYO pointed out that grep can be used to quickly remove '
    echo  '      the root file system from fstab. '
    echo 
    echo  '     Thank you BlaYO for the debug info.'
    echo

fi
# old code
# I'm sure that sed can do this in one step but I want to correct on the rootname  not matching the root in fstab.
#cat /aufs/ro/etc/fstab|sed -e s/$ROOTNAME/\#$ROOTNAME/ -e s/$resume/\#$resume/ >/aufs/etc/fstab  

#Add the comment block to fstab
cat <<EOF >/aufs/etc/fstab
#
#   RootAufs has mounted the root file system in ram
#
#  This fstab is in ram and the real fstab can be found /ro/etc/fstab
#  the root file system ' / ' has been removed.
#  All Swap files have been removed. 
#

EOF

#remove root and swap from fstab
cat /aufs/ro/etc/fstab|grep -v ' / ' | grep -v swap >>/aufs/etc/fstab  
if [ $? -ne 0 ]; then
    echo    root-aufs error:      Failed to create /aufs/etc/fstab 
    #exit 0
fi




# add the read only file system to fstab
#ROOTTYPE=$(/lib/udev/vol_id -t ${ROOT})
ROOTTYPE=$(cat /proc/mounts|grep ${ROOT}|cut -d' ' -f3)
ROOTOPTIONS=$(cat /proc/mounts|grep ${ROOT}|cut -d' ' -f4)
echo ${ROOT} /ro $ROOTTYPE $ROOTOPTIONS 0 0 >>/aufs/etc/fstab


# S22mount on debian systems is not mounting  /ro correctly after boot
# add to rc.local to correct what you see from df
#replace last case of exit with #exit
cat /aufs/ro/etc/rc.local|sed 's/\(.*\)exit/\1\#exit/' >/aufs/etc/rc.local  
echo mount -f  /ro >>/aufs/etc/rc.local 

# add back the root file system. mtab seems to be created by one of the init proceses. 
echo "echo aufs / aufs rw,xino=/rw/.aufs.xino,br:/rw=rw:/ro=ro 0 0 >>/etc/mtab" >>/aufs/etc/rc.local
echo "echo aufs-tmpfs /rw tmpfs rw 0 0 >>/etc/mtab" >>/aufs/etc/rc.local 
echo exit 0 >>/aufs/etc/rc.local 

#  Copyright 2008 Joaquin I. Bogado Garcia
#fix para apparmor, se desactiva y listo ( From the lethe project. )
[ -e /scripts/init-bottom/_apparmor ] && rm /scripts/init-bottom/_apparmor
[ -e /aufs/etc/init.d/apparmor ] && rm /aufs/etc/init.d/apparmor


#build remountrw
echo \#!/bin/sh >/aufs/bin/remountrw
echo mount -o remount,rw ${ROOT} >>/aufs/bin/remountrw
chmod 0700 /aufs/bin/remountrw

#build remountro
echo \#!/bin/sh >/aufs/bin/remountro
echo mount -o remount,ro ${ROOT} >>/aufs/bin/remountro
chmod 0700 /aufs/bin/remountro

# This should drop to a shell. (rewrite)
if [ "0$aufsdebug" -eq 1 ]; then
    echo
    echo "   root-aufs debug:    mount --move /aufs ${rootmnt} "
    echo 
    echo '   root-aufs debug:   init will stop here.   '
    echo  
    exit 0
fi

mount --move /aufs ${rootmnt}

exit 0

Depois precisamos alterar as permissões para este arquivo:

chmod 0755 /etc/initramfs-tools/scripts/init-bottom/rootaufs

Etapa 4. Alterando o GRUB2.

cat /etc/grub.d/10_linux|sed  s/'linux_entry "${OS}" "${version}" false'/'linux_entry "RO: ${OS}" "${version}" false'/ |sed  s/'"${GRUB_CMDLINE_LINUX} ${GRUB_CMDLINE_EXTRA} ${GRUB_CMDLINE_LINUX_DEFAULT}"'/'"${GRUB_CMDLINE_LINUX} ${GRUB_CMDLINE_EXTRA} ${GRUB_CMDLINE_LINUX_DEFAULT} aufs=tmpfs"'/ >/etc/grub.d/06_custom

sed -i.orig -e \
"/{GRUB_DISABLE_RECOVERY}\" != \"xtrue\" ]; then/s/^.*$/    \
if [ 0 ]; then/" \
/etc/grub.d/06_custom


sed -i.orig -e \
"/in_submenu=:/s/^.*$/    \
/" \
/etc/grub.d/06_custom

sed -i.orig -e \
"/\"Previous Linux versions/s/^.*$/    \
echo ''/" \
/etc/grub.d/06_custom

rm /etc/grub.d/06_custom.orig

chmod 755 /etc/grub.d/06_custom

update-grub
update-initramfs -u
BBK
fonte
11
Obrigado ... Acho que estou entendendo agora como o Aufs pode ser usado para proteger a unidade flash. Eu ainda estou deixando de entender por que LVM, mas sua resposta é o melhor até agora, e não parece que há uma melhor solução neste momento
Galets
Com o LVM no pen drive, será mais fácil mover o sistema para outro pen drive no futuro.
BBK
Meu objetivo era apenas dd para outro flash
galets
Só para esclarecer o meu último comentário: Meu plano era apenas para dd One Flash para outro e mantê-lo no cofre, no caso de eu precisar dele para a recuperação
galets
Caso você precise copiar todo o sistema para outra unidade flash, mas será um pouco menor (ou maior, por que espaço na cintura), o que você fará? dd não vai ajudar. Portanto, o LVM (ou algo parecido) é o futuro dos sistemas * nix; será mais fácil manter o seu sistema no futuro.
BBK
1

Quero fazer a mesma pergunta e fazer exatamente a mesma coisa. Esta resposta ajuda?

Como otimizar o SO para SSDs?

esses links também parecem muito úteis, embora eu não possa garantir a precisão das informações

http://bernaerts.dyndns.org/linux/53-debian-server-compact-flash

http://www.chrisnewland.com/using-linux-tmpfs-to-reduce-disk-writes-for-power-saving-and-longer-cf-lifespan-186

Acho que depois de fazer essas coisas, você precisará monitorar para ver o que seus aplicativos específicos estão gravando na unidade flash de inicialização. Existe alguma maneira fácil de ver o que está gravando em uma determinada unidade?

Amir
fonte