===== Tipy a triky =====


==== Úprava UTF-8 používajícího spřežky ====

  * použít program ''norm-utf8'':<file python norm-utf8>
#!/usr/bin/env python
 
import sys, unicodedata
 
if __name__ == '__main__': 
  if len(sys.argv) != 2:
    sys.exit(1)
 
  filename = sys.argv[1]
  f = open(filename, 'r')
  ori = unicode(f.read(), 'utf-8')
  res = unicodedata.normalize('NFC', ori).encode('utf-8')
  f.close
 
  print res,
</file>
  * anebo utilitu ''uconv'' pro převod do NFC z NFD<code>uconv -f utf8 -t utf8 -x nfc</code>

==== Odstranění BOM ====

<code>sed 's/^\xEF\xBB\xBF//'</code>nebo<code>tail --bytes=+4 text.txt</code>(pokud je BOM hned na začátku souboru)

==== Emacs ====

  * dlouhé řádky: ''M-x toggle-truncate-lines RET''

==== Triky pro práci v bashi ====

  * **Sežer první řádek souboru, pokud je prázdný**:<code>sed '1{/^$/d}'</code>
  * **Sežer poslední řádek souboru, pokud je prázdný**:<code>perl -i.bak -pe 'undef $/; s/\n\n$/\n/'</code>nebo<code>perl -i -pe "chomp if eof"</code>
  * **Všechna písmena v souboru na malá**:<code>
cat <file> | sed 's/[[:upper:]]*/\L&/g'</code>Pokud máme pouze ASCII, funguje i toto:<code>
cat <file> | tr '[:upper:]' '[:lower:]'</code>
  * **Najdi a seřaď podle času**:<code>
find ./ -name zprh0503 -printf "%T@ %Tc %p\n" | sort -n</code>
  * **Zobrazuj datum ve výpisu adresáře ve tvaru YYYY-MM-DD**:<code>env TIME_STYLE="long-iso"</code>(nefungují pak ale aliasy)
  * **Zjištění ''env'' u běžícího procesu**:
    * Nejdřív zjistit ''PID'':<code>
ps faxu | grep bonito</code>
    * Přečíst proměnné:<code>
cat /proc/$PID/environ | tr '\0' '\n' | sort</code>
  * **Grepni ''ANSI escape codes''** (třeba změnu barvy):<code>grep -P '\e\[7m \e\[27m'</code>grepne inverzní mezeru.
==== Perl ====

  * sežrání nového řádku v jednořádkovém programu:<code>perl -pe 'undef $/; s/\n/ /g'</code>
  * utf-8 z commandliny:<code>PERLIO=:utf8 perl -pe...</code>anebo někdy stačí<code>perl -C -pe...</code>
  * celý file na upcase:<code>perl -pe '$_=uc'</code>
  * první písmeno na upcase:<code>perl -C -pe 's/^(.)/\u$1/g'</code>
  * v náhradě regexu použít proměnnou z bashe (dvojité uvozovky a \1 místo $1 v regexu):<code>
for ff in *; do echo $ff; perl -i.bak -pe "s/(<doc) /\1 id=\"$ff\" /" $ff; done</code>
  * v dotazu použít sytémovou proměnnou:<code>
perl -i.sav -pe "s:($SYN2020_PREFIX):\1/versions/$mydate/syn2020:" options.json</code>
  * ''backreference'' - odkaz na regex použitý dříve v dotazu:<code>
perl -pe 's/([A-Z]{2})\1/$1$1$1/'</code>
  * nematchující ''backreference'' - zde se musí použít ''lookeahead'' a ''lookbehind''; **nezabírá pozici v regexu**:<code>
perl -pe 's/ V[psq][FIMN][PS].{3}([1-3]).{10}(?!\1)....V//g'</code>23-místný tag, ''(?!\1)'' znamená **nenásleduje \1** a pozice je přečtena teprve další tečkou.

==== Python ====

=== Vytvoření vlastní instalace ===

  * Vytvoří se podadresář, do kterého se zkopíruje základní instalace:<code>python3 -m venv local_python</code>
  * Upraví se ''.bashrc_profile'' nebo ''.profile'', aby obsahovaly správné hodnoty proměnných ''PATH'' a ''PYTHONPATH'':<code>
PATH=/home/skoumal/bin/local_python/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/games:/usr/local/games:/snap/bin:/usr/local/syn2020/bin:/usr/local/syn2020/xml2standoff:/home/skoumal/bin
PYTHONPATH=/home/skoumal/bin/local_python/lib/python3.10/site-packages</code>
  * Prostředí se musí aktivovat příkazem<code>source bin/local_python/bin/activate</code>před promptem se objeví ''%%(local_python)%%''
  * Moduly se instalují takto:<code>python -m pip install pandas</code>

=== Instalace pro MorphoDiTu ===

  * Potřebujeme ''python3.10''. Nemáme-li ho v systému, použijeme Davidův.
  * Environment vytvoříme v adresáři ''/usr/loca/cs_tagger''.<code>sudo bash -l
/cnk/common/tools/mambaforge/bin/python3.10 -m venv cs_tagger</code>
  * Adresáři ''/usr/local/cs_tagger'' změníme vlastníka a vyskočíme z roota.
  * Aktivujeme prostředí a nainstalujeme tensorflow2.12<code>source bin/activate
python -m pip install tensorflow==2.12</code>

=== Instalace tensorflow pro celý systém ===

S novějšímy pythony to nejde, pro MorphoDiTu je třeba udělat vlastní instalaci (viz výše).

  * Ve starších systémech fungoval tento postup:
<hidden>
    * Instalace pipem pro celý systém:<code>sudo -H pip[3] install ...</code>
    * Instalace knihoven pro MorphoDiTu
      * ''numpy'':<code>sudo -H pip3 install numpy</code>Pokud se to nepovede (typicky protože nemáme python3.7), je třeba stáhnout ''numpy-1.13.3'' a instalovat ručně:<code>python3 setup.py build -j 4 install</code>
      * ''tensorflow'':<code>sudo -H pip3 install tensorflow</code>Pokud se to nepovede, tak<code>sudo -H pip3 install tensorflow==1.14</code>
    * Instalace ''python3.7'' (a ''tensorflow''):<code>apt update
sudo apt install software-properties-common
sudo add-apt-repository ppa:deadsnakes/ppa
sudo apt update
sudo apt install python3.7
sudo -H python3 -m pip install --upgrade pip
sudo -H python3 -m pip install tensorflow</code>
    * Místo ''pip'' radši používat<code>sudo -H python3.7 -m pip install ...</code>
</hidden>
  * Současný postup:
    * Nainstalujeme ''python3'' a modul ''numpy''
<hidden>
    * Nainstalujeme ''pipx''
    * Jako root nainstalujeme moduly:<code>sudo bash -l
export PIPX_HOME=/usr/local; export PIPX_BIN_DIR=/usr/local/bin; pipx install tensorflow==2.12.0</code>
    * Do uživatelského ''.bashrc'' přidáme:<code>export PYTHONPATH="/usr/local/venvs:$PYTHONPATH"</code>
</hidden>
    * Jako root nainstalujeme moduly:<code>sudo bash -l
pip3 install tensorflow</code>Měl by se nainstalovat v ''/usr/local/lib/python3.10/dist-packages/''. Máme-li vyšší verzi pythonu, je třeba (asi) nainstalovat nižší.


==== LaTeX, PS, PDF ====

  * Konverze PS obrázku do PDF:<code>ps2pdf -dEPSCrop fig.ps</code>
  * Konverze PS obrázku do PNG:<code>
pstoimg -type png -crop a -trans -interlace -aaliastext -antialias nerad.ps</code>
  * Lokální proměnné v Emacsu, aby se kompilovalo PDF:<code>
%%% Local Variables: 
%%% TeX-PDF-mode: t
%%% TeX-master: t
%%% End:</code>
  * Posunutí nadpisu nahoru:<code>
\usepackage{titling}
\setlength{\droptitle}{-10em}
</code>
  * Zvětšení zrcadla u článku:<code>
\setlength{\topmargin}{-.5in}
\setlength{\textheight}{10.1in}
% \setlength{\textwidth}{6.5in}
% \setlength{\oddsidemargin}{0in}
% \setlength{\evensidemargin}{0in}
</code>
  * Mezery mezi odstavci:<code>
\setlength{\parskip}{0.25in}</code>
==== ShareLaTeX ====

  * Je třeba používat Chrome
  * ''keybindings'' musí být ''none''
  * Není vidět zdrojový text:
    - zkusit reload, návrat do seznamu projektů
    - vymazat cache v Chromu

==== Samba na windows ====

  * Přimountování:<code>
mount -t cifs //192.168.0.202/Public /mnt/cibulka/PUBLIC -o user=****,password=****,workgroup=UAMKCR,vers=1.0</code>v případě, že to nejde, je třeba zkusit ''user=DOMAIN/user'' a/nebo ''vers=2.0''.
  * Mountování ve ''fstab'' (s nastavením práv):<code>
//192.168.0.202/Public /mnt/cibulka/Public cifs rw,uid=1001,dir_mode=0777,file_mode=0777,user=****,password=****,workgroup=UAMKCR,vers=1.0 0 0</code>