k3llar / python_threads_examples

Компиляция Cython

1. Для компиляции cython-скриптов в Linux вам понадобится установить некоторые зависимости

   apt install build-essential
   # поменяйте на используемую вами версию
   apt install python3.8-dev
   pip3 install cython --upgrade

2. генерируем C-файл

   cython3 -D --embed -3 -o <scriptname>.c <scriptname>.pyx

3. компилируем бинарник

   # поменяйте на используемую вами версию
   gcc -Os -I /usr/include/python3.8 -o <scriptname> <scriptname>.c -lpython3.8 -lpthread -lm -lutil -ldl

4. можно запускать

   ./<scriptname>

Установка контейнеров для MapReduce

1. Скачать docker-compose

   git clone https://github.com/m-semnani/bd-infra.git
   cd bd-infra

2. Установить контейнеры

   docker-compose up -d

3. Зайти на NameNode

   docker exec -it namenode bash

4. Установить Python на NameNode

   apt install python