Check MADlib installation again

[ppKrauss]

Check if nowadays (for Ubuntu and PostgreSQL v14) installation procedure is valid

• https://stackoverflow.com/a/43626061/287948
• https://gist.github.com/tqyq/955fcf2e505894d59db6b0e771cfe3e8
• https://cwiki.apache.org/confluence/display/MADLIB/Installation+Guide

[crebollobr]

Consegui instalar como docker

https://github.com/jonixis/docker-postgres-madlib

psql -p 5439 -h localhost -U postgres -d postgres

docker exec -ti 805938807ddf bash
su - postgres
psql

[crebollobr]

Vesrões postgres suportadas
10, 11, 12, 8.4, 9.0, 9.1, 9.2, 9.3, 9.4, 9.5, 9.6

nós temos:
12,13,14 e 15

[crebollobr]

A instalação por código fonte depende da bliblioteca plpython2 que na versão 12 já estava descontinuado no ubuntu
a versão docker deve ter feito uma compilação do postgresql com plpython2

[crebollobr]

A versão docker era 1.16.
Atualizei a versão com uma imagem de teste. Para colocar em produção precisaria melhorar a solução.
Comandos para configurar um banco de dado com madlib

docker exec -ti 475ca1e5527d bash
su - postgres
psql 
create database lixo01;
/usr/local/madlib/bin/madpack -s matlib -p postgres -c postgres@localhost/lixo01 install

externamente conectar com:

psql -p 5439 -h localhost -U postgres -d postgres

[crebollobr]

A biblioteca evoluiu. Ainda vai precisar dela? pode fazer uma poc com a nova versão?

https://madlib.apache.org/

[crebollobr]

wget https://dist.apache.org/repos/dist/release/madlib/2.1.0/apache-madlib-2.1.0-src.tar.gz
tar xzvf apache-madlib-2.1.0-src.tar.gz
cd apache-madlib-2.1.0-src/
mkdir build
cd build
cmake ../
make
sudo make install

sudo su -
su - postgres 
source /usr/local/CONDA/env.sh
conda create -n py2 python=2.7
export PATH=/usr/lib/postgresql/14/bin/:$PATH
conda activate py2
cd /usr/local/madlib/bin
bash -x ./madpack -p postgres -c postgres@localhost/teste install

psql teste

DROP TABLE IF EXISTS flags;
CREATE TABLE flags (
    id INTEGER,
    name TEXT,
    landmass INTEGER,
    zone INTEGER,
    area INTEGER,
    population INTEGER,
    language INTEGER,
    colours INTEGER,
    mainhue TEXT
);
INSERT INTO flags VALUES
(1, 'Argentina', 2, 3, 2777, 28, 2, 2, 'blue'),
(2, 'Australia', 6, 2, 7690, 15, 1, 3, 'blue'),
(3, 'Austria', 3, 1, 84, 8, 4, 2, 'red'),
(4, 'Brazil', 2, 3, 8512, 119, 6, 4, 'green'),
(5, 'Canada', 1, 4, 9976, 24, 1, 2, 'red'),
(6, 'China', 5, 1, 9561, 1008, 7, 2, 'red'),
(7, 'Denmark', 3, 1, 43, 5, 6, 2, 'red'),
(8, 'Greece', 3, 1, 132, 10, 6, 2, 'blue'),
(9, 'Guatemala', 1, 4, 109, 8, 2, 2, 'blue'),
(10, 'Ireland', 3, 4, 70, 3, 1, 3, 'white'),
(11, 'Jamaica', 1, 4, 11, 2, 1, 3, 'green'),
(12, 'Luxembourg', 3, 1, 3, 0, 4, 3, 'red'),
(13, 'Mexico', 1, 4, 1973, 77, 2, 4, 'green'),
(14, 'Norway', 3, 1, 324, 4, 6, 3, 'red'),
(15, 'Portugal', 3, 4, 92, 10, 6, 5, 'red'),
(16, 'Spain', 3, 4, 505, 38, 2, 2, 'red'),
(17, 'Sweden', 3, 1, 450, 8, 6, 2, 'blue'),
(18, 'Switzerland', 3, 1, 41, 6, 4, 2, 'red'),
(19, 'UK', 3, 4, 245, 56, 1, 3, 'red'),
(20, 'USA', 1, 4, 9363, 231, 1, 3, 'white'),
(21, 'xElba', 3, 1, 1, 1, 6, NULL, NULL),
(22, 'xPrussia', 3, 1, 249, 61, 4, NULL, NULL);

DROP TABLE IF EXISTS output_table;
SELECT madlib.balance_sample(
                              'flags',             -- Source table
                              'output_table',      -- Output table
                              'mainhue');          -- Class column
SELECT * FROM output_table ORDER BY mainhue, name;


teste=# SELECT * FROM output_table ORDER BY mainhue, name;
 __madlib_id__ | id |   name    | landmass | zone | area | population | language | colours | mainhue 
---------------+----+-----------+----------+------+------+------------+----------+---------+---------
             3 |  1 | Argentina |        2 |    3 | 2777 |         28 |        2 |       2 | blue
             2 |  2 | Australia |        6 |    2 | 7690 |         15 |        1 |       3 | blue
             5 |  8 | Greece    |        3 |    1 |  132 |         10 |        6 |       2 | blue
             1 |  9 | Guatemala |        1 |    4 |  109 |          8 |        2 |       2 | blue
             4 | 17 | Sweden    |        3 |    1 |  450 |          8 |        6 |       2 | blue
            15 |  4 | Brazil    |        2 |    3 | 8512 |        119 |        6 |       4 | green
            14 |  4 | Brazil    |        2 |    3 | 8512 |        119 |        6 |       4 | green
            13 |  4 | Brazil    |        2 |    3 | 8512 |        119 |        6 |       4 | green
            12 |  4 | Brazil    |        2 |    3 | 8512 |        119 |        6 |       4 | green
            11 | 11 | Jamaica   |        1 |    4 |   11 |          2 |        1 |       3 | green
             7 |  3 | Austria   |        3 |    1 |   84 |          8 |        4 |       2 | red
             9 |  7 | Denmark   |        3 |    1 |   43 |          5 |        6 |       2 | red
             8 | 15 | Portugal  |        3 |    4 |   92 |         10 |        6 |       5 | red
            10 | 16 | Spain     |        3 |    4 |  505 |         38 |        2 |       2 | red
             6 | 19 | UK        |        3 |    4 |  245 |         56 |        1 |       3 | red
            16 | 10 | Ireland   |        3 |    4 |   70 |          3 |        1 |       3 | white
            17 | 20 | USA       |        1 |    4 | 9363 |        231 |        1 |       3 | white
            18 | 20 | USA       |        1 |    4 | 9363 |        231 |        1 |       3 | white
            19 | 20 | USA       |        1 |    4 | 9363 |        231 |        1 |       3 | white
            20 | 20 | USA       |        1 |    4 | 9363 |        231 |        1 |       3 | white
(20 rows)

[crebollobr]

Todo: documentar

[crebollobr]

Pode apagar o container?

[crebollobr]

Vou apagar o container, não precisamos mais