Migrate to a monorepo structure (#2909)

packages/twenty-docker/dev/Makefile

@@ -0,0 +1,69 @@
+build:
+	@docker compose down 
+	rm -rf ../../front/node_modules
+	rm -rf ../../server/node_modules
+	rm -rf ../../docs/node_modules
+	@docker volume rm twenty_node_modules_front > /dev/null 2>&1 || true
+	@docker volume rm twenty_node_modules_server > /dev/null 2>&1 || true
+	@docker volume rm twenty_node_modules_docs > /dev/null 2>&1 || true
+	@docker compose build
+
+provision-postgres-docker:
+	@docker stop twenty_postgres || true
+	@docker rm twenty_postgres || true
+	@docker volume rm twenty_db_data || true
+	@docker compose up --build postgres -d
+
+provision-postgres-macos-arm:
+	sh ./scripts/setup-postgres-macos-arm.sh
+
+provision-postgres-macos-intel:
+	sh ./scripts/setup-postgres-macos-intel.sh
+
+provision-postgres-linux:
+	sh ./scripts/setup-postgres-linux.sh
+
+up:
+	@docker compose up -d
+
+down:
+	@docker compose down -v
+
+sh:
+	@docker compose exec twenty-dev sh
+
+front-start:
+	@docker compose exec twenty-dev sh -c "cd ./front && yarn start"
+
+front-lint:
+	@docker compose exec twenty-dev sh -c "cd ./front && yarn lint"
+
+front-test:
+	@docker compose exec twenty-dev sh -c "cd ./front && yarn test"
+
+front-coverage:
+	@docker compose exec twenty-dev sh -c "cd ./front && yarn coverage"
+
+front-graphql-generate:
+	@docker compose exec twenty-dev sh -c "cd ./front && yarn graphql:generate"
+
+front-storybook:
+	@docker compose exec twenty-dev sh -c "cd ./front && yarn storybook:dev"
+
+server-start:
+	@docker compose exec twenty-dev sh -c "cd /app/server && yarn start:dev"
+
+server-database-init:
+	@docker compose exec twenty-dev sh -c "cd /app/server && yarn database:init"
+
+server-database-setup:
+	@docker compose exec twenty-dev sh -c "cd /app/server && yarn database:setup"
+
+server-database-migrate:
+	@docker compose exec twenty-dev sh -c "cd /app/server && yarn database:migrate"
+
+server-database-seed:
+	@docker compose exec twenty-dev sh -c "cd /app/server && yarn database:seed"
+
+server-database-reset:
+	@docker compose exec twenty-dev sh -c "cd /app/server && yarn database:reset"

packages/twenty-docker/dev/docker-compose.yml

@@ -0,0 +1,42 @@
+version: "3.9"
+services:
+  twenty-dev:
+    build: 
+      context: ../..
+      dockerfile: ./infra/dev/twenty-dev/Dockerfile
+    ports:
+      - "3000:3000"
+      - "3001:3001"
+      - "6006:6006"
+    volumes:
+      - ../..:/app
+      - /app/front/node_modules
+      - /app/server/node_modules
+    depends_on:
+      - postgres
+  twenty-docs:
+    build:
+      context: ../..
+      dockerfile: ./infra/dev/twenty-docs/Dockerfile
+    ports:
+      - "5001:5001"
+    volumes:
+      - ../../docs:/app/docs
+      - twenty_node_modules_docs:/app/docs/node_modules
+  postgres:
+    container_name: twenty_postgres
+    build: ./postgres
+    volumes:
+    - twenty_db_data:/var/lib/postgresql/data
+    environment:
+      - POSTGRES_USER=twenty
+      - POSTGRES_PASSWORD=twenty
+      - POSTGRES_DB=default
+    ports:
+      - "5432:5432"
+volumes:
+  twenty_db_data:
+    name: twenty_db_data
+  twenty_node_modules_front:
+  twenty_node_modules_server:
+  twenty_node_modules_docs:

packages/twenty-docker/dev/postgres/Dockerfile

@@ -0,0 +1,35 @@
+ARG PG_MAIN_VERSION=15.5
+
+FROM postgres:${PG_MAIN_VERSION}-bullseye as postgres
+
+ARG PG_MAIN_VERSION=15
+ARG PG_GRAPHQL_VERSION=1.4.2
+ARG WRAPPERS_VERSION=0.2.0
+ARG TARGETARCH
+
+RUN set -eux; \
+    ARCH="$(dpkg --print-architecture)"; \
+    case "${ARCH}" in \
+       aarch64|arm64) \
+         TARGETARCH='arm64'; \
+         ;; \
+       amd64|x86_64) \
+         TARGETARCH='amd64'; \
+         ;; \
+       *) \
+         echo "Unsupported arch: ${ARCH}"; \
+         exit 1; \
+         ;; \
+    esac;
+
+RUN apt update && apt install curl -y
+
+# Install precompiled pg_graphql extensions
+RUN curl -L "https://github.com/supabase/pg_graphql/releases/download/v${PG_GRAPHQL_VERSION}/pg_graphql-v${PG_GRAPHQL_VERSION}-pg${PG_MAIN_VERSION}-${TARGETARCH}-linux-gnu.deb" -o pg_graphql.deb
+RUN dpkg --install pg_graphql.deb
+
+# Install precompiled supabase wrappers extensions
+RUN curl -L "https://github.com/supabase/wrappers/releases/download/v${WRAPPERS_VERSION}/wrappers-v${WRAPPERS_VERSION}-pg${PG_MAIN_VERSION}-${TARGETARCH}-linux-gnu.deb" -o wrappers.deb
+RUN dpkg --install wrappers.deb
+
+COPY init.sql /docker-entrypoint-initdb.d/

packages/twenty-docker/dev/postgres/init.sql

@@ -0,0 +1,10 @@
+SELECT 'CREATE DATABASE "default"'
+WHERE NOT EXISTS (SELECT FROM pg_database WHERE datname = 'default')\gexec
+
+SELECT 'CREATE DATABASE "test"'
+WHERE NOT EXISTS (SELECT FROM pg_database WHERE datname = 'test')\gexec
+
+SELECT 'CREATE USER twenty PASSWORD ''twenty'''
+WHERE NOT EXISTS (SELECT FROM pg_user WHERE usename = 'twenty')\gexec
+
+SELECT 'ALTER ROLE twenty superuser'\gexec

packages/twenty-docker/dev/scripts/setup-postgres-linux.sh

@@ -0,0 +1,79 @@
+#!/bin/bash
+
+# Colors
+RED=31
+GREEN=32
+BLUE=34
+
+# Function to display colored output
+function echo_header {
+    COLOR=$1
+    MESSAGE=$2
+    echo -e "\e[${COLOR}m\n=======================================================\e[0m"
+    echo -e "\e[${COLOR}m${MESSAGE}\e[0m"
+    echo -e "\e[${COLOR}m=======================================================\e[0m"
+}
+
+# Function to handle errors
+function handle_error {
+    echo_header $RED "Error: $1"
+    exit 1
+}
+
+cat << "EOF"
+@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
+@@@@@@@#*+=================@@@@@%*+=========++*%@@@@@@@
+@@@@#-                   .+@@%=.                .+@@@@@
+@@@-                   .*@@%-                     .#@@@
+@@=     .=+++++++++++*#@@@=       -++++++++++-      %@@
+@@.     %@@@@@@@@@@@@@@@+       =%@@@@@@@@@@@@=     +@@
+@@.    .@@@@@@@@@@@@@@+.      -%@@@@@@@@@@@@@@+     +@@
+@@.    .@@@@@@@@@@@@*.      -#@@#:=@@@@@@@@@@@=     +@@
+@@      @@@@@@@@@@#:      :#@@#:  -@@@@@@@@@@@=     +@@
+@@#====#@@@@@@@@#-      .*@@@=    -@@@@@@@@@@@=     +@@
+@@@@@@@@@@@@@@%-      .*@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@@@@@@@@%=       +@@@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@@@@@@@+       =@@@@@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@@@@@+.      -%@@@@@@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@@@*.      -%@@@@@@@@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@#:      :#@@@@@@@@@@@@@#     -@@@@@@@@@@@+     +@@
+@@@#:      :#@@@@@@@@@@@@@@@#     :@@@@@@@@@@@=     +@@
+@@=       :+*+++++++++++*%@@@.     :+++++++++-      %@@
+@@                       :@@@%.                   .#@@@
+@@-                      :@@@@@+:               .+@@@@@
+@@@#+===================+%@@@@@@@%*++=======++*%@@@@@@@
+@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
+EOF
+
+echo_header $BLUE "                    DATABASE SETUP"
+
+PG_MAIN_VERSION=15
+PG_GRAPHQL_VERSION=1.3.0
+TARGETARCH=$(dpkg --print-architecture)
+
+# Install PostgresSQL
+echo_header $GREEN "Step [1/4]: Installing PostgreSQL..."
+sudo sh -c 'echo "deb http://apt.postgresql.org/pub/repos/apt $(lsb_release -cs)-pgdg main" > /etc/apt/sources.list.d/pgdg.list'
+wget -qO- https://www.postgresql.org/media/keys/ACCC4CF8.asc | sudo tee /etc/apt/trusted.gpg.d/pgdg.asc &>/dev/null
+sudo apt update -y || handle_error "Failed to update package list."
+sudo apt install -y postgresql-$PG_MAIN_VERSION postgresql-contrib || handle_error "Failed to install PostgreSQL."su
+sudo apt install -y curl || handle_error "Failed to install curl."
+
+# Install pg_graphql extensions
+echo_header $GREEN "Step [2/4]: Installing GraphQL for PostgreSQL..."
+curl -L https://github.com/supabase/pg_graphql/releases/download/v$PG_GRAPHQL_VERSION/pg_graphql-v$PG_GRAPHQL_VERSION-pg$PG_MAIN_VERSION-$TARGETARCH-linux-gnu.deb -o pg_graphql.deb || handle_error "Failed to download pg_graphql package."
+sudo dpkg --install pg_graphql.deb || handle_error "Failed to install pg_graphql package."
+rm pg_graphql.deb
+
+# Start postgresql service
+echo_header $GREEN "Step [3/4]: Starting PostgreSQL service..."
+if sudo service postgresql start; then
+    echo "PostgreSQL service started successfully."
+else
+    handle_error "Failed to start PostgreSQL service."
+fi
+
+# Run the init.sql to setup database
+echo_header $GREEN "Step [4/4]: Setting up database..."
+cp ./postgres/init.sql /tmp/init.sql
+sudo -u postgres psql -f /tmp/init.sql || handle_error "Failed to execute init.sql script."

packages/twenty-docker/dev/scripts/setup-postgres-macos-arm.sh

@@ -0,0 +1,108 @@
+#!/bin/bash
+
+# Colors
+RED=31
+GREEN=32
+BLUE=34
+
+# Function to display colored output
+function echo_header {
+    COLOR=$1
+    MESSAGE=$2
+    echo -e "\e[${COLOR}m\n=======================================================\e[0m"
+    echo -e "\e[${COLOR}m${MESSAGE}\e[0m"
+    echo -e "\e[${COLOR}m=======================================================\e[0m"
+}
+
+# Function to handle errors
+function handle_error {
+    echo_header $RED "Error: $1"
+    exit 1
+}
+
+cat << "EOF"
+@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
+@@@@@@@#*+=================@@@@@%*+=========++*%@@@@@@@
+@@@@#-                   .+@@%=.                .+@@@@@
+@@@-                   .*@@%-                     .#@@@
+@@=     .=+++++++++++*#@@@=       -++++++++++-      %@@
+@@.     %@@@@@@@@@@@@@@@+       =%@@@@@@@@@@@@=     +@@
+@@.    .@@@@@@@@@@@@@@+.      -%@@@@@@@@@@@@@@+     +@@
+@@.    .@@@@@@@@@@@@*.      -#@@#:=@@@@@@@@@@@=     +@@
+@@      @@@@@@@@@@#:      :#@@#:  -@@@@@@@@@@@=     +@@
+@@#====#@@@@@@@@#-      .*@@@=    -@@@@@@@@@@@=     +@@
+@@@@@@@@@@@@@@%-      .*@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@@@@@@@@%=       +@@@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@@@@@@@+       =@@@@@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@@@@@+.      -%@@@@@@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@@@*.      -%@@@@@@@@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@#:      :#@@@@@@@@@@@@@#     -@@@@@@@@@@@+     +@@
+@@@#:      :#@@@@@@@@@@@@@@@#     :@@@@@@@@@@@=     +@@
+@@=       :+*+++++++++++*%@@@.     :+++++++++-      %@@
+@@                       :@@@%.                   .#@@@
+@@-                      :@@@@@+:               .+@@@@@
+@@@#+===================+%@@@@@@@%*++=======++*%@@@@@@@
+@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
+EOF
+
+echo_header $BLUE "                    DATABASE SETUP"
+
+PG_MAIN_VERSION=15
+PG_GRAPHQL_VERSION=1.3.0
+CARGO_PGRX_VERSION=0.9.8
+
+current_directory=$(pwd)
+
+# Install PostgresSQL
+echo_header $GREEN "Step [1/4]: Installing PostgreSQL..."
+
+brew reinstall postgresql@$PG_MAIN_VERSION
+
+# Install pg_graphql extensions
+echo_header $GREEN "Step [2/4]: Installing GraphQL for PostgreSQL..."
+
+# Uninstall existing Rust installation if found
+existing_rust_path=$(which rustc)
+if [ -n "$existing_rust_path" ]; then
+    echo "Uninstalling existing Rust installation..."
+    rm -rf "$existing_rust_path"
+fi
+
+# To force a reinstall of cargo-pgrx, pass --force to the command below
+curl  https://sh.rustup.rs -sSf | sh
+source "$HOME/.cargo/env"
+cargo install --locked cargo-pgrx@$CARGO_PGRX_VERSION --force
+cargo pgrx init --pg$PG_MAIN_VERSION download
+
+# Create a temporary directory
+temp_dir=$(mktemp -d)
+cd "$temp_dir"
+
+curl -LJO https://github.com/supabase/pg_graphql/archive/refs/tags/v$PG_GRAPHQL_VERSION.zip || handle_error "Failed to download pg_graphql package."
+
+unzip pg_graphql-$PG_GRAPHQL_VERSION.zip
+
+[[ ":$PATH:" != *":/opt/homebrew/opt/postgresql@$PG_MAIN_VERSION/bin:"* ]] && PATH="/opt/homebrew/opt/postgresql@$PG_MAIN_VERSION/bin:${PATH}"
+
+cd "pg_graphql-$PG_GRAPHQL_VERSION"
+cargo pgrx install --release --pg-config /opt/homebrew/opt/postgresql@$PG_MAIN_VERSION/bin/pg_config
+
+# # Clean up the temporary directory
+echo "Cleaning up..."
+cd "$current_directory"
+rm -rf "$temp_dir"
+
+# Start postgresql service
+echo_header $GREEN "Step [3/4]: Starting PostgreSQL service..."
+
+
+if brew services start postgresql@$PG_MAIN_VERSION; then
+    echo "PostgreSQL service started successfully."
+else
+    handle_error "Failed to start PostgreSQL service."
+fi
+
+# Run the init.sql to setup database
+echo_header $GREEN "Step [4/4]: Setting up database..."
+cp ./postgres/init.sql /tmp/init.sql
+psql -f /tmp/init.sql -d postgres|| handle_error "Failed to execute init.sql script."

packages/twenty-docker/dev/scripts/setup-postgres-macos-intel.sh

@@ -0,0 +1,108 @@
+#!/bin/bash
+
+# Colors
+RED=31
+GREEN=32
+BLUE=34
+
+# Function to display colored output
+function echo_header {
+    COLOR=$1
+    MESSAGE=$2
+    echo -e "\e[${COLOR}m\n=======================================================\e[0m"
+    echo -e "\e[${COLOR}m${MESSAGE}\e[0m"
+    echo -e "\e[${COLOR}m=======================================================\e[0m"
+}
+
+# Function to handle errors
+function handle_error {
+    echo_header $RED "Error: $1"
+    exit 1
+}
+
+cat << "EOF"
+@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
+@@@@@@@#*+=================@@@@@%*+=========++*%@@@@@@@
+@@@@#-                   .+@@%=.                .+@@@@@
+@@@-                   .*@@%-                     .#@@@
+@@=     .=+++++++++++*#@@@=       -++++++++++-      %@@
+@@.     %@@@@@@@@@@@@@@@+       =%@@@@@@@@@@@@=     +@@
+@@.    .@@@@@@@@@@@@@@+.      -%@@@@@@@@@@@@@@+     +@@
+@@.    .@@@@@@@@@@@@*.      -#@@#:=@@@@@@@@@@@=     +@@
+@@      @@@@@@@@@@#:      :#@@#:  -@@@@@@@@@@@=     +@@
+@@#====#@@@@@@@@#-      .*@@@=    -@@@@@@@@@@@=     +@@
+@@@@@@@@@@@@@@%-      .*@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@@@@@@@@%=       +@@@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@@@@@@@+       =@@@@@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@@@@@+.      -%@@@@@@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@@@*.      -%@@@@@@@@@@@#     -@@@@@@@@@@@=     +@@
+@@@@@#:      :#@@@@@@@@@@@@@#     -@@@@@@@@@@@+     +@@
+@@@#:      :#@@@@@@@@@@@@@@@#     :@@@@@@@@@@@=     +@@
+@@=       :+*+++++++++++*%@@@.     :+++++++++-      %@@
+@@                       :@@@%.                   .#@@@
+@@-                      :@@@@@+:               .+@@@@@
+@@@#+===================+%@@@@@@@%*++=======++*%@@@@@@@
+@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
+EOF
+
+echo_header $BLUE "                    DATABASE SETUP"
+
+PG_MAIN_VERSION=15
+PG_GRAPHQL_VERSION=1.3.0
+CARGO_PGRX_VERSION=0.9.8
+
+current_directory=$(pwd)
+
+# Install PostgresSQL
+echo_header $GREEN "Step [1/4]: Installing PostgreSQL..."
+
+brew reinstall postgresql@$PG_MAIN_VERSION
+
+# Install pg_graphql extensions
+echo_header $GREEN "Step [2/4]: Installing GraphQL for PostgreSQL..."
+
+# Uninstall existing Rust installation if found
+existing_rust_path=$(which rustc)
+if [ -n "$existing_rust_path" ]; then
+    echo "Uninstalling existing Rust installation..."
+    rm -rf "$existing_rust_path"
+fi
+
+# To force a reinstall of cargo-pgrx, pass --force to the command below
+curl  https://sh.rustup.rs -sSf | sh
+source "$HOME/.cargo/env"
+cargo install --locked cargo-pgrx@$CARGO_PGRX_VERSION --force
+cargo pgrx init --pg$PG_MAIN_VERSION download
+
+# Create a temporary directory
+temp_dir=$(mktemp -d)
+cd "$temp_dir"
+
+curl -LJO https://github.com/supabase/pg_graphql/archive/refs/tags/v$PG_GRAPHQL_VERSION.zip || handle_error "Failed to download pg_graphql package."
+
+unzip pg_graphql-$PG_GRAPHQL_VERSION.zip
+
+[[ ":$PATH:" != *":/usr/local/opt/postgresql@$PG_MAIN_VERSION/bin:"* ]] && PATH="/usr/local/opt/postgresql@$PG_MAIN_VERSION/bin:${PATH}"
+
+cd "pg_graphql-$PG_GRAPHQL_VERSION"
+cargo pgrx install --release --pg-config /usr/local/opt/postgresql@$PG_MAIN_VERSION/bin/pg_config
+
+# # Clean up the temporary directory
+echo "Cleaning up..."
+cd "$current_directory"
+rm -rf "$temp_dir"
+
+# Start postgresql service
+echo_header $GREEN "Step [3/4]: Starting PostgreSQL service..."
+
+
+if brew services start postgresql@$PG_MAIN_VERSION; then
+    echo "PostgreSQL service started successfully."
+else
+    handle_error "Failed to start PostgreSQL service."
+fi
+
+# Run the init.sql to setup database
+echo_header $GREEN "Step [4/4]: Setting up database..."
+cp ./postgres/init.sql /tmp/init.sql
+psql -f /tmp/init.sql -d postgres|| handle_error "Failed to execute init.sql script."

packages/twenty-docker/dev/twenty-dev/Dockerfile

@@ -0,0 +1,21 @@
+FROM node:18.16-bullseye as twenty-dev
+
+COPY /../../packages /app/packages
+
+WORKDIR /app/front
+
+COPY ../../front/package.json .
+COPY ../../front/yarn.lock .
+RUN yarn install
+RUN npx playwright install-deps 
+
+WORKDIR /app/server
+
+COPY ../../server/package.json .
+COPY ../../server/yarn.lock .
+COPY ../../server/patches ./patches
+RUN yarn install
+
+WORKDIR /app
+
+CMD ["tail", "-f", "/dev/null"]

packages/twenty-docker/dev/twenty-docs/Dockerfile

@@ -0,0 +1,11 @@
+FROM node:18.16-bullseye as docs
+
+WORKDIR /app/docs
+
+COPY ../../docs/package.json .
+COPY ../../docs/yarn.lock .
+RUN yarn
+
+COPY ../../docs .
+
+CMD ["yarn", "start"]