DataWorks:個人開発環境から DataWorks イメージを作成する

Git によるクローン

git clone を使用して Python プロジェクトをクローンするには、VPC のパブリックネットワークアクセスを構成する必要があります。詳細については、「インターネット NAT ゲートウェイの構成」をご参照ください。

1. データ開発ページの左下隅にある アイコンをクリックしてターミナルを開きます。

2. ターミナルで、次のコマンドを実行してワークスペースフォルダに移動します。

   cd /mnt/workspace

3. ワークスペースフォルダに Git から Python プロジェクトをクローンします。

   # URL をご自身のリポジトリ URL に置き換えてください。
   git clone https://github.com/example/Example-Python.git

4. クローンした Python プロジェクトをインストールします。

   1. クローンした Python プロジェクトディレクトリに移動します。

      cd Example-Python

   2. Python プロジェクトをインストールします。

      pip install .

      /mnt/workspace/xxx>> pip install .
      Looking in indexes: https://mirrors.cloud.aliyuncs.com/pypi/simple
      Processing /mnt/workspace/xxx
        Installing build dependencies ... done
        Getting requirements to build wheel ... done
        Preparing metadata (pyproject.toml) ... done
      Requirement already satisfied: requests>=2.24.0 in /usr/local/lib/python3.11/site-packages (from my-python-lib==0.1) (2.32.3)
      Requirement already satisfied: numpy in /usr/local/lib/python3.11/site-packages (from my-python-lib==0.1) (1.26.4)
      Requirement already satisfied: charset-normalizer<4,>=2 in /usr/local/lib/python3.11/site-packages (from requests>=2.24.0->my-python-lib==0.1) (3.4.0)
      Requirement already satisfied: idna<4,>=2.5 in /usr/local/lib/python3.11/site-packages (from requests>=2.24.0->my-python-lib==0.1) (3.10)
      Requirement already satisfied: urllib3<3,>=1.21.1 in /usr/local/lib/python3.11/site-packages (from requests>=2.24.0->my-python-lib==0.1) (2.2.3)
      Requirement already satisfied: certifi>=2017.4.17 in /usr/local/lib/python3.11/site-packages (from requests>=2.24.0->my-python-lib==0.1) (2024.8.30)

プロジェクトのアップロード

1. ローカルの Python プロジェクトを 個人ディレクトリ > workspace ディレクトリにアップロードし、ターミナルを使用してプロジェクトフォルダに移動します。

   cd /mnt/workspace/"python_project_folder"

2. 次のコマンドを実行して Python プロジェクトをインストールします。

   pip install .

   /mnt/workspace/xxx>> pip install .
   Looking in indexes: https://mirrors.cloud.aliyuncs.com/pypi/simple
   Processing /mnt/workspace/xxx
     Installing build dependencies ... done
     Getting requirements to build wheel ... done
     Preparing metadata (pyproject.toml) ... done
   Requirement already satisfied: requests>=2.24.0 in /usr/local/lib/python3.11/site-packages (from my-python-lib==0.1) (2.32.3)
   Requirement already satisfied: numpy in /usr/local/lib/python3.11/site-packages (from my-python-lib==0.1) (1.26.4)
   Requirement already satisfied: charset-normalizer<4,>=2 in /usr/local/lib/python3.11/site-packages (from requests>=2.24.0->my-python-lib==0.1) (3.4.0)
   Requirement already satisfied: idna<4,>=2.5 in /usr/local/lib/python3.11/site-packages (from requests>=2.24.0->my-python-lib==0.1) (3.10)
   Requirement already satisfied: urllib3<3,>=1.21.1 in /usr/local/lib/python3.11/site-packages (from requests>=2.24.0->my-python-lib==0.1) (2.2.3)
   Requirement already satisfied: certifi>=2017.4.17 in /usr/local/lib/python3.11/site-packages (from requests>=2.24.0->my-python-lib==0.1) (2024.8.30)

プログラムのアップロード

1. ローカルの Python プログラムの圧縮パッケージを 個人ディレクトリ > workspace ディレクトリにアップロードします。その後、ターミナルを使用してパッケージを解凍し、Python のコンパイルパスを確認します。

   cat 'decompressed_python_project_name'/bin/pip

2. Python のコンパイルパスを作成します。

   # 確認した Python コンパイルパスを作成します。
   mkdir -p 'python_compile_path_found'

3. 解凍したフォルダを、ビルド時に Python が使用したコンパイルパスに移動します。

   mv 'decompressed_python_project_name' /'python_compile_path_found'

4. デフォルトの Python パッケージを、ご自身の Python プログラムに置き換えます。

   for src in idle3 pydoc3 python3 python3-config pip3; do \
       dst="$(echo "$src" | tr -d 3)"; \
       [ -s "/usr/local/bin/$src" ]; \
       [ ! -e "/usr/local/bin/$dst" ]; \
       mv /usr/local/bin/$dst /usr/local/bin/${dst}_bak
       ln -svT "python_compile_path_found/bin/$src" "/usr/local/bin/$dst"; \
   done