FOSSology - Install from Source のススメ 1

Size: px

Start display at page:

Download "FOSSology - Install from Source のススメ 1"

もえりこのえ
4 years ago
Views:

1 FOSSology - Install from Source のススメ 1

2 about me Norio Kobota - 保規 In house Acts. an OSPO(like) member of Sony a Network / Security Software Engineer (past) SysAdmin Open Source Acts. OpenChain Japan Working Group member ( (past) html5j ( (past) mod_websocket => mod_wstunnel, lighttpd ( 2

3 Motivation OpenChain JWGで SPDX 及びSPDX-Liteというソフトウェアの構成管理メタデータ利の推進 FOSSologyでは SPDX fileの成が可能 SPDX-Lite 吐かせたいですよね HEAD 追っかけてsend prしたいですよね 3

4 今お話しすることソースコードからインストールする順各インストールスクリプトが何をしているか Raspi3 / Raspbianにインストールする際のdiff 実際の動作インストールプロセスと構成を理解しどのあたりのコードを読めば feature Contribution などが出来そうか 4

5 Check the Install Script の前にメーリングリストや git(hub) Web 上のドキュメントを眺めてみます 5

6 branching model 正直わからんですざっくり眺めてみたところでは適当なタイミングでmasterから fork send-prもmaster branchにするのかなというイメージでいます今回は開発者向けWiki < からまずは sourceをdownloadせよと書かれておりそのdefault branchがmasterなのでここが develop HEADだと思って以降の話を進めます情報求む 6

7 install from source < 1. # utils/fo-cleanold ( もし古いFOSSologyがinstallされていたら ) 2. # utils/fo-installdeps 3. # make 4. # make install 5. # /usr/local/lib/fossology/fo-postinstall 7

8 1. fo-installdeps < rootで実しているか lsb_releaseコマンドがあるかチェックした上で lsb_releaseコマンドを利してディストリビューションとバージョン ( コードネーム ) を取得 build time, run timeに必要な依存 packagesのインストール各ディストリビューションごとにcase 分け ( ここなんとかしたいですね ) case "$DISTRO" in Debian Ubuntu) echo "DB: Installing build essential..." apt-get $YesOpt install \ libmxml-dev curl libxml2-dev libcunit1-dev \ build-essential libtext-template-perl subversion rpm librpm-dev libmagic-dev libglib2.0 libboost-regex-dev libboost-program-options-dev case "$CODENAME" in xenial stretch) apt-get $YesOpt install php-mbstring php7.0-xml php7.0-zip;; buster) apt-get $YesOpt install php-mbstring php7.3-xml php7.3-zip;; bionic) apt-get $YesOpt install php-mbstring php7.2-xml php7.2-zip;; sid) apt-get $YesOpt install php-mbstring php-xml php-zip;; 8

9 2. make build-essential が install されていない環境では install が必要ですインストール時の各種環境変数などを基に 1. templateから設定ファイルを成 install/fo-postinstall.in -> fo-postinstall defconf/db.conf.in -> Db.conf (postgresql access ) defconf/fossology.conf.in -> fossology.conf 2. 初期 DB 構築スクリプトの成 psql 利初期 databaseを構築するためのbash scriptなどの成 3. FOSSologyソースコードのbuild src/copyright, src/nomos など src 以下機能 module 毎にdir 分割 backend 実装はC frontendはphpが殆どで若 js C++/python 等はtestで利 9

10 3. make install installの過程で phpのcomposer(package manager)< が必要 ( 何故 depsにってない? ) php versionに応じたcomposerをinstallしておくこと NOTE: util/install_composer.shが存在はするが既にcomposer 側のgithub repo addrなどと乖離しており動かない素直に利しているphp versionに応じたcomposerをapt, yumなどでれるのがよい 10

11 企業ユーザ向け TIPS behind proxy の場合 composer が利する proxy 設定を正しくれておく必要がある < $ export HTTP_PROXY= $ export HTTP_PROXY_REQUEST_FULLURI=1 $ export HTTPS_PROXY= $ export HTTPS_PROXY_REQUEST_FULLURI=0 $ sudo -E... OR # visudo Defaults env_keep="http_proxy HTTP_PROXY_REQUEST_FULLURI HTTPS_PROXY HTTPS_PROXY_REQUEST_FULLURI " composer が正しく動いているかのチェックは以下 $ composer diagnose 11

12 4. fo-postinstall fossy:fossy ユーザグループの作成初期 databaseの作成その他 make 時に作成された初期設定スクリプトの実 initd 登録など 12

13 0. fo-cleanold Update したい場合に古い FOSSology を消し去る script. apt などでれた依存 packages は消さないので完全に消し去りたい場合はで apt remove してください設定ファイル群はバックアップが取られますただし obsoluted な v0.9.0 以前は消されます実際にバックアップされるのは /usr/local/share/fossology/{agent,dbconnect,repository}/*.conf /etc/default/fossology あたりを mktemp -d /tmp/fossology-config.xxxxxx へ 13

14 0. fo-cleanold 続き 1. FOSSology で利される files/dir が削除されます /usr/local/{bin, include, lib, share}/ /usr/local/etc/fossology/ 2. Database も drop されます # echo 'drop database fossology' psql 3. FOSSology 解析結果 repo が remove されますデフォルトだと /srv/fossology/repository が repo 本体 # rm -fr /srv/fossology 4. user/group が削除されます # userdel -r fossy # groupdel fossy 14

15 その他チューニング < mail notification FOSSologyは特にMTAをinstallしたりしないので必要な場合は別途セットアップしておくこと PostfixとかでOK shared memを増やす postgresqlのtuningの為のtipsが簡単に記載されてます詳細は < 参照のこと postgresqlの設定取り扱うファイルサイズ上限や postgresqlのuser authなどの設定 php, apache の設定 POST 可能なファイルサイズ上限 frontend URL などの設定 15

16 install to raspi3 注意点 2 つ 1. master HEAD の fo-installdeps に bug 既に close されてしまっているけど勿論直ってないです < 実際にりない pkg は以下 libboost-filesystem-dev -> libboost-system-dev libssl-dev libjsoncpp-dev libjson-c-dev 2. phpとpostgresqlのバージョン Raspbian GNU/Linux 10 (buster) では以下がデフォルト php: 7.3 postgresql: 11 16

17 raspi3 performance freertos 解凍型 zip 約 18MB 解凍後約 11000ファイル unpack 約 14 分以下並列動作 copyright 抽出約 4 分 mimetype 判別約 14 分 monk - 特定パターンマッチングによるライセンス判別約 13 分 nomos - regex によるパターンマッチング約 3h 17

18 Thanks Marp for VS Code < 18

Helix Swarm2018.1インストール手順

Helix Swarm2018.1インストール手順 2018 Helix Swarm2018.1 インストール手順パッケージインストール編目次はじめに... 2 インストールの流れ... 2 1. インストール準備... 3 1.1 リポジトリ設定の追加... 3 1.2 GPG キー ( 公開鍵 ) インストール... 4 1.3 EPEL パッケージのインストール... 4 2. Helix Swarm/ オプショナルパッケージのインストール...