package-and-test pipeline 簡介

1. 你在這里:
2. 極狐 Handbook
3. 極狐研發團隊
4. 極狐產品質量團隊
5. package-and-test pipeline 簡介

• 概述
• 安裝測試
• 步驟簡述
• 測試場景

概述

在Jihulab，安裝測試和集成測試是由 package-and-test 這條流水線來完成的，該流水線使用 docker in docker的方式來運行，按照如下的步驟：

1. 對容器里的 jihulab 實例進行配置。
2. 按照不同的測試場景進行額外的配置。
3. 運行對應的測試用例。

安裝測試

在jihulab，我們是把安裝測試分為不同的策略來處理：

1. 大版本的安裝： 我們會在每月大版本(如：15.5.0-jh)發布的時候安裝在 release 上并觸發對應的測試用例來進行測試。在每次大版本發布，將由 SRE 負責 自動打包并部署，隨后觸發 release 的安裝與 E2E 測試，pipeline 的維護將由 QA 負責。
2. 小版本的安裝： 我們會在月間的小版本(如:15.5.1-jh)發布的時候使用 nightly 來進行測試。在每次小版本發布，將由 SRE 負責觸發，pipeline 的維護將由 QA 負責。

步驟簡述

1. 對 jihulab 實例進行配置：
   • 寫入基礎的配置:

       gitlab_rails['gitlab_default_theme'] = 10 # Light Red Theme
       gitlab_rails['gitlab_disable_animations'] = true # Disable animations
       gitlab_rails['application_settings_cache_seconds'] = 0 # Settings cache expiry
       gitlab_rails['initial_root_password'] = '******' # Initial root password\" > /etc/gitlab/gitlab.rb;"`
     

   • 確定 jihulab 實例的容器的運行狀態

       docker inspect --format='{{json .State.Health.Status}}' gitlab-ee-1bc915a3
     

   • 配置 root 用戶的 Access Token

       docker cp /builds/gitlab-cn/quality/nightly/.gems/gems/gitlab-qa-8.8.0/support/data gitlab-ee-1bc915a3:/tmp/data-seeds
       docker exec gitlab-ee-1bc915a3 bash -c "gitlab-rails runner /tmp/data-seeds/admin_access_token_seed.rb
     

2. 按照不同的測試場景進行配置： 該步驟主要是用不同的測試場景的tag和場景配合進行配置，在上面的步驟中寫入額外的參數。
3. 運行對應的測試用例： 如果使用的測試場景為Test::Instance::Image，那么默認會運行所有的測試用例，我們可以使用不同的tag，如smoke和reliable進行有選擇的運行。

測試場景

任務名	場景	Omnibus config	tag
ee:cloud-activation	Test::Instance::Image	?	cloud_activation
ee:decomposition-multiple-db	Test::Instance::Image	decomposition_multiple_db	?
ee:elasticsearch	Test::Integration::Elasticsearch	?	?
ee:gitaly-cluster	Test::Integration::GitalyCluster	?	?
ee:group-saml	Test::Integration::GroupSAML	?	?
ee:instance	Test::Instance::Image	?	?
ee:instance-saml	Test::Integration::InstanceSAML	?	?
ee:jira	Test::Integration::Jira	?	?
ee:large-setup	Test::Instance::Image	?	can_use_large_setup
ee:ldap-no-server	Test::Integration::LDAPNoServer	?	?
ee:ldap-no-tls	Test::Integration::LDAPNoTLS	?	?
ee:ldap-tls	Test::Integration::LDAPTLS	?	?
ee:mattermost	Test::Integration::Mattermost	?	?
ee:metrics	Test::Integration::Metrics	?	?
ee:mtls	Test::Integration::MTLS	?	?
ee:object-storage	Test::Instance::Image	object_storage	object_storage
ee:packages	Test::Instance::Image	packages	packages
ee:praefect	Test::Integration::Praefect	?	?
ee:registry	Test::Integration::Registry	?	?
ee:registry-with-cdn	Test::Integration::RegistryWithCDN	?	?
ee:relative-url	Test::Instance::RelativeUrl	?	?
ee:repository-storage	Test::Instance::RepositoryStorage	?	?
ee:service-ping-disabled	Test::Integration::ServicePingDisabled	?	?
ee:smtp	Test::Integration::SMTP	?	?