お知らせ

2021年12月23日17時をもって、フェーズ1、フェーズ2も含め本チャレンジのデータ更新を停止いたしました(データセットの閲覧は可能です)。ご参加いただきました皆様には、多大なるご尽力をいただき誠にありがとうございました。

COVID-19チャレンジ(フェーズ3)累積罹患者数予測は、ラウンド20をもって終了いたします。なお、(フェーズ1データ収集・(フェーズ2)分析は今後も継続提供します。

ラウンド01 応募ページ(開催:4/16-4/26 予測:4/27-5/10)
ラウンド02 応募ページ(開催:4/27-5/10 予測:5/11-5/24)
ラウンド03 応募ページ(開催:5/11-5/24 予測:5/25-6/7)
ラウンド04 応募ページ(開催:5/25-6/7 予測:6/8-6/21)
ラウンド05 応募ページ(開催:6/8-6/21 予測:6/22-7/5)
ラウンド06 応募ページ(開催:6/22-7/5 予測:7/6-7/19)
ラウンド07 応募ページ(開催:7/6-7/19 予測:7/20-8/2)
ラウンド08 応募ページ(開催:7/20-8/2 予測:8/3-8/16)
ラウンド09 応募ページ(開催:8/3-8/16 予測:8/17-8/30)
ラウンド10 応募ページ(開催:8/17-8/30 予測:8/31-9/13)
ラウンド11 応募ページ(開催:8/31-9/13 予測:9/14-10/11)
ラウンド12 応募ページ(開催:9/28-10/11 予測:10/12-11/8)
ラウンド13 応募ページ(開催:10/12-11/8 予測:11/9-12/6)
ラウンド14 応募ページ(開催:11/9-12/6 予測:12/7-1/3)
ラウンド15 応募ページ(開催:12/7-1/3 予測:1/4-1/31)
ラウンド16 応募ページ(開催:1/4-1/31 予測:2/1-2/28)
ラウンド17 応募ページ(開催:2/1-2/28 予測:3/1-3/28)
ラウンド18 応募ページ(開催:3/1-3/28 予測:3/29-4/25)
ラウンド19 応募ページ(開催:3/29-4/25, 予測:4/26-5/23)
ラウンド20 応募ページ(開催:4/26-5/23, 予測:5/24-6/20)


趣意
現在、報道等で私たちが日々目にする新型コロナウィルスの罹患者推移は、SIR (Susceptible-Infected-Recovered) モデルに基づいて予測されています。SIRモデルは集団が時間とともに以下の3つの状態を推移していく過程を表現した数理モデルです。


 Susceptible:まだ感染していない人々(青)
 Infected:感染している人々(緑)
 Recovered:回復し免疫獲得した人々、あるいは亡くなった人々(赤)

SIRモデルの詳細は論文・他のサイト(例えばこちらこちら)をご覧いただければと思いますが、モデルの振る舞いを決めるのは以下の3つのパラメータです。

・β:感染率
・γ:回復率
・N:総人口

実際の感染状況から得られるデータや仮定により、これらのパラメータを検討、モデルのシミュレーションにより罹患者増加の現状や今後の予測を議論することができます。

特に重要な指標として、R0:基本再生産数(basic reproduction number)が挙げられます。

  R0=βN/γ

R0は1人の感染者が平均的に感染させる人数を表します。R0が1を超えると感染症の流行が発生し、値が大きい程、爆発的に感染が広がります。
R0は感染流行の収束がどの段階で起こるかにも影響します。モデル上では一度免疫を獲得した集団は他者に感染させないので、人口において(R0-1)/ R0の割合で免疫を獲得できれば1人の感染者が平均1人未満に感染させる状態に落ち着きます。例えば、R0=1.7なら人口の約40%、R0=2.5なら60%が免疫獲得する必要があります。しかし、R0はウィルスの性質や社会構造等に大きく依存するので、精度の高い推定は困難です。
一方で、現状の社会的距離戦略、3密を避けるような行動規制によっても、R0の数値を下げることができます。そのような実態の指標としては、RE:実効再生産数(Effective Reproduction Number)があります。

RE=(1-p)R0<1

通常の平均的な人との接触確率に対し、p削減することによりR0を1未満に抑えようという発想です。
人との接触を7・8割削減しようというメッセージは、このような数理モデルを前提としています。

ただし、SIRモデルには、感染や回復・死亡に関連しそうな因子はパラメータとして「陽」に表現されていません。感染者数増加の推移を説明する新しいモデル(数理モデルではない統計学的手法など)・今後の予測を高い精度で実施可能なモデル、それらのモデルに影響を及ぼす新しい因子については、検討の余地があると考えられます(もちろん、数理モデルも歓迎です。SEIRやその他の派生モデルなど)。

そこで、Phase3におけるチャレンジでは、有用な罹患者数推移予測手法の検討、および予測に有効な特徴の探索を目指します。予測に有用な特徴が必ずしも因果性がある(つまり、説明能力の高い因子、あるいは対策することで罹患者数を減らすことができる因子)わけではありませんが、何かの手がかりになればと考えています。

本チャレンジに貢献いただいた方は、著者メンバーの一員としてクレジットされます。皆様のご協力をいただければ幸いです。

COVID-19 Challenge 総合サイト


課題
Phase3では国内全体の日毎の累積罹患者数を予測していただきます。

利用するデータはPhase1で構築されたデータ(SIGNATE COVID-2019 Dataset)を前提としますが、それ以外の外部データも自由にご活用ください。

モデリングに際しては、Phase2で得られた知見やダッシュボードもご活用ください。また、協賛企業でご提供いただいている外部データやツールもご利用いただければと存じます。

予測対象期間を2週間毎に設定し、下図のように数ラウンドに分けて継続的に開催する予定です。各ラウンドでは、終了日の2週間先までを予測し、その後発表された実際の累積罹患者数を元に評価を確定します。(ラウンド11以降は予測対象期間を4週間に変更

このようにモデルの評価は、予測の正確性に基づきますが、精度に影響を与える因子を特定することも同様に重要です。 どのような方法で予測モデルを構築したのか?モデリングにより得られた示唆は何か?を是非、フォーラムにてご共有願います。 COVID-19の収束に向けてご協力いただければ幸いです。




予測状況
投稿頂いた予測結果の日毎のパーセンタイル(25%, 50%, 75%)を可視化してみました。



評価関数
・平均絶対誤差「MSE(Mean Squared Error)」を使用します。
・評価値は0以上の値をとり、精度が高いほど小さな値となります。


応募方法
・予測する変数は、国内全体の日毎の累積罹患者数です。(1日の新規罹患者数ではありません)
・ラウンド10までの予測対象期間は2週間、ラウンド11以降の予測対象期間は4週間です。(各ラウンドの終了日の翌日から4週間先まで)
・概要の下にあるボタンから対象ラウンドの応募ページに移動し、右上の「投稿」ボタンより予測結果を提出してください。
・応募ファイルの形式はcsv (カンマ区切り) のヘッダーなしファイルです。
・応募ファイルの1列目にインデックスを、2列目に予測値を記述します。

※インデックスは、予測対象期間の1日目=1, 2日目=2,・・・ 28日目=28 とします。

<投稿ファイルイメージ>
1,8000
2,8300
・・・
28, 9500

評価確定の流れ
1. 各ラウンドの終了日までは、正解値を0とみなして計算されたMSEによる評価値がリーダーボードに表示されます。このため順位や評価は参考にはなりません。
2. 各ラウンドの終了日以降、公表された実際の累積罹患者数を元に、SIGNATEにて日毎に評価値を計算し段階的にリーダーボードを更新していきます。(翌日15時頃に更新予定ですが、多少更新が遅れる可能性もあります)
3. 予測対象期間28日間全ての累積罹患者数が確定した後に、最終評価値を計算しリーダーボードに反映します。
※実際の累積患者数はSIGNATE COVID-2019 Dataset (Case > 罹患者統計)に反映されたデータを正解値とみなします。

総合ランキング
本コンペは、総合ランキング(スコア・メダル)の対象ではありません。

システムの利用
・投稿にはSIGNATEへの会員登録が必要です。
・1日5回まで投稿が可能です。
・1参加者につき1アカウントが必要です。1人で複数アカウントを利用、1アカウントを複数人で共有することは禁止です。
・チームでの参加を希望する場合は、こちらをご一読の上、対象ラウンドの応募ページ内の「チーム作成」ボタンからチームを作成ください。(作成期限:なし)

データの利用
・予測に利用するデータに制約はありません。

実装方法
・社会問題の解決、研究成果の共有等、大前提となる目的に合わせ、実用性を意識したアプローチで臨んでください。
・新しい期間に対しても予測が可能な手法を期待しますが、限定はしません。


<主催>
●株式会社SIGNATE
https://signate.jp/covid-19-challenge/

※以下の企業・団体様のご協力、応援に心より感謝申し上げます。


<データ・ツール協力>※敬称略
●株式会社ウェザーニューズ
株式会社ウェザーニューズはこの活動を応援しています。また、当社も、ウィルスの活動度と気象に関係性を調べる方向けにデータを公開しておりますので、ぜひご活用ください。
https://weathernews.jp/s/covid19-weather/

観光予報プラットフォーム推進協議会
観光予報プラットフォーム推進協議会はこの活動を応援しています。また、私たちも、「訪日外国人の宿泊者の推移」ダッシュボード等を公開しておりますので、ぜひご覧ください。
・観光予報:https://kankouyohou.com/
・観光予報DS:https://learning-steam-ds.kankouyohou.com/
・経済産業省「未来の教室」:https://www.learning-innovation.go.jp/covid_19/kankouyohou/

●ジャッグジャパン株式会社
ジャッグジャパン株式会社はこの活動を応援しています。また、私たちも、「都道府県別新型コロナウイルス感染者数マップ」を公開しておりますので、ぜひご覧ください。
https://gis.jag-japan.com/covid19jp/

●DataRobot, Inc.
DataRobotはこの活動を応援しており、「DataRobot AutoMLの無料ライセンス提供」を実施しております。ぜひご活用ください。
COVID-19 分析官向け無料プログラム
分析官向け無料プログラムオンラインセミナー


<紹介・分析協力>※敬称略
connectome.design株式会社
コネクトーム・デザイン株式会社はSIGNATEの考え方に賛同し、この活動を応援します。多くの技術者に活動を紹介するとともに、解析のお手伝いを致します。
COVID-19チャレンジへの協力について
COVID-19 Data Exploration Tool

●株式会社リコー(リコー経済社会研究所)
http://blog.ricoh.co.jp/RISB/technology/post_542.html

●筑波大学大学院 サービス工学学位プログラム/筑波大学システム情報系社会工学域 岡田幸彦研究室
https://www.sk.tsukuba.ac.jp/PPS/

COVID-19 ENGR
イベント開催「30分でランチ勉強!コロナ関連情報一元化!SIGNATE COVID-19 チャレンジのご紹介」
https://power-covid19.connpass.com/event/173277/
(公式URL)https://www.covid19engr.com/


<メディア協力>
※敬称略
Ledge.aihttps://ledge.ai/covid-19-challenge/
AINOWhttps://ainow.ai/2020/03/20/192930/

Disclosure policy

As a general rule, in accordance with Article 4, Paragraph 1 of the terms of participation, diclosing any contents such as insights and deliverables transmitted through the information or data provided by our company in relation to this competition is not permitted, however, only after the completion of this competition and for non-commercial purposes, it will be possible to disclose the contents within the score of the table below
Model *1
Private
Analysis results *2
Private
Public : Posting to social media sites, blogs and source repositories, and citing to papers
Restricted : Using in a limited range from research, education to seminars, where many unspecified people cannot access
*1 Execution unit source code and learned models
*2 The insights obtained using the information and data provided, or the solutions including scripts and processed data such as summary statistics

▼本コンペティションにおける特別規約
本コンペティションでは、以下の参加規約は適用されません。



In order to participate in the Competition, you are required to agree to these Terms, in addition to the Terms of Use of SIGNATE.JP Site (hereinafter referred to as the “Terms of Use”). You should participate in the Competition after reading carefully and agreeing to these Terms. If you agree, these Terms, the matters that are added to these Terms as "additional matters", the Terms of Use and other terms and conditions that you have agreed to shall be binding on the relevant parties as integral documents.


Article 1. Definitions

1.For the purpose of these Terms, the following terms shall be defined as follows:

(1)"Site" means the website "SIGNATE (https://signate.jp)” on which the Competitions are posted.
(2)"Competition" means any competition on AI development or data analysis on the Site as held by the Host.
(3)"Host" is the host(s) of the Competitions. The Host may be SIGNATE, Inc. (hereinafter referred to as the “Company”) or the Company’s client companies, affiliated companies, schools or organizations, etc. (hereinafter referred to as the “Client(s)”).
(4)"Participant(s)" means the member(s) who participate in a Competition.
(5)"Submissions" means, collectively, the analysis and prediction results and reports, etc. as submitted in the Competition.
(6)"Final Submissions" means the Submissions that are specified by a Participant on the prescribed page in the Site by the time of completion of a Competition.
(7)"Winner Candidate" means the Participant who has received a notice from the Company that he/she is nominated as a winner candidate.
(8)"Submissions for Final Judgment" means the analysis and prediction model and learning data, etc. as submitted by a Winner Candidate pursuant to the instructions of the Company.
(9)"Final Judgment" means the acceptance inspection and judgment, including reproducibility verification, by the Company for the Final Submissions and Submissions for Final Judgment of a Winner Candidate.
(10)"Winner" means the Winner Candidate who is informed by the Company that he/she has won a prize.
2.Unless otherwise defined in these Terms, the terms used in these Terms that are defined in the Terms of Use shall have the same meaning as defined in the Terms of Use.

Article 2. Competition

1.A member who desires to participate in a Competition shall be required to agree to these Terms and to satisfy the conditions for participation as specified in each such Competition. Any person who is not a member shall not participate in any Competition.
2.Participants shall participate in each Competition in the manner as advised by the Company and shall be obligated to comply with the rules as prescribed in each Competition.
3.Participants may submit the Submissions for the assignment of each Competition during the period of such Competition and submit a proposal on the method of solving the problem to the Host by the end of the period of the said Competition.
4.Participants may submit the Final Submissions in the form specified in each Competition by the time specified by the said Competition.
5.The Final Submissions as submitted shall be evaluated by the evaluation method as specified in each Competition and the final rank order shall be determined based on such evaluation.
6.Any Participant may, as a general rule, check the evaluation results of the Participant him/herself and each of the other Participants on the Site for the Submissions that may be evaluated quantitatively.
7.Participants shall be liable or otherwise responsible for their own Submissions, including their legality.
8.Participants shall not submit any Submissions that have no direct relationship to each Competition.
9.Unless otherwise provided for, Participants shall not directly communicate to, consult with, make a request to, solicit or take any other actions with the Host in respect of the matters related to a Competition during the period of the said Competition.
10.Any Participant who has uncertainty or questions about any Competition shall make sure to contact the Company or its designee through the procedures prescribed by the Company as posted on the Site.
11.The Company shall not be obligated to pay any remuneration or other consideration other than those prescribed in the following Article for any act of the Participants as prescribed in paragraphs hereof.

Article 3 Reward and Vesting of Rights

1.Unless otherwise provided for, any Participant shall satisfy the following requirements in order to be entitled to receive a reward in any Competition that offers a reward:

(1)To be a winner;
(2)To agree to transfer to the Host and the relevant transferee of rights in such Competition all transferable rights, such as copyrights, rights to obtain patents and know-how, etc. in and to all analysis and prediction results, reports, analysis and prediction model, algorithm, source code and documentations for the model reproducibility, etc., and the Submissions contained in the Final Submissions and Submissions for Final Judgment (including the rights as prescribed in Article 27 and Article 28 of the Copyright Act and the rights to obtain patents; hereinafter referred to as the "Rights");
(3)To agree that any relevant transferee of rights exclusively has the right to use the know-how contained in the Final Submissions and Submissions for Final Judgment for its own business and other purpose without any restriction;
(4)To agree not to exercise moral rights to the Rights against the relevant transferee of rights;
(5)To enter into an agreement for the transfer of the Rights with the relevant eligible transferee of rights, including the agreement to the matter in the preceding three (3) items and other reasonable provisions;
(6)To have the personal identity of such Participant verified by the Company.
(7)Not to breach any provision of these Terms and the Terms of Use.

2.Any Winner Candidate shall, after having received a notice from the Company that he/she is nominated as a winner candidate, submit the Submissions for Final Judgment on or before the designated date and communicate the matters requiring confirmation or response in relation to the Final Submissions and the Submissions for Final Judgment to the Company on or before the designated date, in accordance with the instructions of the Company. The Company shall carry out the final judgment based on such matters requiring confirmation or response. If the Company receives no confirmation or response satisfactory to the Company on or before the designated date, the Company may exclude such Winner Candidate from the subject of the final judgment.
3.If the Company considers that the Final Submissions or Submissions for Final Judgment need to be amended or modified, or there occur any additional matters requiring confirmation, in the course of the final judgment, any Winner Candidate shall take action or make response in relation to the matters that require amendment, etc. or the detailed information on the matters requiring confirmation, on or before the designated date in accordance with the instructions of the Company. If the Company receives no action or response satisfactory to the Company on or before the designated date, the Company may exclude such Winner Candidate from the final judgment.
4.The Company shall determine the Winner through the final judgment and inform the Winner to that effect.

Article 4 Confidentiality

1.Participants shall treat any information, data, or such contents as insights and deliverables transmitted through the service where they receive from the Company in relation to each Competition (hereinafter referred to as the "Company-Provided Information") as confidential information and shall not disclose the same to any third party and use the same for any purpose other than for such Competition and purpose specified by the Company separately; provided, however, that the confidential information shall not include any information that falls under any of the following items:

(1)Information that is known to the public at the time of the disclosure;
(2)Information that is already possessed by the Participant at the time of the disclosure (only in the case where such Participant may demonstrate such fact by reasonable means);
(3)Information that becomes known to the public without the fault of the Participant after the disclosure;
(4)Information that is independently developed by the Participant without reference to any information as disclosed (except for those Submissions of the person eligible for a prize which are evaluated); or
(5)Information that is rightfully disclosed by any third party having a right to do so without the obligations of confidentiality (only in the case where such Participant may demonstrate such fact by reasonable means).

2.Any Participant shall delete or return to the Company the Company-Provided Information immediately after the completion of each Competition.
3.Any Winner shall handle his/her Final Submissions and Submissions for Final Judgment in the same manner as prescribed in paragraph 1 hereof.
4.If there is any separate arrangement in relation to the confidential information in each Competition, the provisions of such arrangement shall prevail over the provisions of these Terms.
5.If any dispute occurs between the Host or other third party and the Company due to the breach by any Participant of the provisions of this Article and such other party makes any claim against the Company, such Participant shall compensate for any damage, loss, expenses (including, but not limited to, attorneys’ fees), lost profits and lost revenues, etc. incurred by the Company.
6.The provisions of this Article shall survive the termination of the relevant Competition or the Participant’s completion of the procedures for withdrawal from the service of the Company, with respect to the Company-Provided Information and the Winner’s Final Submissions and Submissions for Final Judgment for a period of five (5) years thereafter.

Article 5 Prohibited Acts of Participants

1.The Company shall prohibit Participants from engaging in any of the following acts in any Competition:

(1)An act of cracking, cheating, spoofing other misconduct;
(2)An act of directly communicating to, consulting with, making a request to, soliciting or responding to solicitation or other activities to other Participants or the Host (other than the Company) without the involvement of the Company;
(3)Any profitmaking activities using the Competition (including solicitation or scouting activities, and use for a third party in educational business, etc.) without the prior approval of the Company in writing or any other manner specified by the Company;
(4)Transfer, offering as collateral or other disposition of the status as a Participant or the rights or obligations as a Participant (except with the prior written consent of the Company); and
(5)Any other act in breach of the Terms of Use.

2.If the Company deems that a Participant engages in any of the prohibited acts as prescribed in the preceding paragraph, the Company may, without prior notice to the Participant, disqualify the Participant from the Competition in which the Participant participates, temporarily suspend the Participant from using the service of the Company, withdraw the Participant’s membership, claim damages from the Participant or take any other measures deemed necessary by the Company.

Article 6. Change, Discontinuation or Termination of Provision of Services under These Terms

1.The Company may change or temporarily suspend the services provided by the Company under these Terms without prior notice to the members.
2.Upon one (1) month prior notice to the members, the Company may suspend for a long period of time or terminate the services provided by the Company under these Terms.
3.The Company shall not be liable for any results or damage arising from the measures taken by the Company under this Article.

Article 7 Modification of Terms

1.The Company may modify, add or delete any provisions of these Terms from time to time without the approval of the members.

Enforced on April 1, 2018
Last updated on January 18, 2019