お知らせ

[2024/01/29]開会式のアーカイブを公開いたしました。（https://youtu.be/0fKidiPX8fE?si=zdEJ2Uwuj_keddOf）

[2024/01/16]ツール情報詳細を公開しました。ぜひツールタブをご覧ください。

[2024/01/12]参加登録受付開始しました。

  1. SIGNATEにログインしてください。（アカウントの新規作成はこちら）
  2. 下記リンクより、アンケートにご回答ください。
  3. アンケートの回答完了後、参加用コンペティションURLが表示されますので必ずアクセスしてください。アクセス後、投稿用のページをブックマークすることをオススメします。アクセスリンクを紛失した方はお手数ですが下記いずれかをご対応ください。
    • 再度アンケートフォームにご回答ください。（回答日時の新しい回答を採用いたします）
    • 左記タブの最下部の「お問い合わせ」からSIGNATEにご連絡ください。
  4. 投稿用のページにアクセス後、SlackタブよりSlackにご参加ください。Slackからはいつでも投稿用ページのリンクにアクセスできます。
  5. コンペティション開始（1月18日19時）となりましたら、分析用のデータと投稿ボタンが表示されます。



▼課題

今回は企業向けローンの返済可否予測というテーマを通して、ローンに関連したデータを基に、企業が返済不能になるかどうかの予測に挑戦して頂きます。このデータを活用することで、どの業種や地域が成長の機会を持っているか、あるいはどのような要因がビジネスの成功に影響を与えるかなど、金融機関は効果的な企業支援の戦略を立てることができます。

今回提供するデータは、米国小企業庁（U.S. Small Business Administration、略称SBA）によるデータをもとに生成した人工的なもの（※）で、SBAのローン保証を受けたスタートアップや小企業に関する情報が含まれています。
※人工的なデータとは、実データと同じ構造、カラム数、型を有するものの、AIのアルゴリズムによって作成された全く新しい架空のデータのことをいう。

▼参加条件

16歳以上の方
※本コンペでは情報交換・問い合わせ先としてSlackを利用いたします。そのためSlackのプライバシーポリシーによる年齢制限が適用となり、16歳未満の方はご参加いただけません。ご了承ください。

▼情報交換・問い合わせ

コンペに関する連絡は、本コンペ専用のSlackワークスペースにて行います。参加者同士の情報交換や議論はもちろん、運営とコミュニケーションいただくことも可能ですので、ぜひご参加ください。Slackのリンクは投稿用ページのSlackタブに記載しております。なお、コンペに関する問い合わせは、フォーラムやSIGNATEの問い合わせフォームではなく、Slack上からお願いいたします。

▼評価関数

・精度評価は、評価関数「MeanF1Score（MacroF1Score）」を使用します。
・評価値は0～1の値をとり、精度が高いほど大きな値となります。





▼入賞者決定の流れ（予測精度）

1. コンペ最終日までの評価（暫定評価）は評価用データセットの一部で評価し、コンペ終了後の評価（最終評価）は評価用データセットの残りの部分で評価します。リーダーボードはコンテスト終了時に自動的に最終評価に切り替わり、それを元に最終順位を決定します。このため、開催中と終了後では順位が大きく変動する場合もあります。
※投稿ファイルは最大2つまで選択可能で、最終評価のスコアの高いファイルが自動的に採用されます。
2. スコアが同値の場合は、早い日時でご応募いただいた参加者を上位とします。
3. 最終評価による順位が上位の方を入賞候補者とし、事務局から連絡いたします。
4. 検収のため、入賞候補者には以下を提出していただきます。提出方法は、個別にご連絡いたします。
　・モデルのソースコード
　・学習済モデル（常に保存しておくよう注意ください）
　・予測結果の再現の為の手順書（前処理部分、学習部分、予測部分が分かるよう明記）
　・実行環境（OSのバージョン、使用ソフトウェア及び解析手法）
　・データの解釈、工夫点、モデリングから得られる示唆等
5. 検収期間中、入賞候補者及び、その提出モデルが下記いずれかに該当する場合は失格となり、入賞の資格を失います。
　・事務局からの手続き上の連絡・要求に対して指定された期限内に対応しない
　・参加条件やルールを満たしていない
　・その他、事務局が不当と判断した場合
6.検収をクリアした方から、入賞者及び順位を確定します。

※入賞候補者が入賞資格を失った場合は、最終スコアが次点の方が繰り上がり、新たな入賞候補となります。
※失格となった場合や不正が発覚した場合は、SIGNATE独自の裁量により、メダル・ポイントが付与されない場合があります。

▼企業賞

本コンペティションでは精度での入賞の他に多くの企業賞をご用意しております。
応募方法などの詳細は下記をご確認ください。

＊コンペティションで予測結果を投稿したユーザーが対象となります。
＊複数投稿した場合は全ての投稿が評価対象になりますが、一人のユーザーが同一企業賞を複数受賞することはありません。
＊一人のユーザーが複数の企業賞を受賞する可能性はあります。
＊入賞者数は各企業賞につき最大3名となります。入賞に該当する方がいなかった場合は、用意した入賞枠に対して「該当者なし」とする場合もあります。

賞名 MILIZE賞 Tableau賞 Dataiku賞 Databricks/Microsoft/ナレッジコミュニケーション賞 SIGNATE賞
評価方法 コンペの運営円滑化やコンペティションの盛り上げの貢献度 ダッシュボードのデザインや分析内容 分析のプロセスの透明性・革新性、予測精度の高さ 生成AIを使った開発効率化・アイデア、予測精度の高さ 分析・モデル構築を行う中で検討した特徴量エンジニアリングや利用した外部データの革新性、予測精度の高さ
応募方法 本コンペ専用のSlackワークスペースに参加 Tableau上でファイル名を「SIGNATEユーザー名」としたtwbxファイルを作成しGoogleフォームから、twbxファイルを添付して投稿
 Dataikuを利用した分析工程をブログやSNSなどで公開し、本コンペティション専用Slackの「#21-ブログ公開url投稿」に下記内容を相違なく投稿
・SIGNATEのユーザー名
・応募する賞名
・公開した記事のURL
 Databricksを利用した分析工程をブログやSNSなどで公開し、本コンペティション専用Slackの「#21-ブログ公開url投稿」に下記内容を相違なく投稿
・SIGNATEのユーザー名
・応募する賞名
・公開した記事のURL
 本コンペティションの分析工程・モデル開発の内容をブログやSNSなどで公開し、本コンペティション専用Slackの「#21-ブログ公開url投稿」に下記内容を相違なく投稿
・SIGNATEのユーザー名
・応募する賞名
・公開した記事のURL
期間 2024年2月15日(木) 23:59 2024年2月18日(日) 23:59 2024年2月18日(日) 23:59 2024年2月18日(日) 23:59 2024年2月18日(日) 23:59

▼参加の前提

  • コンペで設定された目的を理解の上、実用性を意識した仕組みの構築をお願いします。実用性とは、全自動処理であること、高精度、高速、低計算量（省HWコスト）、データ量に対してスケーラブル、モデル解釈性が高いことなどを意味します。
  • チート行為やルールを無視した方法による参加は認められません。
  • 他者に対する誹謗中傷や公序良俗に反する行為を禁止します。事務局が悪質と判断したケースにおいては、入賞資格や会員資格の剥奪の可能性があることを予めご了承のうえご参加ください。
  • データダウンロード時に表示されるコンペティション参加規約に同意の上、登録フォームには正しい情報を入力してください。


▼システムの利用

  • 1人につき1アカウントのみ利用可能です。
  • チーム人数は最大で5人、2024/2/1まで作成可能です（チーム作成方法はこちら）


▼情報の取り扱い

  • コンペ開催期間中
    コード・学習済みモデル・データ分析結果の他者への共有を禁止します。ただし、全ての参加者が参照可能であるSlackでの開示は可能です。
  • コンペ終了後
    「情報公開ポリシー」ページを参照ください。


▼モデルの構築

  • コンペで提供されたフォーマットによる新規データを入力した場合、自動で予測結果が出力されるモデルのみが評価対象となります。
  • 追加費用を伴わない（有償の外部API等を使用しない）環境下で提案した手法が再現でき、かつ継続使用が可能な実装をお願いします。
  • GPUの使用を前提とした環境（Google Colab Pro等）での実装は可能です。


▼ツールの利用

  • ツールや学習済みモデルの利用は、商業利用が可能でオープンかつ無料なもの（python, tensorflow 等）に限定します。
    （運営からの提供するdatabricks, dataiku, tableau については利用可能とする）
  • TableauDesktopについては、利用可能期間がインストールから1か月間となります。表彰時の提出に向けて事前に作業が必要となるのでご認識ください（詳細はslackに記載）
  • 学習済みモデルを使用する場合、入賞時にソース（論文のリンク等）を明記してください。


▼データの利用

  • 配布するデータ以外のデータを利用（学習・予測）することはオープンかつ無料で利用可能なものに限り可能です。（*）
    *生成元データは利用不可とします：https://www.kaggle.com/datasets/mirbektoktogaraev/should-this-loan-be-approved-or-denied
  • 評価用データを利用・参考にして、学習用データの修正・特徴量の追加を行い、モデルの学習・推論を行うことを禁じます。（下記、禁止の具体例）
    • 評価用データを参考に特徴量を作成し学習する。またその特徴量を用いて、別の特徴量を作成し学習する。
    • 評価用データを利用して、学習用データの数値を変換する（欠損値を埋める）


▼実装方法

  • 前処理、学習、予測、の3つにコードを分け実装してください。
    1. Preprocessing「前処理」
      提供データを読み込み、前処理を施し、モデルに入力が可能な状態に変換するモジュール。get_train_dataやget_test_dataのように、学習用と評価用を分けて、前処理を行う関数を定義。
    2. Learning「学習」
      1の出力を読み込み、モデルを学習し、学習済みモデルを出力するモジュール。学習済みモデルや特徴量、クロスバリデーションの評価結果を出力する関数等を定義。
    3. Predicting「予測」
      1で作成した評価要データ及び2で作成した学習済みモデルを読み込み、予測結果を出力するモジュール。
  • 事務局：(一社)金融データ活用推進協会
    • 委員長・委員長代行：みずほ第一フィナンシャルテクノロジー株式会社、Japan Digital Design株式会社、株式会社三井住友銀行
    • PMO：株式会社MILIZE、ニッセイ情報テクノロジー株式会社
    • 分析環境：データブリックス・ジャパン株式会社、日本マイクロソフト株式会社、株式会社セールスフォース・ジャパン、Dataiku Japan株式会社
    • プラットフォーム：株式会社SIGNATE

  • 後援：金融庁

　


　JAPAN FINTECH WEEK特設ページ

　

ツール
概要 ・エンタープライズグレードの次世代クラウドデータマネジメントシステム (Link)
・POCで終わらせないDataとAIの本番稼働を見据えたツール 		・グローバルで150社以上の金融機関が採用するEveryday AIのためのプラットフォーム ・すべての人がデータを活用できることを目指し、簡易な利用と直感的な表現が可能なデータ視覚化ツール
特徴 ・データとモデルのカタログが可能
・検索ダッシュボードの利用、データ共有が可能
・生成型AIを利用したモデル学習が可能 		・ユーザーフレンドリーなUIで直感的に使え、データ準備・可視化・統計解析・AutoML・デプロイ・評価など分析プロセスのEnd to Endをカバーする ・ドラッグ＆ドロップで直感的な操作が可能
・分析内容に合わせた柔軟なビジュアライズが可能
提供形式
利用方法		 ・クラウド版
（利用方法の参考URL）

※本格版を無償で提供

 ・デスクトップ版／無料版
（コンペ特設ページ）

※豊富な教育コンテンツや資格試験も提供 （URL）

・デスクトップ版／無料版
（インストーラーのダウンロード先URL）
（インストール後の有効化手順）

※「プロダクト キーによってライセンス認証する」を選択し、Tableau用Slackチャンネルにピン留めされているアクティベーションキーをご利用ください。
想定ユーザ ・フルコーダー
・ノーコーダー

※AutoMLや生成AIによるコードアシスタント機能あり

 ・フルコーダー
・ローコーダー、ノーコーダー

※コーディングをしないで機械学習に取り組むことも可能です

・ノーコーダー

※機械学習なし、データを視覚的に表現したい方（データ活用初心者でもご利用可能）

参考 ・製品概要
・導入事例
・Global金融事例 		・【動画】製品デモ（3分）
・主要機能
・【動画】ユーザーの声
・金融機関に選ばれるAIプラットフォーム 		・使用方法におけるヘルプページ
・サンプルダッシュボード (右上の検索ボタンより任意のワードで検索可能)
・無償の学習コンテンツ

※利用方法についてはSlackでもお問い合わせください。また、是非、作成過程でのTipsをSlack上でシェアお願いいたします。

※不明点がございましたら、slackのツール別のチャンネルにてお気軽にお問い合わせください

Disclosure policy

As a general rule, in accordance with Article 4, Paragraph 1 of the terms of participation, diclosing any contents such as insights and deliverables transmitted through the information or data provided by our company in relation to this competition is not permitted, however, only after the completion of this competition and for non-commercial purposes, it will be possible to disclose the contents within the score of the table below
Model *1
Public
Analysis results *2
Public
Public : Posting to social media sites, blogs and source repositories, and citing to papers
Restricted : Using in a limited range from research, education to seminars, where many unspecified people cannot access
*1 Execution unit source code and learned models
*2 The insights obtained using the information and data provided, or the solutions including scripts and processed data such as summary statistics

【本コンペ特記事項】
本コンペティションにおける参加者の情報は、参加者のメリットを最大化するため、参加者にとって有益な情報の提供ならびに研修・人材育成支援等の目的に限り、金融データ活用推進協会および当協会が認めた会員団体に対して提供される場合があります。なお、本コンペティションにおいては、第３条（２）（３）は不要とします。


Terms of Participation in SIGNATE Competition

In order to participate in the Competition, you are required to agree to these Terms, in addition to the Terms of Use of SIGNATE.JP Site (hereinafter referred to as the “Terms of Use”). You should participate in the Competition after reading carefully and agreeing to these Terms. These Terms, the matters that are displayed as “additional matters” that you have agreed to when participating in a Competition, the Terms of Use and other terms and conditions that you have agreed to (hereinafter collectively referred to as “these Terms, etc.”) shall all be binding on the Participant.


Article 1 Definitions

1. For the purpose of these Terms, the following terms shall be defined as follows:

(1) “Site” means the website “SIGNATE (https://signate.jp)” on which the Competitions are posted.
(2) “Competition” means any competition on AI development or data analysis on the Site as held by the Host.
(3) “Host” is the host(s) of the Competition. The Host may be SIGNATE, Inc. (hereinafter referred to as the “Company”) or the Company’s client companies, affiliated companies, schools or organizations, etc. (hereinafter referred to as the “Client(s)”).
(4) “Participant(s)” means the member(s) (which mean “member(s)” defined in the Terms of Use, and the same shall apply hereinafter) who participate in a Competition.
(5) “Submissions” means, collectively, the analysis and prediction results, prediction models and reports, etc. as submitted in the Competition.
(6) “Final Submissions” means the Submissions submitted by a Participant that the Participant has specified as a final submission on the prescribed page in the Site by the time of completion of a Competition.
(7) “Winner Candidate” means the Participant who has received a notice from the Company that he/she is nominated as a winner candidate.
(8) “Submissions for Final Judgment” means the Submissions and other items designated by the Company as submitted by a Winner Candidate pursuant to the instructions of the Company.
(9) “Final Judgment” means the acceptance inspection and judgment, including reproducibility verification, by the Company for the Final Submissions and Submissions for Final Judgment of a Winner Candidate.
(10) “Winner” means the Winner Candidate who is informed by the Company that he/she has won a prize.
(11) “OSS” means software licensed based on OSS License Terms.
(12) “OSS License Terms” means any of the following license terms
(1) Either the GNU General Public License or the GNU Lesser General Public License published by the Free Software Foundation, Inc.;
(2) License terms listed at www.opensource.org/licenses/ or derivatives thereof;
(3) License terms that regard the software as “free software” or “open source software”; and
(4) License terms or agreements similar to the license terms listed in each of the three preceding items which request the user to disclose, distribute or license to a third party, or not to exercise, etc., the licensed software, its derivatives and the intellectual property rights associated therewith in whole or in part.

Article 2 Competition

1. A member who desires to participate in a Competition shall be required to agree to these Terms, etc. and to satisfy the conditions for participation as specified in each such Competition. Any person who is not a member shall not participate in any Competition.
2. Participants shall participate in each Competition in the manner as advised by the Company and shall be obligated to comply with the rules as prescribed in each Competition.
3. Participants may submit the Submissions for the assignment of a Competition during the period of such Competition and submit as many proposals on the method of solving the problem as specified by the Company to the Host by the end of the period of the said Competition.
4. Participants may submit Submissions in the form specified in the Competition and specify those Submissions as a Final Submission on the prescribed page in the Site by the end time specified by the said Competition.
5. Participants’ Final Submissions shall be evaluated in accordance with the evaluation method specified in the Competition and the final ranking shall be determined based on such evaluation.
6. Participants may, as a general rule, check their own evaluation results and the evaluation results of each of the other Participants for Submissions that may be evaluated quantitatively on the Site.
7. Participants shall be solely liable for their own Submissions, including the legality and non-infringement of the Submission.
8. Participants shall not submit any Submissions that have no direct relationship to each Competition.
9. Unless otherwise provided for, Participants may not directly communicate to, consult with, make a request to, solicit or take any other actions with the Host in respect of the matters related to a Competition during the period of the said Competition.
10. Participants shall direct any questions or concerns regarding any Competition to the Company or the third party designated by the Company in accordance with the procedures prescribed by the Company as posted on the Site.
11. Participants shall produce Submissions in compliance with the OSS License Terms related to the OSS when using or incorporating OSS in a Submission. However, Participants shall not use or incorporate OSS for which commercial use is prohibited in a Submission.
12. The Host shall not be obligated to pay any remuneration or other consideration for any act of the Participants in a Competition under any pretext. And the Company shall not be obligated to pay any remuneration or other consideration other than those prescribed in the following Article for any act of the Participants in a Competition.

Article 3 Reward and Vesting of Rights

1. Unless otherwise provided for, any Participant shall satisfy the requirements set forth in the following items in order to be entitled to receive a reward in any Competition that offers a reward:

(1) To be a winner;
(2) To agree to transfer to the Host and the relevant transferee of rights in such Competition all transferable rights, such as copyrights (including the rights as prescribed in Article 27 and Article 28 of the Copyright Act, and the same shall apply hereinafter), rights to obtain patents and know-how, etc. in and to all analysis and prediction results, prediction models, reports, etc., written explanations on algorithms, source code and reproduction method, etc. (although not limited to these), and the Submissions contained in the Final Submissions and Submissions for Final Judgment (hereinafter referred to as the “Rights”) along with a guarantee that the Participant has the authority to transfer such Rights;
(3) To guarantee that any relevant transferee of rights may use the Rights contained in the Final Submissions and Submissions for Final Judgment for its own business and other purpose without any restriction and to agree to their exclusive use of such Rights;
(4) To agree not to exercise moral rights to the Rights against the relevant transferee of rights;
(5) To enter into an agreement for the transfer of the Rights with the relevant eligible transferee of rights, including the guarantee of and agreement to the matters in the preceding three (3) items and other reasonable provisions;
(6) To have the personal identity of such Participant verified by the Company; and
(7) Not to breach any provision of these Terms, etc.

2. Any Winner Candidate shall, after having received a notice from the Company that he/she is nominated as a winner candidate, submit the Submissions for Final Judgment on or before the designated date and communicate the matters requiring confirmation or response in relation to the Final Submissions and the Submissions for Final Judgment to the Company on or before the designated date, in accordance with the instructions of the Company. The Company shall carry out the final judgment based on such matters requiring confirmation or response. If the Company receives no confirmation or response satisfactory to the Company on or before the designated date, the Company may exclude such Winner Candidate from the subject of the final judgment and the Winner Candidate shall not raise any objection thereto.
3. If the Company considers that the Final Submissions or Submissions for Final Judgment need to be amended or modified, or there occur any additional matters requiring confirmation, in the course of the final judgment, any Winner Candidate shall take action or make response in relation to the matters that require amendment or modification, or the matters requiring confirmation, on or before the designated date in accordance with the instructions of the Company. If the Company receives no action or response satisfactory to the Company on or before the designated date, the Company may exclude such Winner Candidate from the final judgment and the Winner Candidate shall not raise any objection thereto.
4. The Company shall determine the Winner through the final judgment and inform the Winner to that effect.

Article 4 Confidentiality

1. Any Participant shall treat any information and data that they receive from the Company in relation to Competitions as well as knowledge and products, etc. obtained using such information and data (including Participant Submissions; hereinafter referred to as the “Company-Provided Information”) as confidential information and shall not disclose the same to any third party and use the same for any purpose other than for such Competition and purpose specified by the Company separately; provided, however, that the confidential information shall not include any information that falls under any of the following items:

(1) Information that is known to the public at the time it was received;
(2) Information that is already possessed by the Participant at the time it was received (only in the case where such Participant may demonstrate such fact by reasonable means);
(3) Information that becomes known to the public without the fault of the Participant after it was received;
(4) Information that is independently developed by the Participant without reference to any information received; or
(5) Information that is rightfully received from any third party having a right to disclose such information without the obligations of confidentiality (only in the case where such Participant may demonstrate such fact by reasonable means).

2. Any Winner shall handle his/her Final Submissions and Submissions for Final Judgment in the same manner as Company-Provided Information after receiving notification that they are a winner. And Participant Submissions other than the Winner’s Final Submissions and Submissions for Final Judgment shall not be included as Company-Provided Information after the Company has determined the Winner notwithstanding the provisions of the preceding paragraph.
3. Any Participant may publish any algorithms that they have developed as well as any other materials they have created in connection with their participation in a Competition (including Final Submissions and Submissions for Final Judgment) after that Competition in accordance with the Competition Information Disclosure Policy (hereinafter, "Information Disclosure Policy") posted on the Site. However, Participants shall observe the following matters when publishing information and may not publish any materials prohibited by the Information Disclosure Policy:

(1) Clarify that the materials were created in connection with participation in the Competition;
(2) Give credit in accordance with the notation method prescribed in the Information Disclosure Policy when the materials to be published contain part of a dataset; and
(3) Clarify the location accessible to all Participants (including but not limited to the Competition forum and other locations designated by the Company) where the materials are published (including links, etc.) if publishing materials outside the Competition forum.

4. Any Participant shall delete or return to the Company the Company-Provided Information (excluding the information prescribed in paragraph 3) immediately after the completion of a Competition.
5. If there is any separate arrangement in relation to the confidential information in a Competition, the provisions of such arrangement shall prevail over the provisions of these Terms.
6. If any dispute occurs between a third party and the Host or the Company due to the breach by any Participant of the provisions of this Article and such other party makes any claim against the Company or the Host, such Participant shall compensate for any damage, loss, expenses (including, but not limited to, attorneys’ fees), lost profits and lost revenues, etc. incurred by the Company and the Host.
7. The provisions of this Article shall survive the termination of the relevant Competition or the Participant’s completion of the procedures for withdrawal from all services provided by the Company, with respect to the Company-Provided Information and the Winner’s Final Submissions and Submissions for Final Judgment for a period of five (5) years thereafter.

Article 5 Prohibited Acts of Participants

1. The Company shall prohibit Participants from engaging in any of the following acts in any Competition:

(1) An act of cracking, cheating, spoofing and other misconduct;
(2) An act of redistributing data files included in the dataset;
(3) An act of directly communicating to, consulting with, making a request to, soliciting or responding to solicitation or other activities to other Participants or the Host (other than the Company) without the involvement of the Company for the purpose of furthering the Participant’s own interests;
(4) Any profitmaking activities using the Competition (including but not limited to solicitation or scouting activities, and use for a third party in educational business, etc.) without the prior approval of the Company in writing or any other manner specified by the Company;
(5) An Act of transferring, offering as collateral or otherwise disposing of the Participants’ standing, or the rights or obligations, as a Participant in any Competition (except with the prior written consent of the Company);
(6) Acts that infringe upon the intellectual property rights, trade secrets or any other rights of third parties; and
(7) Any other act in breach of these Terms, etc.

2. If the Company deems that a Participant has engaged in, or may engage in, any of the prohibited acts as prescribed in the preceding paragraph, the Company may, without prior notice to the Participant, disqualify the Participant from the Competition in which the Participant participates, temporarily suspend the Participant from using some or all of the services provided by the Company, withdraw the Participant’s membership, claim damages from the Participant or take any other measures deemed necessary by the Company.

Article 6 Modification of Terms

1. The Company may modify, add or delete any provisions of these Terms from time to time without the approval of Participants.

January 5, 2024