• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Development of missing value complement / outlier treatment method for large scale financial database for corporate credit risk evaluation

Research Project

Project/Area Number 15H03390
Research Category

Grant-in-Aid for Scientific Research (B)

Allocation TypeSingle-year Grants
Section一般
Research Field Management
Research InstitutionThe Institute of Statistical Mathematics

Principal Investigator

Yamashita Satoshi  統計数理研究所, データ科学研究系, 教授 (50244108)

Co-Investigator(Kenkyū-buntansha) 野間 久史  統計数理研究所, データ科学研究系, 准教授 (70633486)
Research Collaborator YOSHIBA Toshinao  
TAKAHASHI Junichi  
TANOUE Yuta  
MIYAMOTO Michiko  
ICHIFUJI Yu  
Project Period (FY) 2015-04-01 – 2019-03-31
Project Status Completed (Fiscal Year 2018)
Budget Amount *help
¥10,400,000 (Direct Cost: ¥8,000,000、Indirect Cost: ¥2,400,000)
Fiscal Year 2018: ¥3,250,000 (Direct Cost: ¥2,500,000、Indirect Cost: ¥750,000)
Fiscal Year 2017: ¥3,250,000 (Direct Cost: ¥2,500,000、Indirect Cost: ¥750,000)
Fiscal Year 2016: ¥3,250,000 (Direct Cost: ¥2,500,000、Indirect Cost: ¥750,000)
Fiscal Year 2015: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Keywordsデータ構造化 / 信用リスク / 財務データ / 欠損値補間 / データ結合 / 異常値補正 / アパートローン / 公的ミクロデータ / 異常値修正 / データクレンジング / 信用データ / 不動産データ / データリンゲージ / 賃貸不動産収益データ / 企業データ / レセプトデータ / データリンケージ / 賃貸不動産業収益データ / 経営学 / 経営財務 / 欠損値補完 / 異常値処理 / MICE / kNN法
Outline of Final Research Achievements

We examined the application to the financial data of the missing value outlier processing developed in the statistics and bio / medical fields, and developed a new method based on the characteristics of the financial data. We applied it to CRD Association data, credit database of 5 regional banks, government survey microdat and real estate leasing data. Of these structured databases, those with less secrecy were released for research. We researched the methodology for combining government data such as corporate statistics and business location statistics with the above-mentioned enterprise data, and realized highly accurate data combining. This made it possible to conduct corporate profiling based on government statistical data, which is census data of companies, and credit data of banks, which is sample data but high quality.

Academic Significance and Societal Importance of the Research Achievements

本研究では、欠損値補間、異常値補正、データ結合などのデータ構造化手法を開発した。その結果、信用リスク評価において多種多様なデータベースを用いて予測精度の向上を実現した。この結果は、構造化データベースの相互利用や手法の公開などによって、研究者で去有されている。具体的には以下の成果を得た。
1.欠損値異常値に関する既存研究のサーベイ。2.データクレンジング手法の開発。3.経営・経済系データに対するクレンジング手法の適用。4.統合化信用リスクデータベースの作成。5.統計モデルによる期待損失モデルの構築。6.賃貸不動産収益デーベースの作成。7.政府データと信用データの結合。

Report

(5 results)
  • 2018 Annual Research Report   Final Research Report ( PDF )
  • 2017 Annual Research Report
  • 2016 Annual Research Report
  • 2015 Annual Research Report
  • Research Products

    (57 results)

All 2018 2017 2016 2015

All Journal Article (13 results) (of which Peer Reviewed: 13 results,  Open Access: 2 results) Presentation (41 results) (of which Int'l Joint Research: 3 results,  Invited: 19 results) Book (2 results) Funded Workshop (1 results)

  • [Journal Article] 多項ロジットモデル及び主成分分析を用いた新たな統計的マッチング手法の提案2018

    • Author(s)
      高部勲, 山下智志
    • Journal Title

      統計学

      Volume: 115 Pages: 1-18

    • Related Report
      2018 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] B-スプライン及びAdaptive Group LASSOに基づく正則化非線形ロジットモデルによるデフォルト確率の推定2018

    • Author(s)
      高部勲, 山下智志
    • Journal Title

      統計数理

      Volume: 66-2 Pages: 295-317

    • NAID

      120006727398

    • Related Report
      2018 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] 多項ロジットモデルに基づく企業データの統計的マッチング(企業分析)2018

    • Author(s)
      高部勲、山下智志
    • Journal Title

      JAFEEプロシーディングス

      Volume: 2018年度夏 Pages: 1-8

    • Related Report
      2018 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 多項ロジットモデルを用いた新たな統計的マッチング手法の提案2018

    • Author(s)
      3)高部勲, 山下智志
    • Journal Title

      統計学

      Volume: 2018年3月号

    • NAID

      40021765522

    • Related Report
      2017 Annual Research Report
    • Peer Reviewed
  • [Journal Article] When banks venture beyond home turf:consequences for loan performance2017

    • Author(s)
      Tanoue, Y. and Yamashita, S.
    • Journal Title

      Journal of Credit Risk

      Volume: Vol.13 No.3 Issue: 3 Pages: 1-19

    • DOI

      10.21314/jcr.2017.225

    • Related Report
      2017 Annual Research Report
    • Peer Reviewed
  • [Journal Article] データサイエンスによる大学との 連携・協働、そして発展へ② オープンサイエンスと協働が支える社会・人文学研究の新展開2017

    • Author(s)
      山下智志, 藤山秋佐夫, 吉野諒三, 越前功, 北本朝展
    • Journal Title

      文部科学 教育通信

      Volume: No.422 Pages: 22-23

    • Related Report
      2017 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Forecasting loss given default of bank loans with Multistage model2017

    • Author(s)
      Yuta Tanoue, Satoshi Yamashita, Akihiro Kawada
    • Journal Title

      International Journal of Forecasting

      Volume: 33(2) Issue: 2 Pages: 513-522

    • DOI

      10.1016/j.ijforecast.2016.11.005

    • Related Report
      2017 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Forecasting loss given default of bank loans with multi-stage model2017

    • Author(s)
      Tanoue, Y., Kawata, A., and Yamashita, S.
    • Journal Title

      International Journal of Forecasting

      Volume: 33 Pages: 513-522

    • Related Report
      2016 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 連鎖方程式による多重代入法2017

    • Author(s)
      野間久史
    • Journal Title

      応用統計学

      Volume: 46 Pages: 1-99

    • NAID

      130006286317

    • Related Report
      2016 Annual Research Report
    • Peer Reviewed
  • [Journal Article] ソーシャル・ビッグデータ駆動の観光政策決定支援システム2015

    • Author(s)
      一藤裕, 岡本基, 山下智志, 曽根原登
    • Journal Title

      月刊統計

      Volume: 9 Pages: 20-25

    • NAID

      130005332413

    • Related Report
      2015 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Webビッグデータとサーベイデータの統合による賃貸住宅価値評価システムの構築2015

    • Author(s)
      山下智志, 一藤裕, 鈴木雅人, 大島容大
    • Journal Title

      土木計画学研究

      Volume: 52 Pages: 219-227

    • Related Report
      2015 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Analytical Solutions for Expected Loss and Standard Deviation of Loss with an Additional Loan2015

    • Author(s)
      Yamashita S. and Yoshiba T.
    • Journal Title

      Asia-Pacific Financial Markets

      Volume: 22-2 Issue: 2 Pages: 113-132

    • DOI

      10.1007/s10690-014-9196-5

    • Related Report
      2015 Annual Research Report
    • Peer Reviewed
  • [Journal Article] メタアナリシスのエビデンスを正しく読み解くために ~アカデミアの生物統計家の立場から~2015

    • Author(s)
      野間久史
    • Journal Title

      薬理と治療

      Volume: 43 Pages: 615-620

    • Related Report
      2015 Annual Research Report
    • Peer Reviewed
  • [Presentation] AIと機械学習の直感的理解と金融への応用2018

    • Author(s)
      山下智志
    • Organizer
      日本銀行金融機構局金融高度化センターWS
    • Related Report
      2018 Annual Research Report
    • Invited
  • [Presentation] ビッグデータ時代におけるデータベース結合の目的・方法・効果2018

    • Author(s)
      山下智志
    • Organizer
      2018年度統計関連学会連合大会
    • Related Report
      2018 Annual Research Report
  • [Presentation] ビッグデータ時代における企業データの統計的名寄せ手法2018

    • Author(s)
      山下智志
    • Organizer
      統計数理研究所第6回金融シンポジウム
    • Related Report
      2018 Annual Research Report
    • Invited
  • [Presentation] 多項ロジットモデルに基づく企業データの統計的マッチング(理論的側面)2018

    • Author(s)
      高部勲, 山下智志
    • Organizer
      日本分類学会第37回大会
    • Related Report
      2018 Annual Research Report
  • [Presentation] 金融業における企業プロファイリングデータベースの作成と政府データ2018

    • Author(s)
      山下智志, 高部勲
    • Organizer
      政府統計ミクロデータの構造化と研究利用プラットフォームの形成研究集会
    • Related Report
      2018 Annual Research Report
    • Invited
  • [Presentation] 医療・健康科学における統計リテラシー:情報システム研究機構統計数理研究所の取り組み2018

    • Author(s)
      山下智志
    • Organizer
      横幹連合フォーラム
    • Related Report
      2017 Annual Research Report
    • Invited
  • [Presentation] データベース結合における統計学的問題の分類と定義2018

    • Author(s)
      山下智志
    • Organizer
      科研費研究集会
    • Related Report
      2017 Annual Research Report
    • Invited
  • [Presentation] 多項ロジットモデルを用いた新たな統計的マッチング手法の提案2018

    • Author(s)
      高部勲, 山下智志
    • Organizer
      科研費研究集会
    • Related Report
      2017 Annual Research Report
  • [Presentation] 先端医学研究の発展を担うデータサイエンス2018

    • Author(s)
      野間久史
    • Organizer
      第12回日本統計学会春季集会
    • Related Report
      2017 Annual Research Report
  • [Presentation] 企業の成長要因の構造分析と成長率予測の同時推計2017

    • Author(s)
      山下智志
    • Organizer
      中小企業等の事業性評価に向けたモデル構築調査事業
    • Place of Presentation
      経済産業省(東京都千代田区)
    • Year and Date
      2017-02-17
    • Related Report
      2016 Annual Research Report
    • Invited
  • [Presentation] Webデータとサーベイデータの融合:地方圏における住宅投資リスク評価の実験2017

    • Author(s)
      渡邊隼史, 一藤裕, 鈴木雅人, 山下智志
    • Organizer
      社会データ構造化センターシンポジウム
    • Place of Presentation
      一橋講堂(東京都千代田区)
    • Year and Date
      2017-02-07
    • Related Report
      2016 Annual Research Report
  • [Presentation] データ構造化とは何か?2017

    • Author(s)
      山下智志
    • Organizer
      社会データ構造化センターシンポジウム
    • Place of Presentation
      一橋講堂(東京都千代田区)
    • Year and Date
      2017-02-07
    • Related Report
      2016 Annual Research Report
    • Invited
  • [Presentation] 臨床研究における欠測データの統計解析:最新の動向 と実践的な方法論について2017

    • Author(s)
      野間久史
    • Organizer
      国立がん研究センター生物統計セミナー
    • Place of Presentation
      国立がん研 究センター(東京)
    • Year and Date
      2017-01-31
    • Related Report
      2016 Annual Research Report
  • [Presentation] データ構造化プロジェクトの意義と方向性について2017

    • Author(s)
      山下智志
    • Organizer
      科研費研究集会:政府統計ミクロデータの構造化と研究利用プラットフォームの形成
    • Place of Presentation
      統計数理研究所(東京都立川市)
    • Year and Date
      2017-01-25
    • Related Report
      2016 Annual Research Report
    • Invited
  • [Presentation] 銀行-企業間貸出マッチデータを用いた取引関係の変化の要因分析2017

    • Author(s)
      園田桂子, 山下智志
    • Organizer
      2017年統計関連学会連合大会
    • Related Report
      2017 Annual Research Report
  • [Presentation] 国際ミクロ統計データベースの整備と利用2017

    • Author(s)
      岡本基, 山下智志
    • Organizer
      2017年統計関連学会連合大会
    • Related Report
      2017 Annual Research Report
  • [Presentation] 多項ロジットモデル及び主成分分析を用いた統計的マッチング手法の提案2017

    • Author(s)
      高部勲, 山下智志
    • Organizer
      2017年統計関連学会連合大会
    • Related Report
      2017 Annual Research Report
  • [Presentation] 欠測値を含む大規模財務データを用いたコピュラによる企業の信用リスク評価について(Copula-Based Credit Risk Assessment for a Large Scale Small to Medium Enterprises' Financial Data including Missing Values)2017

    • Author(s)
      宮本道子, 安藤雅和, 山下智志
    • Organizer
      2017年統計関連学会連合大会
    • Related Report
      2017 Annual Research Report
  • [Presentation] 金融機関のリスク管理における人工知能・機械学習(1)2017

    • Author(s)
      山下智志
    • Organizer
      CRD信用リスク管理セミナー
    • Related Report
      2017 Annual Research Report
    • Invited
  • [Presentation] 金融機関のリスク管理における人工知能・機械学習(2)2017

    • Author(s)
      山下智志
    • Organizer
      CRD信用リスク管理セミナー
    • Related Report
      2017 Annual Research Report
    • Invited
  • [Presentation] 多項ロジットモデル及び主成分分析を用いた新たな統計的マッチング手法の提案2017

    • Author(s)
      高部勲, 山下智志
    • Organizer
      経済統計学会全国研究大会
    • Related Report
      2017 Annual Research Report
  • [Presentation] A New Statistical Matching Methodology Using Multinomial Logistic Regression and Multivariate Analysis2017

    • Author(s)
      Takabe, I. and Yamashita, S.
    • Organizer
      International Federation of Classification Societies(IFCS)
    • Related Report
      2017 Annual Research Report
    • Int'l Joint Research / Invited
  • [Presentation] 非線形・正則化ロジットモデルに基づく企業のデフォルト確率予測2017

    • Author(s)
      高部勲, 山下智志
    • Organizer
      JAFEE夏季大会
    • Related Report
      2017 Annual Research Report
  • [Presentation] ミクロデータ分析の近未来と我々の役割2017

    • Author(s)
      山下智志
    • Organizer
      共同研究集会
    • Related Report
      2017 Annual Research Report
    • Invited
  • [Presentation] Precision Medicineとビッグデータ,統計科学2017

    • Author(s)
      野間久史
    • Organizer
      第56回大分統計談話会大会
    • Related Report
      2017 Annual Research Report
  • [Presentation] 臨床研究における欠測データの取り扱いと解析の方法:最近のJAMAの事例から2017

    • Author(s)
      野間久史
    • Organizer
      昭和大学実践臨床統計学専門セミナー
    • Related Report
      2017 Annual Research Report
  • [Presentation] A new approach of micro-data analysis through international cooperation2016

    • Author(s)
      山下智志
    • Organizer
      The 8th International Workshop on Analysis of Micro Data of Official Statistics
    • Place of Presentation
      統計数理研究所(東京都立川市)
    • Year and Date
      2016-12-01
    • Related Report
      2016 Annual Research Report
    • Int'l Joint Research / Invited
  • [Presentation] 金融機関データに関する人工知能と機械学習の これまでとこれから2016

    • Author(s)
      山下智志
    • Organizer
      日本アクチュアリー会年次大会
    • Place of Presentation
      ステーションコンファレンス東京(東京都千代田区)
    • Year and Date
      2016-11-11
    • Related Report
      2016 Annual Research Report
    • Invited
  • [Presentation] 「国際ミクロ統計データベース」の利活用について2016

    • Author(s)
      岡本基, 山下智志
    • Organizer
      2016年統計関連学会連合大会
    • Place of Presentation
      金沢大学(石川県金沢市)
    • Year and Date
      2016-09-04
    • Related Report
      2016 Annual Research Report
  • [Presentation] 公的統計ミクロデータ研究コンソーシアムによる高等教育研究支援2016

    • Author(s)
      山下智志,岡本基
    • Organizer
      2016年統計関連学会連合大会
    • Place of Presentation
      金沢大学(石川県金沢市)
    • Year and Date
      2016-09-04
    • Related Report
      2016 Annual Research Report
  • [Presentation] リスク科学と目的・データ・統計的方法論2016

    • Author(s)
      山下智志
    • Organizer
      2016年統計関連学会連合大会
    • Place of Presentation
      金沢大学(石川県金沢市)
    • Year and Date
      2016-09-04
    • Related Report
      2016 Annual Research Report
  • [Presentation] 多重代入法におけるロバストな推測方法2016

    • Author(s)
      野間久史
    • Organizer
      2016年度統 計関連学会連合大会
    • Place of Presentation
      金沢大学(石川県金沢市)
    • Year and Date
      2016-09-04
    • Related Report
      2016 Annual Research Report
  • [Presentation] 政府統計データを用いた非集計分析の活用事例2016

    • Author(s)
      山下智志
    • Organizer
      科研費研究集会:政府統計ミクロデータの構造化と研究利用プラットフォームの形成
    • Place of Presentation
      統計数理研究所(東京都立川市)
    • Year and Date
      2016-08-10
    • Related Report
      2016 Annual Research Report
    • Invited
  • [Presentation] A generalized Akaike’s information criterion for multiple imputation2016

    • Author(s)
      Noma, H., Gosho, M.
    • Organizer
      XXVIIIth International Biometric Conference
    • Place of Presentation
      Victoria Convention Center(Canada)
    • Year and Date
      2016-07-10
    • Related Report
      2016 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 賃貸住宅の空室率要因分析とアパートローンのリスク計量化モデルの開発(2)2016

    • Author(s)
      山下智志
    • Organizer
      CRD信用リスク管理セミナー
    • Place of Presentation
      大阪
    • Year and Date
      2016-05-25
    • Related Report
      2016 Annual Research Report
    • Invited
  • [Presentation] 賃貸住宅の空室率要因分析とアパートローンのリスク計量化モデルの開発(1)2016

    • Author(s)
      山下智志
    • Organizer
      CRD信用リスク管理セミナー
    • Place of Presentation
      東京
    • Year and Date
      2016-05-20
    • Related Report
      2016 Annual Research Report
    • Invited
  • [Presentation] デフォルト・倒産予測モデルから進化した中小企業信用リスク計量化モデル2016

    • Author(s)
      山下智志
    • Organizer
      OLIS‐慶應義塾大学保険フォーラム
    • Place of Presentation
      慶應義塾大学(神奈川県横浜市)
    • Year and Date
      2016-01-16
    • Related Report
      2015 Annual Research Report
    • Invited
  • [Presentation] Webビッグデータとサーベイデータの統合による賃貸住宅価値評価システムの構築2015

    • Author(s)
      山下智志, 一藤裕, 鈴木雅人, 大島容大
    • Organizer
      土木計画学研究発表会
    • Place of Presentation
      秋田大学(秋田県秋田市)
    • Year and Date
      2015-11-21
    • Related Report
      2015 Annual Research Report
  • [Presentation] 欠測を考慮したロバストな一般化線形モデルを用いた信用リスクの予測について―中小企業大規模財務データベースにおける考察―2015

    • Author(s)
      山下智志, 宮本道子, 安藤雅和
    • Organizer
      統計関連学会連合大会
    • Place of Presentation
      岡山大学(岡山県岡山市)
    • Year and Date
      2015-09-06
    • Related Report
      2015 Annual Research Report
  • [Presentation] 「国際ミクロ統計データベース」の利用方法について2015

    • Author(s)
      山下智志, 岡本基
    • Organizer
      統計関連学会連合大会
    • Place of Presentation
      岡山大学(岡山県岡山市)
    • Year and Date
      2015-09-06
    • Related Report
      2015 Annual Research Report
  • [Presentation] Quantifying indirect evidence in network meta-analysis via composite likelihood methods: Evaluation of inconsistency and contribution rates of direct and indirect evidence. Joint Statistical Meeting 20152015

    • Author(s)
      野間久史
    • Organizer
      統計関連学会連合大会
    • Place of Presentation
      岡山大学(岡山県岡山市)
    • Year and Date
      2015-09-06
    • Related Report
      2015 Annual Research Report
    • Invited
  • [Book] 欠測データの統計科学:医学と社会科 学への応用2016

    • Author(s)
      高井啓二,星野崇宏,野間久史
    • Total Pages
      240
    • Publisher
      岩波書店
    • Related Report
      2016 Annual Research Report
  • [Book] Univariate analysis for gene screening: Beyond the multiple testing. In Design and Analysis of Clinical Trials for Predictive Medicine(Chapter13)2015

    • Author(s)
      Noma, H. and Matsui, S (Matsui, S., Buyse, M. and Simon, R. (eds.))
    • Total Pages
      400
    • Publisher
      Boca Raton: Chapman and Hall/CRC
    • Related Report
      2015 Annual Research Report
  • [Funded Workshop] 第10回国際ミクロデータラボラトリーサークショップ2018

    • Related Report
      2018 Annual Research Report

URL: 

Published: 2015-04-16   Modified: 2020-03-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi