議案・賛否データ

graph TD
    A["参議院公式サイト
記名投票ページ"]:::source
    B["SmartNews SMRI
議案データセット（gian.json）"]:::source
    M["管理画面からの手動入力
Streamlit 議案管理"]:::source

    P1["投票リンク収集
回次ごとに記名投票一覧ページを取得"]:::process
    P2["投票結果パース
議員別の賛否をHTMLから抽出しJSON保存"]:::process
    P3["議案メタデータ取り込み
議案名・提出者・採決日をDBに投入"]:::process
    P4["議案マッチング
投票結果の案件名でProposalを特定"]:::process
    P5["個人賛否投入
Bronze層に追記"]:::process
    P6["Gold層への確定
政治家IDに紐付けて確定値を反映"]:::process
    P7["会派賛否集計
個人賛否から会派多数派を判定・造反を検出"]:::process
    P8["議案の手動登録・編集
議案作成・賛否確定・提出者マッチング"]:::process

    T_PROP["proposals
テーブル（議案）"]:::table
    T_SUB["proposal_submitters
テーブル（議案提出者）"]:::table
    T_DEL["proposal_deliberations
テーブル（議案審議）"]:::table
    T_EXT["extracted_proposal_judges
テーブル（抽出議案賛否 / Bronze層）"]:::table
    T_PJ["proposal_judges
テーブル（議案賛否）"]:::table
    T_PGJ["proposal_parliamentary_group_judges
テーブル（会派議案賛否）"]:::table

    V["dbt Data Vault層
hub / sat / link モデル"]:::process
    H["BigQuery公開
sagebase スキーマ"]:::public

    A --> P1
    P1 --> P2
    B --> P3
    P3 --> T_PROP
    P3 --> T_SUB
    P3 --> T_DEL
    P2 --> P4
    P3 --> P4
    P4 --> P5
    P5 --> T_EXT
    P5 --> P6
    P6 --> T_PJ
    P6 --> P7
    P7 --> T_PGJ
    M --> P8
    P8 --> T_PROP
    P8 --> T_SUB
    P8 --> T_PJ
    P8 --> T_PGJ
    T_PROP --> V
    T_SUB --> V
    T_DEL --> V
    T_EXT --> V
    T_PJ --> V
    T_PGJ --> V
    V --> H

    classDef source fill:#ffffff,stroke:#1a1a1a,stroke-width:2.5px,color:#1a1a1a
    classDef process fill:#ffffff,stroke:#737373,stroke-width:1px,color:#1a1a1a
    classDef table fill:#ffffff,stroke:#1a1a1a,stroke-width:1.5px,stroke-dasharray: 6 3,color:#1a1a1a
    classDef public fill:#1a1a1a,stroke:#1a1a1a,stroke-width:2.5px,color:#ffffff