🤖Instruction Dataset for FOSS4G LLMs（仮）

[yuiseki]

From:

• 2024-04-09T12:30/12:55+09:00 🖐Smart Maps Meetup Weekly #439 (comment)

概要

• 計算資源はパトロンが見つかればなんとかなることがわかった
  • むしろ計算資源は余ってて、適切に良い形で活用できるスキルを持った人間を探している節もある
• いざ計算資源が与えられた時に即座に学習を実行できるように、データセットをコツコツと整備しておかなければ、チャンスを無駄にしてしまう
• FOSS4G LLMs のようなLLMがあると良いだろう
  • そのためには地理空間情報システムに関する質問応答のためのInstruction Datasetが必要になってくる

関連

• LOCAL AI HACKATHON #000 でyuisekiが構築したデータセット
  • https://huggingface.co/datasets/yuiseki/onomatopoeia-ja-flat
    • https://github.com/yuiseki/onomatopoeia-ja
    • アプローチ：既存のデータセットを加工して扱いやすくしている
  • https://huggingface.co/datasets/yuiseki/sake_qa
    • https://github.com/yuiseki/sake_dataset
    • アプローチ：既存のデータセットを加工して扱いやすくしている
  • https://huggingface.co/datasets/yuiseki/scp-jp-plain
    • https://github.com/yuiseki/scp-jp-data
    • アプローチ：スクレイピングして加工して扱いやすくしている
  • https://huggingface.co/datasets/yuiseki/g-uc
    • https://github.com/yuiseki/g-uc-data
    • アプローチ：スクレイピングして加工して扱いやすくしている
  • https://huggingface.co/datasets/yuiseki/open2ch-livejupiter-qa
    • https://github.com/yuiseki/open2ch-livejupiter-qa-data
    • アプローチ：既存のデータセットを加工して扱いやすくしている