Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Jump to bottom

2023-10-03T12:30/12:55+09:00 🖐Smart Maps Meetup Weekly #277

Closed
hfu opened this issue Oct 2, 2023 · 6 comments
Closed

2023-10-03T12:30/12:55+09:00 🖐Smart Maps Meetup Weekly #277

hfu opened this issue Oct 2, 2023 · 6 comments
Assignees
@hfu
Labels
meetup Smart Maps Meetup

Comments

@hfu
Copy link
Contributor

hfu commented Oct 2, 2023 •
edited
Loading

2023-10-03T12:30/12:55+09:00 🖐Smart Maps Meetup Weekly

Smart Maps Meetup Weekly の第39回です。

接続アドレス

https://teams.microsoft.com/l/meetup-join/19%3ameeting_ZDU5OTk3ZTAtZjA3NS00NjRiLWJmM2YtZTIwZjY1N2Q5NGQ1%40thread.v2/0?context=%7b%22Tid%22%3a%22cdec79b4-6c91-4d03-bccf-b473d5a597a2%22%2c%22Oid%22%3a%221bd03f32-5b15-482f-a430-fd6dda338eb3%22%7d
会議 ID: 449 245 118 466
パスコード: nrq3Sq

話題 Issue

https://github.com/UNopenGIS/7/issues?q=is%3Aissue+is%3Aopen+label%3Ameetup+sort%3Areactions-%2B1-desc

次回予告

当座、毎週実施を考えています。
@hfu hfu self-assigned this Oct 2, 2023
@hfu hfu added meetup Smart Maps Meetup and removed waiting/triage waiting/assign labels Oct 2, 2023
@hfu hfu pinned this issue Oct 2, 2023
@hfu
Copy link
Contributor Author

hfu commented Oct 2, 2023 •
edited
Loading

Tentative agenda

others

  1. @k96mz
  2. @yuiseki

hfu

長崎点群

ヘルシンキ点群

  • https://observablehq.com/@hfu/helsinki-laser
  • ローデータ 2GB くらいだったので、長崎点群の作業管理の片手間でできた。
  • 色情報がないので渋い
  • かなりすいているので軽い
  • ソウルでは日本以外のデータを扱う方が SMG の立場が伝わりやすいのかも

UNVT Portal #272

  • 昨日5台追加
  • 本日2台追加
  • 14台が配備待機中。電源周りで苦労していたりする。
  • 国家測量 WiFi 相変わらずちょっとへん。mDNS が通りにくい症状は健在。
  • 他方で、2台ほど microSD 書き込みが遅かったような。経年変化か。
  • 構成管理どうしようか。

Raspberry Pi 400

  • 400 を 2台配備した。
  • 機体番号 401, 402 を予定する。

Raspberry Pi 5

FOSS4G Asia 2023 Seoul

  • smellman on RGeo
  • hfu on Smart Maps for the United Nations, with the United Nations (30 min)
  • Takesaki-san on Adopting new technologies in a national geospatial information authority - FOSS4G use in Geospatial Information Authority of Japan

UN Open GIS Joint Workshop in Seoul

  • FIXME

FOSS4G Asia 2023 Community Sprint

  • hfu も Takesaki-san も参加を予定している
  • もくもくと作業をすることに十分に時間をかけるスタイルで良いのかも知れないと考えているところ。結局は、実践できる人が力を持つコミュニティであると承知している。

@k96mz
Copy link

k96mz commented Oct 3, 2023 •
edited
Loading

MapLibre GL JSの練習

・https://k96mz.github.io/20231001/index.html
・ハザードマップポータルサイトの洪水浸水想定区域の上に、国土数値情報の観光資源ポイントデータ（自然は緑、歴史・文化は赤などとして）を重ねてみる
・レイヤー切替のプラグインを適応する方法を勉強中。
・MapLibre GL JSはオープンソースのJavaScript地図ライブラリなので、まずはJavaScritpの勉強をしないといけないと思い、JavaScriptを勉強中

@yuiseki
Copy link
Member

yuiseki commented Oct 3, 2023 •
edited
Loading

yuiseki

TRIDENT Agent with llama.cpp

  • 以下の条件で llama.cpp のserverを省メモリで高速に処理できることを発見した
    • GPUオフロード有効化
    • コンテキスト長を短くする
    • Stop wordsを活用する
      • これが一番重要な発見
      • Stop wordsを指定しないと、n_predictで指定したコンテキストいっぱいまで推論しようとするが、指定するとその文字列が現れた時点で推論を中断できる
      • repeat_penaltyを上げると、精度が犠牲になり、こちらがfew shot exampleとして示したフォーマットを逸脱してくる
      • Stop wordsでうまく繰り返しを検出して処理を断ち切ることで、精度を保ったまま繰り返しの出力を防ぎ高速化できる
  • llama.cpp + llama-2-7b-gguf は、text-davinci-003 と比べるとかなり性能（賢さ）が低い
    • llama-2-13b-gguf にしても大差なし
    • llama-2-70b-gguf は私のマシンでは動かせない
    • 高性能と言われているモデルだったら賢いのかと思って mistral-7b-v0.1.Q4_K_M.gguf や xwin-lm-7b-v0.1.Q4_K_M.gguf を試してみた
      • たしかに一部のタスクで性能は良いのかもしれない
      • が、LLMを別のモデルに切り替えると、振る舞いが全く変わってしまう
      • ので、プロンプトから作り直す必要が生じる

Backlog

  • Raspberry Piでllama.cpp serverを動かしたい
    • コツが分かってきたので現実的な速度で動かせる、かもしれない…？
  • https://github.com/yuiseki/osm-regional-pmtiles-builder
    • これのDockerfileやdocker-compose.ymlを用意したいんだった
  • 翻訳プロジェクト
    • llama.cppの知見が溜まってきているので取り組めそう
      • UN側に例のサイトの日本語版を提供する意志があるのかが一番の懸念
    • それよりもOpenStreetMapのPOIの各種属性の翻訳とかWikiの翻訳とかのほうが、懸念もなく需要もありそうな気がしてきている
  • HOTOSM
    • 時間は割けていないが、引き続き関心は維持している
  • GeoParquet
    • 気になっている

@yuiseki
Copy link
Member

yuiseki commented Oct 3, 2023

https://stackblitz.com/

@hfu
Copy link
Contributor Author

hfu commented Oct 3, 2023

StackBlitz

@hfu
Copy link
Contributor Author

hfu commented Oct 3, 2023

GeoParquet

@hfu hfu mentioned this issue Oct 3, 2023
Closed
@hfu hfu closed this as completed Oct 3, 2023
@hfu hfu unpinned this issue Oct 8, 2023
@hfu hfu mentioned this issue Oct 10, 2023
Closed
This was referenced Oct 18, 2023
Closed
Closed
@hfu hfu mentioned this issue Oct 31, 2023
Closed
@hfu hfu mentioned this issue Nov 7, 2023
Closed
This was referenced Nov 14, 2023
Closed
Closed
This was referenced Dec 7, 2023
Closed
Closed
This was referenced Dec 19, 2023
Closed
Closed
@hfu hfu mentioned this issue Jan 9, 2024
Closed
This was referenced Jan 16, 2024
Closed
Closed
@hfu hfu mentioned this issue Feb 13, 2024
Closed
This was referenced Feb 27, 2024
Closed
Closed
Closed
Closed
@hfu hfu mentioned this issue Mar 26, 2024
Closed
@hfu hfu mentioned this issue Apr 9, 2024
Closed
This was referenced Apr 16, 2024
Closed
Closed
Closed
This was referenced May 7, 2024
Closed
Closed
Closed
Closed
Closed
Closed
Closed
This was referenced Jun 26, 2024
Open
Open
Open
Open
Open
Open
Open
Open
Open
Open
Open
Open
Open
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Assignees

@hfu hfu

Labels
meetup Smart Maps Meetup
Projects
None yet
Milestone
No milestone
Development

No branches or pull requests
3 participants
@hfu @yuiseki @k96mz