end0tknr's kipple - web写経開発

太宰府天満宮の狛犬って、妙にカワイイ

2026-01-01から1年間の記事一覧

RAG-Anything + python for win + ollama + 日本語

GitHub - HKUDS/RAG-Anything: "RAG-Anything: All-in-One RAG Framework" · GitHub lightrag + python for win + ollama + 日本語 - end0tknr's kipple - web写経開発 LightRAG を 開発した Data Intelligence Lab @ HKU による マルチモーダルRAG。 LightR…

Document AIの MinerU for python で tiff画像を markdown化

Document AI yomitoku for python で png画像を html化 - end0tknr's kipple - web写経開発 以前、上記entryにある yomitoku を試しましたが、 似たライブラリである opendatalab/MinerU を見つけたので、お試し。 GitHub - opendatalab/MinerU: Transforms …

lightrag + python for win + ollama + 日本語

graphrag + python for win + ollama + 日本語 - end0tknr's kipple - web写経開発 先日の上記entryに記載した graphragは、インデックス作成や検索が遅かった為、 lightragを構築し、試してみました。 尚、結果は以下のような印象でした lightragと言うが、…

powershell(ps1)実行時「スクリプトの実行が無効になっているため」エラー

PS > powershell.exe .\backup_robocopy_log.ps1 .\backup_robocopy_log.ps1 : このシステムではスクリプトの実行が無効になっているため、ファイル C:\Users\srch-admin\rpa\fess\backup_robocopy_log.ps1 を読み込むことができません。詳細について は、「…

install ColPali(ColQwen 2.5) for python3.12 on windows11

https://github.com/illuin-tech/colpali ColPaliという "画像のまま検索する" RAGの存在をしったので、その qwen2.5版をお試し。 利用環境 項目 内容 PC think pad x1 carbon mem:64gbyte GPU geforce rtx 4909 OS windows 11 PYTHON v.3.12 embeddable pac…

huggingfaceの modelを localにダウンロード

proxy配下で SentenceTransformer(model_name, device="cpu") したところ、 ssl errorとなった為、事前ダウンロードする為。 import httpx from huggingface_hub import snapshot_download from huggingface_hub import set_client_factory def client_facto…

sudachi for python の ユーザ辞書, 同義語辞書 を 1コの tsvから作成

sudachi for python の ユーザ辞書, 同義語辞書は、通常、 sudachipy.exe ubuild コマンドにより user_lex.csv , synonyms.txt から user.dic , synonyms.json を作成します。 今回、固有名詞のみを対象にした以下のような1コのTSVファイルから、これらを作…

全文+vector ハイブリッド検索 + cross encoder re-rank

構成 SQLite : FTS5(全文検索)、sqlite_vec(ベクトル検索) 融合 : weighted(正規化スコアの加重和) リランク : hotchpotch/japanese-reranker-cross-encoder-small-v1 形態素解析 : sudachi.rs、同義語辞書で代表語へ正規化 埋込みmodel : hotchpotch/static…

sudachi.rs を wasm版へ build

https://end0tknr.hateblo.jp/entry/20240918/1726660692 上記entryに記載しているように、 これまで形態素解析には、サーバ側?に sudachi.rs for pythonを使用し、 ブラウザ側に kuromoji.js を使用していました。 しかし、この構成では、ユーザ辞書をサー…

visual studio 2022 + c# による autocad 2026 plugin開発環境の準備

autolisp でも、ある程度の自動化は可能ですが、 ユーザがクリックするボタンを持つツールパレットまでは作成できない為、 今回、visual studio 2022 + c# による autocad 2026 plugin開発環境を準備 1 Visual Studio 2022 & Emacs Emulation の install 現…

graphragの index処理で作成されるparquetファイルと lancedb ファイル

先程のentryに関連するメモ parquet documents.parquet - 入力ドキュメント text_units.parquet - documents.parquet から分割の chunk entities.parquet - 抽出されたentity (node) relationships.parquet communities.parquet community_reports.parquet p…

graphrag + python for win + ollama + 日本語

GraphRAGを触ったことがなかった為、 graphrag + python for win + ollama + 日本語 の環境を構築。 構築後、graphragへ質問し、日本語での回答を得られました。 しかし、graphragらしい?回答の高精度さまでは感じられませんでした。 また、index作成やquery…

autocadの autolispマクロの練習 - その4

BOXをタイルのように敷き詰めました。 オブジェクトスナップONのままでは、タイル同士が隣接してしまうようでした。 (defun TileArray ( w h spaces_h spaces_v / x1 x2 y1 y2 ret_ents old_osmode old_snapmode) (setq old_osmode (getvar "OSMODE") old_sn…

windows batの練習 - UAC無効化、ドメイン参加、ユーザ追加、

UAC無効化 ドメイン参加 ユーザ追加 その他 いろいろ windows batの練習 - UAC無効化、ドメイン参加、ユーザ追加、 UAC無効化 @echo off rem インストール前の準備 echo インストール前の準備を開始します。 echo; echo 【処理内容】 echo ・UAC無効化 echo …

windowsのコマンドラインで pc再起動は shutdown -r -t 5

DOS> shutdown -r -t 5 DOS> shutdown /? 使用法: shutdown [/i | /l | /s | /sg | /r | /g | /a | /p | /h | /e | /o] [/hybrid] [/soft] [/fw] [/f] [/m \\コンピューター][/t xxx][/d [p|u:]xx:yy [/c "コメント"]] 引数なし ヘルプを表示します。「/?」…

javascript + perl から voicevox web api を 用い tts音声合成

https://voicevox.hiroshiba.jp/ https://voicevox.github.io/voicevox_engine/api/ voicevox for win は、無料で利用できるにも関わらず、 高品質な音声合成アプリです。 しかも web api経由で利用できますので、 javascript + perl から voicevox web api …

http request from python to qwen3-vl via ollama

text requestの練習 import requests API_SERVER_URL = "http://localhost:11434/api/chat" def main(): headers = {"Content-Type": "application/json"} json = { "model": "qwen3-vl:2b", "stream": False, "messages": [ {"role": "user", "content": "…

autocadの autolispマクロの練習 - その3

Help Help AutoCADの PUBLISHコマンドで、複数のdwgを連続してpdf化する為、 予めdir内にあるdwgファイル群の印刷スタイルを白黒 & A3横化 ; SETPLOTCFG command ; Set plot configuration for DWG files ; - Printer: AutoCAD PDF (General Documentation).…

autocadの autolispマクロの練習 - その2

Help Help modelレイヤにある直径18の円を17へ変更。 更に付随する寸法線や、円の直情にある断面を表す破線も移動 (defun c:chgcircle ( / dwgdir files f fullpath ) (princ "\nSTART CHGCIRCLE()") ; ActiveX のサポートに関連がある拡張 AutoLISP 関数を…

windows bat の練習

UAC 無効化の練習 rem @echo off は、コマンド自体を画面に表示しません @echo off echo 処理を開始します rem echo; は、空白行の表示 echo; rem openfiles は 管理者権限が必要な為、これを利用し、権限確認 openfiles > NUL 2>&1 if NOT %ERRORLEVEL% EQU…

ms wordで 目次に表示する見出しレベルの変更

参考資料タブ → 目次 → ユーザー設定の目次 → アウトライン レベル

autocadの autolispマクロの練習

modelレイヤ以外にあるブロック図の表の属性を空欄化。 属性を用いず、TEXTやMTEXTは、座標で検索し、削除 ; AutoCADから CONVDWGS というコマンドで実行 (defun c:convdwgs ( / dwgdir files f fullpath logfh logfile ) (princ "START CONVDWGS()\n") (vl-…

pywinauto for python で visioを操作し、svgへ変換

pywinauto for python で AutoCADを操作し、DWGをDXFへ変換 - end0tknr's kipple - web写経開発 上記 entryのvisio版です #!/usr/local/python3/bin/python3 # -*- coding: utf-8 -*- import glob import os import pywinauto import time import subprocess…

「公用文作成の考え方」について(建議) by 文化庁

先日、entryに記載した「理科系の作文技術」と同様、文章の記載方法をまとめたもの。 記載内容は同様ですが、こちらは、令和4年(2022年)作成のためでしょうか、 読みやすい印象を受けます。 https://www.bunka.go.jp/seisaku/bunkashingikai/kokugo/hokoku/9…

opencv for python で画像を比較し、pillow for python で結果をマルチページtiffにまとめる

import cv2 from PIL import Image def highlight_differences(image1_path, image2_path, output_path): # 画像を読み込む image1 = cv2.imread(image1_path) image2 = cv2.imread(image2_path) # 画像をグレースケールに変換 gray1 = cv2.cvtColor(image1,…

括弧などの英語名 (メモ)

記号 英語名 . period , comma ; semicolon : colon - hyphen ― dash (En dash、Em dash) … leader ( ) (round) brackets、parentheses [ ] (square) brackets { } (curl) brackets、braces < > (angle) brackets “ ” single quotation ‘ ’ double quotation

理科系の作文技術 - オレオレ要約

https://www.amazon.co.jp/dp/4121006240 (要約というより) 久しぶりに読み返したので、 押さえておきたいポイントを目次単位で記載しておきます。 序章 必要なことは洩れなく記述し、必要ないことは書かない 事実と意見を区別する あいまいな表現を避け、普…

DWG to SVG Converter by AnyDWG Software のコマンドライン版で、DWG →SVG 変換

AutoCAD自体には、SVGへのexport機能がありません。 触ってみた範囲では「DWG to SVG Converter」のコマンドライン版がよいです。 変換元のDWGの描き方によっては、正しくSVGへ変換できない場合もあると思いますが DWG to SVG Converter - Free download and…

import from utf-8 csv to SQL Server 2025 for Windows

目次 step1 - export from SAP ASE for Linux bcpコマンドでtableの全recordをexportする場合 bcpコマンドでtableの特定のrecordをexportする場合 step2 - import by strawberry perl bcp import from utf-8 csv to SQL Server 2022 for Linux - end0tknr's …

Document AI yomitoku for python で png画像を html化

oss版と商用版があるようですが、oss版で十分すごいです https://github.com/kotaro-kinoshita/yomitoku # -*- coding: utf-8 -*- import yomitoku import glob import logging import os import torch from tensorflow.python.client import device_lib; lo…