ChatGPT+Mac端末を使用してファイルを整理する試み

いつものように、日常の診察で患者の証素を取得した後、心の中で自分の処方を思い描き、先生が出した処方と照らし合わせて、薬味と用量が三味以内であれば理想的です。しかし、今日のテーマは先生の外来診察に従って処方を写すことではなく、先生の外来には電子病歴を記録する習慣があり、小さなコンピュータには 7、8 年分の症例が次々と記録されています。それぞれは txt 形式で Windows 7 システムに保存されており、これは先生の臨床思想を学ぶための非常に良い資料であり、データ分析に非常に適しています。

Obsidian を長期間使用してノートや資料管理を行っている者として、これらの病歴を Obsidian にインポートして私の症例学習資料庫とすることに決めました。Obsidian の強力なプラグインライブラリとローカルオフラインストレージは私のニーズを満たしており、全体検索は処方情報を取得するのに非常に便利です。

Obsidian Tcm Folder panel

見招拆招#

しかし、ファイルを自分の Mac にコピーした後、問題が次々と発生しました。

まず、Windows と Mac のシステムではテキストフォーマットが異なり、多くの txt ファイルが Mac にコピーされた後に文字化けし、さらには開けなくなることもあります。調査の結果、原因は先生の小さなコンピュータが Windows 7 で GB18030 エンコーディングを使用しているのに対し、Mac が UTF-8 フォーマットを使用しているためです。具体的には、知乎の以下の説明を参照してください：なぜ Windows の中国語はデフォルトで GB18030 を使用し、UTF-8 ではないのか？

次に、Obsidian は Markdown フォーマットで保存するため、数千の症例を md フォーマットに変換する必要があります。

しかし、これらは小さな問題で、Terminal（ターミナル）を使って 2 行のコードで解決できます。
Mac terminal

iconv コマンド#

iconv はファイルエンコーディングを変換するためのツールで、このコマンドラインは「iconv コマンドを使用して、GB18030 ファイルを UTF-8 ファイルに変換し、出力として変換されたファイルを出力する」と理解できます。しかし、千を超える症例ファイルに直面して、バッチ変換のコマンドが必要です：

mv コマンド#

エンコーディングフォーマットの問題が解決したら、Obsidian がサポートする Markdown フォーマットファイルに変換する方法を見てみましょう：

mv は「移動 / 名前変更」コマンドで、ファイルの拡張子を変更するために使用され、「.txt ファイルを.md ファイルに移動する」と理解できます。バッチ変換コマンドは：

借東風#

変換が完了すれば、資料庫の整理も一段落できると思っていましたが、初歩的なチェックを行ったところ、頭を悩ませる問題が発覚しました！

症例に重複するファイルが存在する
重複するファイルの中には「ファイル名は同じ」だが「内容が異なる」場合がある

数千の症例ファイルに直面して、手動で一つ一つチェックし、冗長なファイルを削除するのは？明らかに現実的ではなく、正直なあなたや私にとって時間の大きな無駄であり、何度も繰り返す機械的な操作は心を萎えさせ、考えるだけで頭が痛くなります。

何度も考えた末、私は時代の風を借りて、ChatGPT のプログラミング能力を活用して、これらの雑務を手伝ってもらうことに決めました。

ChatGPT とのコミュニケーション#

ChatGPT のコーディング能力は非常に優れていますが、大部分の時間で満足のいく結果を出力することはありません。したがって、重点は ChatGPT とのコミュニケーションスキルに置くべきです。

質問を提起し、GPT に説明チュートリアルを出力させることを目的とします。
要求は詳細に書く必要があり、論文を書くのと同じくらい詳細に、各ステップを明確にします。
繰り返しコミュニケーションを行い、指導教官があなたに研究計画書を何度も修正させるように、GPT に要求を伝えれば、GPT は文脈を考慮して要求を満たします。
理解できない知識点に出会った場合は、「新しい会話」を開き、現在の対話に影響を与えないようにします。
繰り返し修正した結果が満足できない場合は、新しい対話ボックスを開き、前のコミュニケーションで発生した問題を見つけ、質問テキストを整理して再出力し、満足するまで続けます。
元のファイルをバックアップし、小さなサンプル実験を行い、問題が発生した場合は GPT に修正をフィードバックし、3-5 のステップを繰り返します。

以下は私が最終的に提起した質問テキストです（新しい「会話」を開いて GPT の出力結果を得て、結果に満足しました、やった！）
How to aks a good question to GPT

ChatGPT の出力結果

# 必要なターゲットフォルダを作成
mkdir -p 無重複 重複1 重複2 不全重複1 不全重複2

# folder1とfolder2内のすべてのMarkdownファイルを遍歴
for file in folder1/*.md folder2/*.md; do
    # ファイル名を取得
    filename=$(basename "$file")
    
    # 2つのファイルの完全なパスを定義
    file1="folder1/$filename"
    file2="folder2/$filename"
    
    # 2つのファイルが両方存在するか確認
    if [[ -f "$file1" && -f "$file2" ]]; then
        # 2つのファイルのMD5チェックサムを計算
        md5_1=$(md5 -q "$file1")
        md5_2=$(md5 -q "$file2")
        
        # チェックサムを比較
        if [[ "$md5_1" != "$md5_2" ]]; then
            # チェックサムが異なる場合、不全重複フォルダに移動
            mv "$file1" 不全重複1/
            mv "$file2" 不全重複2/
        else
            # チェックサムが同じ場合、重複フォルダに移動
            mv "$file1" 重複1/
            mv "$file2" 重複2/
        fi
    else
        # 片方のファイルのみ存在する場合、無重複フォルダに移動
        if [[ -f "$file1" ]]; then
            mv "$file1" 無重複/
        fi
        if [[ -f "$file2" ]]; then
            mv "$file2" 無重複/
        fi
    fi
done

# 「重複1」と「不全重複1」のファイルを「無重複」フォルダに移動
mv 重複1/* 無重複/
mv 不全重複1/* 無重複/

# すべての空フォルダを削除
find . -type d -empty -delete

（このコマンドラインはそのまま使用できますが、必ず最初に cd フォルダを実行してください！）

附：ChatGPT を用いてエンコーディングとファイルフォーマットの変換手順を最適化#

明確な要求：フォルダ内の GB18030 を Unicode UTF-8 フォーマットにバッチ変換し、.md フォーマットに変更する！
ChatGPT との対話で要求を提起：
ask GPT1

コマンドラインを検証する際に発見した具体的な問題を GPT にフィードバックして修正を依頼：
ask GPT2

GPT のフィードバック最終結果および操作手順

コンピュータのターミナルを開きます；
cd コマンドを使用して変換するファイルのディレクトリに切り替えます；
以下のコマンドを入力します：

mkdir -p utf8_markdown_files failed_files && for file in *.txt; do filename="${file%.txt}"; iconv -f GB18030 -t UTF-8 "$file" > "utf8_markdown_files/${filename}.md" && echo "変換完了: $file -> utf8_markdown_files/${filename}.md" || { mv "$file" failed_files/ && echo "変換失敗、移動しました: $file -> failed_files/"; }; done

変換に失敗した.txt ファイルを確認し、大体がすでに UTF-8 フォーマットであるため、まず cd で failed_files フォルダに移動し、次に以下のコマンドで再度バッチ変換を行います：

for file in *.txt; do mv "$file" "${file%.txt}.md"; done
変換が完了したら、元のファイルを置き換えて 2 つのフォルダを統合します。

これが、芸芸の中で特定のニーズを解決するために新しい事物に挑戦する人間の試みの一例です～
ChatGPT が仕事を手伝うことに関しては、中医が証素を見つけて正確に証を立て、個別化された処方を出すのと同じです。正しい方法を見つければ、目標に到達できます！