重複ファイル確認作業補助用HTMLファイル作成.js

//////////////////////////////////////////////////////////////////
//
// 重複ファイル確認作業補助用HTMLファイル作成JScript (Windows)
//
// [使い方]
//
// wscript.exe <スクリプトファイル名>
// cscript.exe <スクリプトファイル名>
//
// ・確認作業はスクリプト起動→HTMLファイル出力→ブラウザ→EveryThingで検索という流れで行うため
// 　EveryThingのES:プロトコルハンドラーを有効にしておく
//
// 　EveryThing - https://www.voidtools.com/
//
// ・下の「入力フォルダリスト」に重複を検出したい対象フォルダをセット
// 　（\は\\に変換しておく）
// ・wscript.exe <このスクリプトファイル名> で実行
// ・処理後に結果が「ブラウザで表示」される
// ・リンクからEveryThingの検索
// ・目視で重複確認、必要ならファイルの中身チェック、不要ファイルを削除
//
//
// [注意点]
// ・"(カテゴリ) [作者名] タイトル ...第01巻" or "[作者名] タイトル ...第01巻"
// 　という書式の日本語ファイル名を想定
//
// ・「判定がガバガバ」なので同一作者でタイトルが少し違っていても重複と判定。
// 　EveryThing上での目視判断必須。
//
////////////////////////////////////////////////////////////////////////////////////

// 「入力フォルダリスト」
var arg_dirs =[

"C:\\download1",
"C:\\download2",
"C:\\download3",
"C:\\download4",

""];




//出力ファイルパス (指定がなければテンポラリフォルダに一時ファイルを作成して使用)
//var output_html_file = "C:\\dup_check_test.html";
var output_html_file = "";
var delete_output_html_file = true;
//var delete_output_html_file = false;

////////////////////////////////////////////////////////////////////////////////////

var FILES = {};
var FILES_2 = {};
var limit = 0;
var fs = new ActiveXObject( "Scripting.FileSystemObject" );
var dup_count = 0;
var dup_size = 0;

if (!output_html_file)
{
    output_html_file = fs.GetSpecialFolder(2) + "\\$" + Math.random().toString(36).slice(-8) + ".html";
}

for (var i=0; i < arg_dirs.length; i++)
{
    if (!arg_dirs[i]) continue;
    var folder = fs.GetFolder(arg_dirs[i]);
    var items = [null,null];
    items[0] = new Enumerator(folder.SubFolders);
    items[1] = new Enumerator(folder.Files);
    for (var j=0; j<items.length; j++)
    {
        for (; !items[j].atEnd(); items[j].moveNext())
        {
            var filename = items[j].item().Name;

            var title = "";
            var is_completed = false;
            var number_1 = 1;
            var number_2 = 0;
            var r = null;

//          if ( r = filename.match(/^(?:\([^\)]+?\) *)?(\[[^\]]+?\] +.+?)(?:(?: |！|？|。|、).*?)? (全|第)?(\d+)(?:-(\d+))?巻/) )
            if ( r = filename.match(/^(?:\([^\)]+?\) *)?(\[[^\]]+?\] +.+?)(?:(?: |\uFF01|\uFF1F|\u3002|\u3001).*?)? (\u7B2C|\u5168)?(\d+)(?:-(\d+))?\u5DFB/) )
            {
                title = r[1];
                is_completed = (r[2] && (r[2] == "\u5168"));
//              is_completed = (r[2] && (r[2] == "全"));
                number_1 = Number(r[3]);
                number_2 = r[4]?Number(r[4]):0;
            }
            else if (
//              (r = filename.match(/^(?:\([^\)]+?\) *)?(\[[^\]]+?\] +.+?)(?:(?: |！|？|。|、).*?)? v(\d+)(?:\-(\d+))?/))
//              && (r = filename.match(/^(?:\([^\)]+?\) *)?(\[[^\]]+?\] +.+?)(?:(?: |！|？|。|、).*?)? (\d+)(?:\-(\d+))?/))
                (r = filename.match(/^(?:\([^\)]+?\) *)?(\[[^\]]+?\] +.+?)(?:(?: |\uFF01|\uFF1F|\u3002|\u3001).*?)? v(\d+)(?:\-(\d+))?/))
                && (r = filename.match(/^(?:\([^\)]+?\) *)?(\[[^\]]+?\] +.+?)(?:(?: |\uFF01|\uFF1F|\u3002|\u3001).*?)? (\d+)(?:\-(\d+))?/))
                )
            {
                title = r[1];
                number_1 = Number(r[2]);
                number_2 = r[3]?Number(r[3]):0;
            }
            else
                continue;

//          if (r = title.match(/^(\[[^\]]+?\] .+)(～|-|ｰ|－|―).+\2/))
//          if (r = title.match(/^(\[[^\]]+?\] .+)(\uFF5E|\-|\uFF70|\uFF0D|\u2015).+\2/))
//              title = r[1];
            title = title.replace(/^(\[[^\]]+?\] .+?) *(\uFF5E|\-|\uFF70|\uFF0D|\u2015).+\2/, "$1");

            var size = items[j].item().Size;
            if (size == 0)
            {
//              if (j==0)
//                  WScript.echo("Size=0 error. "+filename);
                continue;
            }

            if (is_completed)
            {
                number_2 = number_1;
                number_1 = 1;
            }

            var numbers = [];
            if (number_2 != 0)
            {
                if (number_2 <= number_1) continue;

                for (var k=number_1;k<=number_2;k++)
                    numbers.push(k);
            }
            else
            {
                numbers = [number_1];
            }

            for (var k=0;k<numbers.length;k++)
            {
                var x = title + "<>" + numbers[k];

                if (x in FILES)
                {
                    // 重複検出
                    FILES[x] += 1;

                    if (title in FILES_2)
                        FILES_2[title] += 1;
                    else
                        FILES_2[title] =  1;
                    dup_count++;
                    dup_size+=size;
                }
                else
                    // 未だ重複無し
                    FILES[x] = 1;

//              WScript.echo(FILES[x] +"\t"+ x);
            }
        }

        items[j]=null;
    }
}

// ソート
var FILES_3 = [];
for (x in FILES_2) FILES_3.push(x);
FILES_3 = FILES_3.sort();

// Object FILES = {"[BOOK_AUTHOR] BOOK_TITLE_WORD<>NUMBER":COUNT, ...};

// COUNT2以上の重複した"[BOOK_AUTHOR] BOOK_TITLE_WORD<>NUMBER"から"<>NUMBER"を除去して
// 表示/検索ワード用の"[BOOK_AUTHOR] BOOK_TITLE_WORD"をkeyにする
// Object FILES2 = {"[BOOK_AUTHOR] BOOK_TITLE_WORD":COUNT, ...};

// Object FILES3 = ["[BOOK_AUTHOR] BOOK_TITLE_WORD", ...];

// 重複ファイルリストをHTMLファイルへ出力
var fout = fs.OpenTextFile( output_html_file, 2, true );
fout.Write("<div>重複ファイル数："+dup_count+", 合計サイズ："+dup_size.toLocaleString().replace(/\.00$/,"")+" bytes ("+ sizeStr(dup_size) +")</div>\n");
fout.Write("<div>ソート：<button onclick=\"sortElemByCount()\">ファイル数</button><button onclick=\"sortElemByTitle()\">タイトル</button></div><br>\n");
fout.Write("<div id=dup_list>\n");
for (var i=0; i<FILES_3.length; i++)
{
    if (r = FILES_3[i].match(/^\[(.+)\] (.+)/))
    {
        var base = r[2];
//      var authors = r[1].split(/(\&|＆|×|\,|、|，|／)/g);
        var authors = r[1].split(/(\&|\uFF06|\u00D7|\,|\u3001|\uFF0C|\uFF0F)/g);
        authors.push(base);

        fout.Write("<div class=\"item\"><span class=count>"+FILES_2[FILES_3[i]]+"</span> <a href=\"es:" + authors.join("%20") + "\"><span class=disp_title>" + FILES_3[i] + "</span></a></div>\n");
    }
}
fout.Write("</div>\n");
// ソート用JavaScript
fout.Write(
    "<script>\n"+
    "var sortElem = f => {\n"+
    "   let d=document.getElementById('dup_list');\n"+
    "   let a=Array.prototype.slice.call(document.querySelectorAll('div.item'));\n"+
    "   a.sort(f);\n"+
    "   for (let i=0;i<a.length;i++)d.appendChild(d.removeChild(a[i]));\n"+
    "};\n"+
    "var countSortFnA = (a,b)=>Number(a.querySelector('span.count').textContent)-Number(b.querySelector('span.count').textContent);\n"+
    "var titleSortFnA = (a,b)=>a.querySelector('span.disp_title').textContent.localeCompare(b.querySelector('span.disp_title').textContent);\n"+
    "var countSortFnB = (a,b)=>countSortFnA(b,a);\n"+
    "var titleSortFnB = (a,b)=>titleSortFnA(b,a);\n"+
    "window.sortElemByCount = ()=>sortElem((window.sort_title_f=true,window.sort_count_f=window.sort_count_f?false:true)?countSortFnB:countSortFnA);\n"+
    "window.sortElemByTitle = ()=>sortElem((window.sort_count_f=false,window.sort_title_f=window.sort_title_f?false:true)?titleSortFnB:titleSortFnA);\n"+
    "</script>\n"
);

fout.Close();
fout = null;

// 出力したHTMLファイルを関連づけられたアプリで起動
var command = "\"" + output_html_file + "\"";
var shell = WScript.CreateObject('WScript.Shell');
//shell.Run(command, 1, true);
shell.Run(command);
shell=null;

// ブラウザに読ませた後、HTMLファイルを削除
if (delete_output_html_file)
{
    WScript.Sleep(10 * 1000);
    fs.DeleteFile(output_html_file);
}

fs = null;


function sizeStr(d)
{
    var current = Math.floor(d);
    var basic = 1000;
    var units = ['bytes','KB','MB','GB','TB','PB'];
    var i=0;
    while (i < units.length)
    {
        var tmp = Math.floor(current/basic);
        if (0==tmp) break;
        current = tmp;
        i++;
    }
    return current.toLocaleString().replace(/\.00$/,"")+units[i];
}