郵便番号CSVを材料にして正規表現のパターンテストと所要時間の検証

わんくま同盟ホームわんくま同盟の最新記事 MyBlog 　　　Ognac試行部屋　　　

パターン(任意のパターンを入力してテストできます。)
パターン選択

所要時間

抽出結果(最大100件)

御託

MasterPageの要素を更新している。 Page.Header.FindControl

日本郵便が公開している郵便番号データ(CSV形式　住所 122,523件 + 事業所 21,283件 : 2008年8月度のデータ)を全件シーケンス読みして、設定した正規表現パターンで抽出します。所要時間を表示します。(抽出結果は n件を上限とし、超過する場合は、読み捨てします。トラフィック量抑制のためです。)

ソース


■e:\user\cervi.reseller\ognadmin\ognogn.com\www\Regex\TryRegex_ZIP_de_Benchimark.aspx■
<%@ Page Language="C#" MasterPageFile="~/MasterPage.master" AutoEventWireup="true" CodeFile="TryRegex_ZIP_de_Benchimark.aspx.cs" Inherits="Regex_TryRegex_ZIP_de_Benchimark" Title="郵便番号CSVを材料にして正規表現のパターンテストと所要時間の検証" maintainScrollPositionOnPostBack ="true"%>

<asp:Content ID="Content1" ContentPlaceHolderID="head" Runat="Server">
</asp:Content>
<asp:Content ID="Content2" ContentPlaceHolderID="ContentPlaceHolder1" Runat="Server">
    <asp:UpdatePanel ID="UpdatePanel1" runat="server">
    <ContentTemplate>
    <asp:Label ID="LBL_Pattern" runat="server" Text="パターン(任意のパターンを入力してテストできます。)"></asp:Label>
&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;
    <asp:TextBox ID="TB_PATTERN" runat="server" Width="100%"></asp:TextBox>
    <br />
    <asp:Label ID="LBL_Pattern_CMB" runat="server" Text="パターン選択"></asp:Label>
    <asp:DropDownList ID="DDL_pattern" runat="server" AutoPostBack="True" 
        onselectedindexchanged="DDL_pattern_SelectedIndexChanged">
    </asp:DropDownList>
        <p>
        <asp:Label ID="LBL_ShoyoJikan" runat="server" Text="所要時間"></asp:Label>
    &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;
    <asp:Button ID="btn_SearchStart" runat="server" 
        style="height: 21px" Text="検索開始" onclick="btn_SearchStart_Click" />
            <asp:Button ID="btn_TB_Result_Clear" runat="server" 
                onclick="btn_TB_Result_Clear_Click" Text="↓欄のクリア" />
    </p>

    <asp:TextBox ID="TB_RESULT" runat="server" Height="205px" ReadOnly="True" 
        TextMode="MultiLine" Width="100%"></asp:TextBox>

    <br />
    <asp:Label ID="lbl_ChushutiKekka" runat="server" Text="抽出結果(最大n件)"></asp:Label>

    <br />
    <br />
    <asp:TextBox ID="TB_ChushutuKekka" runat="server" Height="270px" 
        ReadOnly="True" TextMode="MultiLine" Width="100%"></asp:TextBox>


    </ContentTemplate>
    </asp:UpdatePanel>
</asp:Content>



■e:\user\cervi.reseller\ognadmin\ognogn.com\www\Regex\TryRegex_ZIP_de_Benchimark.aspx.cs■
using System;
using System.Collections;
using System.Configuration;
using System.Data;
using System.Linq;
using System.Web;
using System.Web.Security;
using System.Web.UI;
using System.Web.UI.HtmlControls;
using System.Web.UI.WebControls;
using System.Web.UI.WebControls.WebParts;
using System.Xml.Linq;
using System.Collections.Generic;
using System.ComponentModel;
using System.Drawing;
using System.Text;
using System.Text.RegularExpressions;
using System.IO;

public partial class Regex_TryRegex_ZIP_de_Benchimark : System.Web.UI.Page
{
    protected void Page_PreInit(object sender, EventArgs e)
    {
        Page.Theme = (string)Session["テーマ"];
    }


    private const int MaxKensu = 100;
    private StringBuilder sb;
    protected void Page_Load(object sender, EventArgs e)
    {
        sb = new StringBuilder(1024);
        if (!Page.IsPostBack)
        {

            TextBox TB = (TextBox)Page.Header.FindControl("TB_M_御託");
            if (TB != null)
            {
                TB.Text = TB.Text.Replace("n件", MaxKensu.ToString() + "件");
            }


            //TB_M_御託.Text = TB_M_御託.Text.Replace("n件", MaxKensu.ToString() + "件");
            lbl_ChushutiKekka.Text = lbl_ChushutiKekka.Text.Replace("n件", MaxKensu.ToString() + "件");
            DDL_pattern.Items.Clear();
            DDL_pattern.Items.Add(new ListItem("--選択--", ""));
            DDL_pattern.Items.Add(new ListItem("町・村・市が付く住所(50秒くらい要します)", "(?=.*町)(?=.*村)(?=.*市)"));
            DDL_pattern.Items.Add(new ListItem("市が３個付く住所", "市.*市.*市"));
            DDL_pattern.Items.Add(new ListItem("町の下に町がある住所", "町.*町"));
            DDL_pattern.Items.Add(new ListItem("東西南北が揃っている住所(30秒くらい要します)", "(?=.*東)(?=.*西)(?=.*南)(?=.*北)"));
            DDL_pattern.Items.Add(new ListItem("神戸市と大阪市", "(神戸|大阪)市"));
            DDL_pattern.Items.Add(new ListItem("政令都市の区)", "^.*(?<=(札幌|仙台|さいたま|千葉|横浜|川崎|新潟|静岡|浜松|名古屋|京都|大阪|堺|神戸|広島|北九州|福岡))市.*区.*$"));
            DDL_pattern.Items.Add(new ListItem("政令都市以外の区(場違いな区も入る）)", "^.*(?<!(札幌|仙台|さいたま|千葉|横浜|川崎|新潟|静岡|浜松|名古屋|京都|大阪|堺|神戸|広島|北九州|福岡))市.*区.*$"));
            DDL_pattern.Items.Add(new ListItem("政令都市以外の区(場違いな区を排除）)", "^.*(?<!(札幌|仙台|さいたま|千葉|横浜|川崎|新潟|静岡|浜松|名古屋|京都|大阪|堺|神戸|広島|北九州|福岡))市.*[^一二三四五六七八九１２３４５６７８９]+区.*$"));
            DDL_pattern.Items.Add(new ListItem("政令都市以外の区(場違いな区を排除しきれない）)", "^.*(?<!(札幌|仙台|さいたま|千葉|横浜|川崎|新潟|静岡|浜松|名古屋|京都|大阪|堺|神戸|広島|北九州|福岡))市.*[^一-九１-９]+区.*$"));
            //政令都市以外の区
            //DDL_pattern.Items.Add(new ListItem("政令都市以外の区(場違いな区も入る）)", "^.*(?&lt;!(札幌|仙台|さいたま|千葉|横浜|川崎|新潟|静岡|浜松|名古屋|京都|大阪|堺|神戸|広島|北九州|福岡))市.*区.*$"));
            //政令都市以外の区



        }

    }
    protected void DDL_pattern_SelectedIndexChanged(object sender, EventArgs e)
    {
        TB_PATTERN.Text = DDL_pattern.SelectedItem.Value;
    }
    //素読時刻
    private TimeSpan Run_Regex(string Joken, ref int matchSu)
    {
        TB_ChushutuKekka.Text = string.Empty;

        Regex re = null;
        try
        {

            re = new Regex(Joken, RegexOptions.Compiled | RegexOptions.IgnoreCase | RegexOptions.Singleline);
        }
        catch (Exception ex)
        {
            TB_ChushutuKekka.Text = ex.Message;
            return new TimeSpan();
        }
        using (var sr = new StreamReader(MapPath(@"~/App_Data/Jusho_Jigyosho.csv"), Encoding.GetEncoding("Shift_JIS")))
        {
            sb.Length = 0;
            var st = DateTime.Now;
            string line = string.Empty;
            var cnt = 0;
            while ((line = sr.ReadLine()) != null)
            {
                if (Joken.Length == 0)
                {
                    matchSu++;
                    if (matchSu < MaxKensu) sb.AppendLine(line);
                }
                else
                {
                    if (re.IsMatch(line))
                    {
                        matchSu++;
                        if (matchSu < MaxKensu) sb.AppendLine(line);

                    }

                }
                cnt++;

            }
            var ed = DateTime.Now;
            var dist = ed.Subtract(st);

            TB_ChushutuKekka.Text = sb.ToString();

            return dist;

        }

    }
    protected void btn_SearchStart_Click(object sender, EventArgs e)
    {
        int matchSu = 0;
        var Joken = TB_PATTERN.Text;
        var rc = Run_Regex(Joken, ref matchSu);
        if (Joken.Length == 0) Joken = "空読";
        TB_RESULT.Text += "所要時間(秒) : [" + rc.ToString().Substring(6) + "] 抽出件数[" + matchSu.ToString() + "]\n";

    }
    protected void btn_TB_Result_Clear_Click(object sender, EventArgs e)
    {
        TB_RESULT.Text = string.Empty;
    }
}