Class: ConverterBase
- Inherits:
-
Object
- Object
- ConverterBase
- Defined in:
- lib/converterbase.rb
Constant Summary collapse
- KANJI_NUM =
"〇一二三四五六七八九"- KANJI_NUM_UNITS =
%w(万 億 兆 京).unshift("")
- KANJI_KURAI =
%w(十 百 千).unshift("")
- KANJI_NUM_UNITS_DIGIT =
{ "十" => 1, "百" => 2, "千" => 3, "万" => 4, "億" => 8, "兆" => 12, "京" => 16 }
- ROME_NUM_ALPHABET =
%w(II III IV VI VII VIII IX ii iii iv vi vii viii ix)- ROME_NUM =
%w(Ⅱ Ⅲ Ⅳ Ⅵ Ⅶ Ⅷ Ⅸ ⅱ ⅲ ⅳ ⅵ ⅶ ⅷ ⅸ)- HALF_INDENT_TARGET =
/^[ \t]*([〔「『((【〈《≪〝])/- FULL_INDENT_TARGET =
/^[ \t]*(――)/- AUTHOR_INTRODUCTION_SPLITTER =
前書き・後書きの検出及び処理 ==============================
/^ *[\**]{44}$/- AUTHOR_POSTSCRIPT_SPLITTER =
/^ *[\**]{48}$/- AUTHOR_COMMENT_CHUKI =
{ introduction: { open: "[#ここから前書き]", close: "[#ここで前書き終わり]" }, postscript: { open: "[#ここから後書き]", close: "[#ここで後書き終わり]" } }
- BRACKETS =
[%w(「 」), %w(『 』)]
- OPENCLOSE_REGEXPS =
ネストに対応したかぎ括弧の正規表現
BRACKETS.map { |bracket| bo, bc = bracket /(?<oc>#{bo}[^#{bo+bc}]*(?:\g<oc>[^#{bo+bc}]*)*#{bc})/m }
- CHARACTER_OF_RUBY =
"一-龠A-Za-zA-Za-z"
Instance Attribute Summary collapse
-
#use_dakuten_font ⇒ Object
readonly
Returns the value of attribute use_dakuten_font.
Class Method Summary collapse
Instance Method Summary collapse
- #__calc_kanji_num_with_unit(string) ⇒ Object
- #__calc_sum_unit(units) ⇒ Object
- #after(io, text_type) ⇒ Object
- #after_convert(io) ⇒ Object
-
#alphabet_to_zenkaku(data, force = false) ⇒ Object
半角アルファベットを全角に変換する.
- #author_comment_force_close ⇒ Object
-
#auto_indent(data) ⇒ Object
行頭字下げ.
-
#auto_join_in_brackets(data) ⇒ Object
かぎ括弧内自動連結.
-
#auto_join_line(data) ⇒ Object
手動折り返しの自動連結.
- #before(io, text_type) ⇒ Object
- #before_convert(io) ⇒ Object
- #blank_line?(line) ⇒ Boolean
- #border_symbol?(line) ⇒ Boolean
-
#comments_block?(line) ⇒ Boolean
コメントブロックを検出する.
- #convert(text, text_type) ⇒ Object
-
#convert_aozora_special_charactoers(data) ⇒ Object
特殊な記号を外字注記に変換.
-
#convert_arrow(data) ⇒ Object
おかしくなりやすい矢印文字の変換.
-
#convert_dakuten_char_to_font(data) ⇒ Object
濁点のついてない文字に濁点をつける表現を対応.
-
#convert_for_all_data(data) ⇒ Object
小説データ全体に対して施す変換.
-
#convert_fraction_and_date(data) ⇒ Object
分数表記を○分の○表記に変更、及び日付表記を検出.
-
#convert_horizontal_ellipsis(data) ⇒ Object
中黒(・)や句読点を並べて三点リーダーもどきにしているのを三点リーダーに変換.
-
#convert_kanji_num_with_unit(data, lower_digit_zero = 0) ⇒ Object
漢数字を単位を使った表現に変換.
-
#convert_main(io) ⇒ Object
変換処理本体.
-
#convert_novel_rule(data) ⇒ Object
小説のルールに沿うように変換.
-
#convert_numbers(data) ⇒ Object
数字の変換.
-
#convert_page_break(data) ⇒ Object
一定以上の連続する空行を改ページに変換.
-
#convert_rome_numeric(data) ⇒ Object
ローマ数字っぽいアルファベットをローマ数字に変換.
-
#convert_special_characters(data) ⇒ Object
特定の表現・記号を変換していく.
-
#convert_tatechuyoko(data) ⇒ Object
縦中横にすべき表現を変換.
- #delay_outputs(data = "") ⇒ Object
-
#enchant_midashi(data) ⇒ Object
[#改ページ]直後の行を見出しに設定する.
-
#erase_comments_block(data) ⇒ Object
コメントブロックを削除する.
-
#erase_introduction(data) ⇒ Object
前書きを削除する.
-
#erase_postscript(data) ⇒ Object
後書きを削除する.
-
#exception_reconvert_kanji_to_num(data) ⇒ Object
アラビア数字を使うべきところはアラビア数字に戻す.
-
#find_introduction? ⇒ Boolean
前書きの検出.
-
#force_indent_special_chapter(line) ⇒ Object
章見出しっぽい文字列を字下げして前後に空行を入れる.
-
#half_indent_bracket(data) ⇒ Object
行頭かぎ括弧(等)に二分アキを追加する.
-
#hankaku_num_to_zenkaku_num(data) ⇒ Object
半角アラビア数字の全角化.
- #inclusion_author_comment_block?(line) ⇒ Boolean
-
#initialize(setting, inspector, illustration) ⇒ ConverterBase
constructor
A new instance of ConverterBase.
- #initialize_member_values ⇒ Object
-
#insert_blank_line_to_border_symbol(line) ⇒ Object
■などの区切りの前後には空行が必ず存在するようにする.
-
#insert_separate_space(data) ⇒ Object
特定の記号の直後は全角アキを挿入する.
-
#jisage(line, num) ⇒ Object
行頭空白を考慮した字下げ.
-
#join_inner_bracket(str) ⇒ Object
改行を連結した文章を作る.
- #kanji_num_to_integer(string) ⇒ Object
- #leave_author_comment_block?(line) ⇒ Boolean
- #midashi(str) ⇒ Object
-
#modify_kana_ni_to_kanji_ni(data) ⇒ Object
漢字の二じゃなくて間違えてカタカナのニを使ってるのを校正する.
-
#narou_ruby(data) ⇒ Object
小説家になろうのルビ対策.
-
#num_to_kanji(data) ⇒ Object
アラビア数字を漢数字に.
- #object_of_ruby?(char) ⇒ Boolean
- #outputs(data = "", force = false) ⇒ Object
-
#page_break?(line) ⇒ Boolean
改ページある?.
- #process_author_comment(line) ⇒ Object
-
#rebuild_english_sentences(data) ⇒ Object
英文を再構成する.
- #rebuild_hankaku_num_and_comma(data) ⇒ Object
- #rebuild_illust(data) ⇒ Object
- #rebuild_kanji_num(data) ⇒ Object
- #rebuild_url(data) ⇒ Object
-
#replace_by_replace_txt(text) ⇒ Object
replace.txt により単純置換.
-
#replace_illust_tag(data) ⇒ Object
なろうの挿絵タグを挿絵注釈に変換 挿絵画像が存在しなければダウンロードして保存する.
-
#replace_narou_tag(data) ⇒ Object
小説家になろう専用タグを置換.
- #replace_tatesen(str) ⇒ Object
-
#replace_url(data) ⇒ Object
URL っぽい文字列を一旦別のIDに置き換えてあとで復元することで、変換処理の影響を受けさせない.
-
#rstrip_all_lines(data) ⇒ Object
すべての行の行末空白を削除.
- #sesame(str, ten) ⇒ Object
- #stash_hankaku_num_and_comma(num) ⇒ Object
- #stash_kanji_num(data) ⇒ Object
-
#symbols_to_zenkaku(data) ⇒ Object
記号を全角に変換.
-
#tcy(str) ⇒ Object
縦中横注記取得.
- #to_ruby(match, m1, m2, openclose_symbols) ⇒ Object
-
#zenkaku_num_to_hankaku_num(num) ⇒ Object
全角数字を半角アラビア数字に.
-
#zenkaku_num_to_kanji(str) ⇒ Object
全角アラビア数字を漢数字に.
-
#zenkaku_rstrip(line) ⇒ Object
全角版 String#rstrip!.
Constructor Details
#initialize(setting, inspector, illustration) ⇒ ConverterBase
Returns a new instance of ConverterBase.
28 29 30 31 32 33 34 |
# File 'lib/converterbase.rb', line 28 def initialize(setting, inspector, illustration) @setting = setting @inspector = inspector @illustration = illustration @use_dakuten_font = false initialize_member_values end |
Instance Attribute Details
#use_dakuten_font ⇒ Object (readonly)
Returns the value of attribute use_dakuten_font.
14 15 16 |
# File 'lib/converterbase.rb', line 14 def use_dakuten_font @use_dakuten_font end |
Class Method Details
.rebuild_brackets(data, stack) ⇒ Object
737 738 739 740 741 |
# File 'lib/converterbase.rb', line 737 def self.rebuild_brackets(data, stack) data.gsub(/[#かぎ括弧=(\d+)]/) do stack[$1.to_i] end end |
Instance Method Details
#__calc_kanji_num_with_unit(string) ⇒ Object
153 154 155 156 157 158 159 160 161 162 163 164 165 166 |
# File 'lib/converterbase.rb', line 153 def __calc_kanji_num_with_unit(string) total = 0 string.scan(/([#{KANJI_NUM}]*)([十百千]*)/) do |num, units| break if num + units == "" num = "1" if num.empty? num_tr = num.tr(KANJI_NUM, "0-9") if units.empty? total += num_tr.to_i else total += (num_tr + __calc_sum_unit(units).to_s[1, 99]).to_i end end total end |
#__calc_sum_unit(units) ⇒ Object
147 148 149 150 151 |
# File 'lib/converterbase.rb', line 147 def __calc_sum_unit(units) units.each_char.inject(0) do |sum, c| sum + ("1" + "0" * KANJI_NUM_UNITS_DIGIT[c]).to_i end end |
#after(io, text_type) ⇒ Object
24 25 26 |
# File 'lib/converterbase.rb', line 24 def after(io, text_type) io end |
#after_convert(io) ⇒ Object
990 991 992 |
# File 'lib/converterbase.rb', line 990 def after_convert(io) after(io, @text_type) end |
#alphabet_to_zenkaku(data, force = false) ⇒ Object
半角アルファベットを全角に変換する
force : 強制的に全アルファベットを全角にするか?
false
437 438 439 440 441 442 443 444 445 446 447 448 449 450 451 452 |
# File 'lib/converterbase.rb', line 437 def alphabet_to_zenkaku(data, force = false) if force data.gsub!(/[a-zA-Z]+/) do |match| match.tr("a-zA-Z", "a-zA-Z") end else data.gsub!(/[\w.,!?' ]+/) do |match| if match.split(" ").count > 1 @english_sentences << match "[#英文=#{@english_sentences.count - 1}]" else match.tr("a-zA-Z", "a-zA-Z") end end end end |
#author_comment_force_close ⇒ Object
679 680 681 682 683 |
# File 'lib/converterbase.rb', line 679 def if outputs(AUTHOR_COMMENT_CHUKI[][:close]) end end |
#auto_indent(data) ⇒ Object
行頭字下げ
必ず下げなければいけないところは強制的に字下げ他の部分は全体的に判断して字下げ
525 526 527 528 529 530 531 532 |
# File 'lib/converterbase.rb', line 525 def auto_indent(data) data.gsub!(FULL_INDENT_TARGET, " \\1") if @setting.enable_auto_indent && @inspector.inspect_indent(data) data.gsub!(/^([^#{Inspector::IGNORE_INDENT_CHAR}])/) do $1 == " " || $1 == " " ? " " : " #{$1}" end end end |
#auto_join_in_brackets(data) ⇒ Object
かぎ括弧内自動連結
713 714 715 716 717 718 719 720 721 722 723 724 725 726 727 728 729 730 731 732 733 734 735 |
# File 'lib/converterbase.rb', line 713 def auto_join_in_brackets(data) if !@setting.enable_auto_join_in_brackets && !@setting.enable_inspect_invalid_openclose_brackets return end OPENCLOSE_REGEXPS.each_with_index do |openclose, i| stack = {} data.gsub!(openclose).with_index do |match, j| joined_str = join_inner_bracket(match) if @setting.enable_auto_join_in_brackets && joined_str error = @inspector.validate_joined_inner_brackets(match, joined_str, BRACKETS[i]) stack[j] = error ? match : joined_str else stack[j] = match end "[#かぎ括弧=#{j}]" end if @setting.enable_inspect_invalid_openclose_brackets # 正しく閉じてないかぎ括弧だけが data に残ってる @inspector.inspect_invalid_openclose_brackets(data, BRACKETS[i], stack) end data.replace(ConverterBase.rebuild_brackets(data, stack)) end end |
#auto_join_line(data) ⇒ Object
手動折り返しの自動連結
746 747 748 749 750 751 752 |
# File 'lib/converterbase.rb', line 746 def auto_join_line(data) # 次の行の冒頭が開き記号だったら意図的な改行だと判断して連結しない data.gsub!(/([^、])、\n ([^「『((【<<〈《≪…‥―])/, "\\1、\\2") # TODO: 文章の途中で不自然に改行しているところを連結 # 不自然な改行の検出方法が不明 #data.gsub!(/[^。…―-\-」』))>>]\]〉》】〕}\}0-90-9]/ end |
#before(io, text_type) ⇒ Object
16 17 18 19 20 21 22 |
# File 'lib/converterbase.rb', line 16 def before(io, text_type) data = io.string convert_page_break(data) if @text_type == "body" data.gsub!("\n\n", "\n") data.gsub!("\n\n\n", "\n\n") io end |
#before_convert(io) ⇒ Object
986 987 988 |
# File 'lib/converterbase.rb', line 986 def before_convert(io) before(io, @text_type) end |
#blank_line?(line) ⇒ Boolean
564 565 566 |
# File 'lib/converterbase.rb', line 564 def blank_line?(line) line =~ /\A[ \t]*$/ end |
#border_symbol?(line) ⇒ Boolean
557 558 559 560 561 562 |
# File 'lib/converterbase.rb', line 557 def border_symbol?(line) @@symbols ||= open(File.join(Narou.get_preset_dir, "bordersymbols.txt"), "r:BOM|UTF-8") { |fp| fp.read.strip } line =~ /^[ \t]*[#{@@symbols}]+$/ end |
#comments_block?(line) ⇒ Boolean
コメントブロックを検出する
コメントブロックの定義は - のみが50回以上連続された行に囲まれている間
468 469 470 471 472 473 474 |
# File 'lib/converterbase.rb', line 468 def comments_block?(line) if line =~ /^-{50,}$/ @in_comment_block ^= 1 return true end @in_comment_block end |
#convert(text, text_type) ⇒ Object
994 995 996 997 998 999 1000 1001 1002 |
# File 'lib/converterbase.rb', line 994 def convert(text, text_type) return "" if text == "" @text_type = text_type io = StringIO.new(rstrip_all_lines(text)) (io = before_convert(io)).rewind (io = convert_main(io)).rewind (io = after_convert(io)).rewind return io.read end |
#convert_aozora_special_charactoers(data) ⇒ Object
特殊な記号を外字注記に変換
388 389 390 391 392 |
# File 'lib/converterbase.rb', line 388 def convert_aozora_special_charactoers(data) data.gsub!("※", "※[#米印、1-2-8]") data.gsub!("≪", "※[#始め二重山括弧]") data.gsub!("≫", "※[#終わり二重山括弧]") end |
#convert_arrow(data) ⇒ Object
おかしくなりやすい矢印文字の変換
377 378 379 380 381 382 383 |
# File 'lib/converterbase.rb', line 377 def convert_arrow(data) @@device ||= Narou.get_device # Kindle PW でしか確認してないのでとりあえず device=kindle の場合のみ変換 if @@device && @@device.kindle? data.tr!("⇒⇐", "→←") end end |
#convert_dakuten_char_to_font(data) ⇒ Object
濁点のついてない文字に濁点をつける表現を対応
濁点つきフォントに部分的に切り替える
399 400 401 402 403 404 405 406 407 408 409 |
# File 'lib/converterbase.rb', line 399 def convert_dakuten_char_to_font(data) data.gsub!(/(.)[゛゙]/) do m1 = $1 if m1 =~ /[ぁ-んァ-ヶι]/ @use_dakuten_font = true "[#濁点]#{m1}[#濁点終わり]" else tcy(m1 + "゛") end end end |
#convert_for_all_data(data) ⇒ Object
小説データ全体に対して施す変換
959 960 961 962 963 964 965 966 967 968 969 970 971 972 973 974 975 976 977 978 979 980 981 982 983 984 |
# File 'lib/converterbase.rb', line 959 def convert_for_all_data(data) auto_join_in_brackets(data) auto_join_line(data) if @setting.enable_auto_join_line erase_comments_block(data) replace_illust_tag(data) replace_url(data) replace_narou_tag(data) convert_rome_numeric(data) alphabet_to_zenkaku(data, @setting.enable_alphabet_force_zenkaku) convert_numbers(data) exception_reconvert_kanji_to_num(data) if @setting.enable_convert_num_to_kanji && @text_type != "subtitle" \ && @setting.enable_kanji_num_with_units convert_kanji_num_with_unit(data, @setting.kanji_num_with_units_lower_digit_zero) end rebuild_kanji_num(data) insert_separate_space(data) convert_special_characters(data) convert_fraction_and_date(data) modify_kana_ni_to_kanji_ni(data) if @text_type == "body" || @text_type == "textfile" half_indent_bracket(data) auto_indent(data) end convert_dakuten_char_to_font(data) end |
#convert_fraction_and_date(data) ⇒ Object
分数表記を○分の○表記に変更、及び日付表記を検出
スラッシュで区切られた数字が2個なら分数、3個なら日付と定義
232 233 234 235 236 237 238 239 240 241 242 243 244 245 246 247 248 249 250 251 252 253 254 255 256 257 258 259 260 261 262 263 264 265 |
# File 'lib/converterbase.rb', line 232 def convert_fraction_and_date(data) if !@setting.enable_transform_fraction && !@setting.enable_transform_date return end target_num = "\d0-9#{KANJI_NUM}十百千万億兆京垓" data.gsub!(/[#{target_num}\//]+/) do |match| numerics = match.split(/[\//]/) case numerics.count when 2 # 分数 if @setting.enable_transform_fraction "#{zenkaku_num_to_kanji(numerics[1])}分の#{zenkaku_num_to_kanji(numerics[0])}" else match end when 3 # 日付 if @setting.enable_transform_date begin date = Date.new(*numerics.map { |s| s.tr!("0-90-9#{KANJI_NUM}", "0-90-90-9") s.to_i }) rescue ArgumentError match else convert_numbers(date.strftime(@setting.date_format)) end end else match end end end |
#convert_horizontal_ellipsis(data) ⇒ Object
中黒(・)や句読点を並べて三点リーダーもどきにしているのを三点リーダーに変換
866 867 868 869 870 871 872 873 874 875 876 877 878 879 880 |
# File 'lib/converterbase.rb', line 866 def convert_horizontal_ellipsis(data) return if !@setting.enable_convert_horizontal_ellipsis || @text_type == "subtitle" %w(・ 。 、).each do |char| data.gsub!(/#{char}{3,}/) do |match| pre_char, post_char = $`[-1], $'[0] if pre_char == "―" || post_char == "―" match else "…" * ((match.length / 3.0 / 2).ceil * 2) end end end data.gsub!("。。", "。") data.gsub!("、、", "、") end |
#convert_kanji_num_with_unit(data, lower_digit_zero = 0) ⇒ Object
漢数字を単位を使った表現に変換
800万1000 といったような表現は、内部一度で 8001000 に変換する。lower_digit_zero はこの最後の 000 に適用される
182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 200 201 202 203 204 205 206 207 208 209 210 211 212 |
# File 'lib/converterbase.rb', line 182 def convert_kanji_num_with_unit(data, lower_digit_zero = 0) data.gsub!(/([#{KANJI_NUM}十百千万億兆京]+)/) do |match| total = kanji_num_to_integer($1) m1 = total.to_s.tr("0-9", KANJI_NUM) if m1 =~ /〇{#{lower_digit_zero},}$/ digits = m1.reverse.scan(/.{1,4}/).map(&:reverse).reverse # 下の桁から4桁ずつ区切った配列を作成 keta = digits.count - 1 digits.map.with_index { |nums, keta_i| four_digit_num = nums.scan(/./).map.with_index { |d, di| next "" if d == "〇" kurai = KANJI_KURAI[nums.length - di - 1] if d == "一" # 4桁の千の前は一は必須ではなく、5桁以上の場合の千の前には一をつける # 1100 → 千百、11100 → 一万一千百 if kurai != "" && !(keta > 0 && kurai == "千") d = "" end end d + kurai }.join if four_digit_num.length > 0 four_digit_num + KANJI_NUM_UNITS[keta - keta_i] else "" end }.join else match end end end |
#convert_main(io) ⇒ Object
変換処理本体
@text_type: 渡されるテキストの種類。subtitle, introduction, body, postscript, textfile のどれか
1009 1010 1011 1012 1013 1014 1015 1016 1017 1018 1019 1020 1021 1022 1023 1024 1025 1026 1027 1028 1029 1030 1031 1032 1033 1034 1035 1036 1037 1038 1039 1040 1041 1042 1043 1044 1045 1046 1047 1048 1049 1050 1051 1052 1053 1054 1055 1056 1057 1058 1059 1060 1061 1062 1063 1064 1065 1066 1067 1068 1069 1070 1071 1072 1073 1074 1075 1076 1077 1078 |
# File 'lib/converterbase.rb', line 1009 def convert_main(io) @write_fp = StringIO.new case @text_type when "introduction" return @write_fp if @setting.enable_erase_introduction when "postscript" return @write_fp if @setting.enable_erase_postscript end if @text_type == "textfile" @write_fp.puts(io.gets + io.gets) # タイトル・著者名スキップ data = io.read else data = io.read end initialize_member_values convert_for_all_data(data) if @text_type == "textfile" # convert_for_all_data -> replace_narou_tag # で改行化を行わないと正確な改行数は分からない = ProgressBar.new(data.count("\n") + 1) .output(0) end @read_fp = StringIO.new(data) @read_fp.each_with_index do |line, i| .output(i) if @text_type == "textfile" @request_skip_output_line = false zenkaku_rstrip(line) if @request_insert_blank_next_line outputs unless blank_line?(line) @request_insert_blank_next_line = false end (line) if @text_type == "textfile" insert_blank_line_to_border_symbol(line) force_indent_special_chapter(line) outputs(line) unless @delay_outputs_buffer.empty? @write_fp.write(@delay_outputs_buffer) @before_line = @delay_outputs_buffer @delay_outputs_buffer = "" else @before_line = line end end if @text_type == "textfile" @write_fp.rewind data = @write_fp.string if @text_type == "textfile" if @setting. erase_introduction(data) if @setting.enable_erase_introduction erase_postscript(data) if @setting.enable_erase_postscript end if @setting.enable_enchant_midashi enchant_midashi(data) end end rebuild_illust(data) rebuild_url(data) rebuild_english_sentences(data) rebuild_hankaku_num_and_comma(data) # 再構築された文章にルビがふられる可能性を考慮して、 # この位置でルビの処理を行う narou_ruby(data) if @setting.enable_ruby # 三点リーダーの変換は、ルビで圏点として・・・を使っている場合を考慮して、ルビ処理後にする convert_horizontal_ellipsis(data) data.strip! .clear if @text_type == "textfile" @write_fp end |
#convert_novel_rule(data) ⇒ Object
小説のルールに沿うように変換
414 415 416 417 418 419 420 421 422 423 424 425 426 427 428 429 |
# File 'lib/converterbase.rb', line 414 def convert_novel_rule(data) # 括弧の閉じの直前の句点を消す data.gsub!(/。([」』)])/, "\\1") # 原則偶数個を1セットで使うべき文字を偶数個に補正 # MEMO:(―も偶数個セットにするべきだが、記号的な意味で使われる場合もあるので無視) %w(… ‥).each do |target| data.gsub!(/#{target}+/) do |match| len = match.length len += 1 if len.odd? target * len end end # たまに見かける誤字対策 data.gsub!(/。 /, "。") data.gsub!(/([?!])。/, "\\1") end |
#convert_numbers(data) ⇒ Object
数字の変換
72 73 74 75 76 77 78 79 80 81 |
# File 'lib/converterbase.rb', line 72 def convert_numbers(data) # 小数点を・に data.gsub!(/([\d0-9#{KANJI_NUM}]+?)[\..]([\d0-9#{KANJI_NUM}]+?)/, "\\1・\\2") if @setting.enable_convert_num_to_kanji && @text_type != "subtitle" num_to_kanji(data) else hankaku_num_to_zenkaku_num(data) end data end |
#convert_page_break(data) ⇒ Object
一定以上の連続する空行を改ページに変換
948 949 950 951 952 953 954 |
# File 'lib/converterbase.rb', line 948 def convert_page_break(data) if @setting.enable_convert_page_break threshold = @setting.to_page_break_threshold + 1 # `改ページ' を使うと見出し付与等で混乱するので自動生成したものは区別する data.gsub!(/\n{#{threshold},}/, "\n[#改頁]\n") end end |
#convert_rome_numeric(data) ⇒ Object
ローマ数字っぽいアルファベットをローマ数字に変換
※alphabet_to_zenkaku の前に実行する必要あり
298 299 300 301 302 |
# File 'lib/converterbase.rb', line 298 def convert_rome_numeric(data) ROME_NUM_ALPHABET.each_with_index do |rome, i| data.gsub!(/([^a-zA-Z])#{rome}([^a-zA-Z])/, "\\1#{ROME_NUM[i]}\\2") end end |
#convert_special_characters(data) ⇒ Object
特定の表現・記号を変換していく
307 308 309 310 311 312 313 |
# File 'lib/converterbase.rb', line 307 def convert_special_characters(data) convert_aozora_special_charactoers(data) symbols_to_zenkaku(data) convert_tatechuyoko(data) convert_novel_rule(data) convert_arrow(data) end |
#convert_tatechuyoko(data) ⇒ Object
縦中横にすべき表現を変換
337 338 339 340 341 342 343 344 345 346 347 348 349 350 351 352 353 354 355 356 357 358 359 360 361 362 363 364 365 366 367 368 369 370 371 372 |
# File 'lib/converterbase.rb', line 337 def convert_tatechuyoko(data) # 感嘆符及び疑問符の縦中横化 # AozoraEPUB3の縦中横設定を使えば明示的に注記を使う必要はないが、 # 見出しの中では自動で縦中横にはならないため、明示的指定をしておく # 事前に !? は全角にしておく data.gsub!(/!+/) do |match| if "#{$`[-1]}#{$'[0]}".include?("?") next match end len = match.length if len == 3 tcy("!!!") elsif len >= 4 # 4個以上なら偶数になるように調整(奇数だった場合増やす方向(+1))して2個ずつ縦中横 len += 1 if len.odd? tcy("!!") * (len / 2) else match end end data.gsub!(/[!?]+/) do |match| case match.length when 2 tcy(match.tr("!?", "!?")) when 3 # 見た目的にこのパターンだけ縦中横化を許容する if %w(!!? ?!!).find { |v| v == match } tcy(match.tr("!?", "!?")) else match end else match end end end |
#delay_outputs(data = "") ⇒ Object
56 57 58 59 60 |
# File 'lib/converterbase.rb', line 56 def delay_outputs(data = "") unless @request_skip_output_line @delay_outputs_buffer << data + "\n" end end |
#enchant_midashi(data) ⇒ Object
[#改ページ]直後の行を見出しに設定する
892 893 894 895 896 897 898 899 900 901 902 903 904 905 906 907 908 909 910 911 912 913 914 915 |
# File 'lib/converterbase.rb', line 892 def enchant_midashi(data) def midashi(str) midashi_title = str.gsub("[#半字下げ]", "").gsub(/^[ \s]+/, "").gsub(/[ \s]+$/, "") @inspector.subtitle = midashi_title "[#3字下げ][#ここから中見出し]#{midashi_title}[#ここで中見出し終わり]" end data.gsub!(/[#改ページ]\n(.+?)\n/) do |match| m1 = $1 rest = $' if $1 =~ /#{AUTHOR_COMMENT_CHUKI[:introduction][:open]}/ match else # 見出しの次の行が空行ではない場合空行を追加する add_tail = rest =~ /\A$/ ? "" : "\n\n" "[#改ページ]\n#{midashi(m1)}\n#{add_tail}" end end data.gsub!(/([#改ページ]\n)(#{AUTHOR_COMMENT_CHUKI[:introduction][:open]}.+?#{AUTHOR_COMMENT_CHUKI[:introduction][:close]}\n)(.+?\n)/m) do m1, m2, m3 = $1, $2, $3 add_tail = $' =~ /\A$/ ? "" : "\n" "#{m1 + midashi(m3) + m2}#{add_tail}" # 前書き→見出しの順番を見出し→前書きに入れ替えて置換 end end |
#erase_comments_block(data) ⇒ Object
コメントブロックを削除する
479 480 481 |
# File 'lib/converterbase.rb', line 479 def erase_comments_block(data) data.gsub!(/^-{50,}\n.*^-{50,}\n/m, "") end |
#erase_introduction(data) ⇒ Object
前書きを削除する
920 921 922 923 924 925 926 927 928 929 |
# File 'lib/converterbase.rb', line 920 def erase_introduction(data) del_count = 0 data.gsub!(/([#改ページ])\n#{AUTHOR_COMMENT_CHUKI[:introduction][:open]}.+?#{AUTHOR_COMMENT_CHUKI[:introduction][:close]}/m) do del_count += 1 $1 end if del_count > 0 @inspector.info("前書きをすべて削除しました。削除した数は#{del_count}個です。") end end |
#erase_postscript(data) ⇒ Object
後書きを削除する
934 935 936 937 938 939 940 941 942 943 |
# File 'lib/converterbase.rb', line 934 def erase_postscript(data) del_count = 0 data.gsub!(/#{AUTHOR_COMMENT_CHUKI[:postscript][:open]}.+?#{AUTHOR_COMMENT_CHUKI[:postscript][:close]}\n([#改ページ]|\z)/m) do del_count += 1 $1 end if del_count > 0 @inspector.info("後書きをすべて削除しました。削除した数は#{del_count}個です。") end end |
#exception_reconvert_kanji_to_num(data) ⇒ Object
アラビア数字を使うべきところはアラビア数字に戻す
217 218 219 220 221 222 223 224 225 |
# File 'lib/converterbase.rb', line 217 def exception_reconvert_kanji_to_num(data) return unless @setting.enable_convert_num_to_kanji data.gsub!(/([A-Za-z])([#{KANJI_NUM}・~]+)/) do # ver1・01 のようなパターンも許容する $1 + $2.tr(KANJI_NUM, "0-9") end data.gsub!(/([#{KANJI_NUM}・~]+)([A-Za-z])/) do $1.tr(KANJI_NUM, "0-9") + $2 end end |
#find_introduction? ⇒ Boolean
前書きの検出
636 637 638 639 640 641 642 643 644 645 646 647 648 |
# File 'lib/converterbase.rb', line 636 def find_introduction? pos = @read_fp.pos result = false @read_fp.each do |line| break if page_break?(line) if line =~ AUTHOR_INTRODUCTION_SPLITTER result = true break end end @read_fp.pos = pos result end |
#force_indent_special_chapter(line) ⇒ Object
章見出しっぽい文字列を字下げして前後に空行を入れる
537 538 539 540 541 542 543 544 545 546 547 548 |
# File 'lib/converterbase.rb', line 537 def force_indent_special_chapter(line) line.sub!(/^(?:[ \t]|[#二分アキ])*([-―<<〈-]*)([0-90-9#{KANJI_NUM}]+)([-―>>〉-]*)$/) do @request_insert_blank_next_line = true top, chapter, bottom = $1, $2, $3 if top != "" && "―--".include?(top) top = "― " bottom = " ―" end (blank_line?(@before_line) ? "" : "\n") + " [#ゴシック体]" + \ top + hankaku_num_to_zenkaku_num(zenkaku_num_to_hankaku_num(chapter)) + bottom + "[#ゴシック体終わり]" end end |
#half_indent_bracket(data) ⇒ Object
行頭かぎ括弧(等)に二分アキを追加する
「や(などの前にカスタム注記([#二分アキ])を追加し、半文字分字下げする(二分アキ)。kindle paperwhite で鍵括弧のインデントがおかしいことへの対応
515 516 517 |
# File 'lib/converterbase.rb', line 515 def half_indent_bracket(data) data.gsub!(HALF_INDENT_TARGET, "[#二分アキ]\\1") if @setting.enable_half_indent_bracket end |
#hankaku_num_to_zenkaku_num(data) ⇒ Object
半角アラビア数字の全角化
3桁以上:全角化1,2桁:縦中横化
496 497 498 499 500 501 502 503 504 505 |
# File 'lib/converterbase.rb', line 496 def hankaku_num_to_zenkaku_num(data) data.gsub!(/\d+/) do |num| if num.length > 2 num.tr("0-9", "0-9") else tcy(num) end end data end |
#inclusion_author_comment_block?(line) ⇒ Boolean
650 651 652 653 654 655 656 657 658 659 660 661 662 |
# File 'lib/converterbase.rb', line 650 def (line) result = false if page_break?(line) if find_introduction? = :introduction result = true end elsif line =~ AUTHOR_POSTSCRIPT_SPLITTER = :postscript result = true end result end |
#initialize_member_values ⇒ Object
36 37 38 39 40 41 42 43 44 45 46 47 48 |
# File 'lib/converterbase.rb', line 36 def initialize_member_values @request_insert_blank_next_line = false @request_skip_output_line = false @before_line = "" @delay_outputs_buffer = "" @in_comment_block = false @english_sentences = [] @url_list = [] @illust_chuki_list = [] @kanji_num_list = {} @num_and_comma_list = {} = nil end |
#insert_blank_line_to_border_symbol(line) ⇒ Object
■などの区切りの前後には空行が必ず存在するようにする
571 572 573 574 575 576 577 578 579 580 581 |
# File 'lib/converterbase.rb', line 571 def insert_blank_line_to_border_symbol(line) result = "" if border_symbol?(line) unless blank_line?(@before_line) result << "\n" end @request_insert_blank_next_line = true jisage(line, 4) end line.sub!(/\A/, result) end |
#insert_separate_space(data) ⇒ Object
特定の記号の直後は全角アキを挿入する
270 271 272 273 274 275 276 277 278 279 280 |
# File 'lib/converterbase.rb', line 270 def insert_separate_space(data) data.gsub!(/([!?!?]+)([^!?!?])/) do m1, m2 = $1, $2 m2 = " " if m2 == " " if m2 =~ /[^」]\]』】〉》〕>>≫))"”’〟 ☆★♪[―]/ "#{m1} #{m2}" else "#{m1}#{m2}" end end end |
#jisage(line, num) ⇒ Object
行頭空白を考慮した字下げ
553 554 555 |
# File 'lib/converterbase.rb', line 553 def jisage(line, num) line.sub!(/^[ \t]*/, " " * num) end |
#join_inner_bracket(str) ⇒ Object
改行を連結した文章を作る
改行がひとつもなかった場合は nil を返す
700 701 702 703 704 705 706 707 708 |
# File 'lib/converterbase.rb', line 700 def join_inner_bracket(str) joined_str = str.dup return nil if str.count("\n") == 0 joined_str.gsub!(/([…―])\n/, "\\1。\n") joined_str = joined_str.split("\n").map { |s| s.sub(/^ +/, "") }.join joined_str end |
#kanji_num_to_integer(string) ⇒ Object
168 169 170 171 172 173 174 |
# File 'lib/converterbase.rb', line 168 def kanji_num_to_integer(string) total = 0 string.scan(/([#{KANJI_NUM}十百千]+)([万億兆京]*)/) do |num, units| total += (__calc_kanji_num_with_unit(num).to_s + units.each_char.map { |c| "0" * KANJI_NUM_UNITS_DIGIT[c] }.join).to_i end total end |
#leave_author_comment_block?(line) ⇒ Boolean
664 665 666 667 668 669 670 671 672 673 674 675 676 677 |
# File 'lib/converterbase.rb', line 664 def (line) result = false case when :introduction if line =~ AUTHOR_INTRODUCTION_SPLITTER result = true end when :postscript if page_break?(line) result = true end end result end |
#midashi(str) ⇒ Object
893 894 895 896 897 |
# File 'lib/converterbase.rb', line 893 def midashi(str) midashi_title = str.gsub("[#半字下げ]", "").gsub(/^[ \s]+/, "").gsub(/[ \s]+$/, "") @inspector.subtitle = midashi_title "[#3字下げ][#ここから中見出し]#{midashi_title}[#ここで中見出し終わり]" end |
#modify_kana_ni_to_kanji_ni(data) ⇒ Object
漢字の二じゃなくて間違えてカタカナのニを使ってるのを校正する
885 886 887 |
# File 'lib/converterbase.rb', line 885 def modify_kana_ni_to_kanji_ni(data) data.gsub!(/([^ァ-ヶー])ニ([^ァ-ヶー])/, "\\1二\\2") end |
#narou_ruby(data) ⇒ Object
小説家になろうのルビ対策
757 758 759 760 761 762 763 764 765 766 767 768 769 770 |
# File 'lib/converterbase.rb', line 757 def narou_ruby(data) # 《》なルビの対処 data.gsub!(/(.+?)≪(.+?)≫/) do |match| to_ruby(match, $1, $2, ["≪", "≫"]) end # ()なルビの対処 if @text_type != "subtitle" data.gsub!(/(.+?)(([ぁ-んァ-ヶーゝゞ・A-Za-zA-Za-z ]{,20}))/) do |match| to_ruby(match, $1, $2, ["(", ")"]) end end data.replace(replace_tatesen(data)) data.gsub!("[#ルビ用縦線]", "|") end |
#num_to_kanji(data) ⇒ Object
アラビア数字を漢数字に
カンマ区切りの数字はアラビア数字のままにしておくもともと漢数字なのは他の変換を受けないように退避させておく
89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 |
# File 'lib/converterbase.rb', line 89 def num_to_kanji(data) stash_kanji_num(data) data.gsub!(/[\d0-9,,]+/) do |match| if match =~ /[,,]/ if match =~ /[\d]/ stash_hankaku_num_and_comma(match.tr(",", ",")) else match end else zenkaku_num_to_kanji(match.tr("0-9", KANJI_NUM)) end end data end |
#object_of_ruby?(char) ⇒ Boolean
774 775 776 |
# File 'lib/converterbase.rb', line 774 def object_of_ruby?(char) char =~ /[#{CHARACTER_OF_RUBY}]/ end |
#outputs(data = "", force = false) ⇒ Object
50 51 52 53 54 |
# File 'lib/converterbase.rb', line 50 def outputs(data = "", force = false) if !@request_skip_output_line || force @write_fp.puts(data) end end |
#page_break?(line) ⇒ Boolean
改ページある?
586 587 588 |
# File 'lib/converterbase.rb', line 586 def page_break?(line) line =~ /[#改ページ]/ end |
#process_author_comment(line) ⇒ Object
605 606 607 608 609 610 611 612 613 614 615 616 617 618 619 620 621 622 623 624 625 626 627 628 629 630 631 632 633 |
# File 'lib/converterbase.rb', line 605 def (line) if @setting. if if (line) outputs(AUTHOR_COMMENT_CHUKI[][:close]) if == :introduction @request_skip_output_line = true line.clear = nil elsif == :postscript = nil # [#改ページ](前書きの開始位置)を検出したため、 # 改めて前書きの検出をする (line) end end else if (line) # outputs を使うと改ページより前に注記が入ってしまうため、 # delay_outputs を使って出力を line 出力の後に遅らせる delay_outputs(AUTHOR_COMMENT_CHUKI[][:open]) if == :postscript @request_skip_output_line = true line.clear end end end end end |
#rebuild_english_sentences(data) ⇒ Object
英文を再構成する
457 458 459 460 461 |
# File 'lib/converterbase.rb', line 457 def rebuild_english_sentences(data) @english_sentences.each_with_index do |sentence, id| data.sub!("[#英文=#{convert_numbers(id.to_s)}]", sentence) end end |
#rebuild_hankaku_num_and_comma(data) ⇒ Object
112 113 114 115 116 |
# File 'lib/converterbase.rb', line 112 def rebuild_hankaku_num_and_comma(data) data.gsub!(/[#半角数字=(.+?)]/) do @num_and_comma_list[$1.to_i] end end |
#rebuild_illust(data) ⇒ Object
857 858 859 860 861 |
# File 'lib/converterbase.rb', line 857 def rebuild_illust(data) @illust_chuki_list.each_with_index do |chuki, id| data.sub!("[#挿絵=#{convert_numbers(id.to_s)}]", chuki) end end |
#rebuild_kanji_num(data) ⇒ Object
128 129 130 131 132 |
# File 'lib/converterbase.rb', line 128 def rebuild_kanji_num(data) data.gsub!(/[#漢数字=(.+?)]/) do @kanji_num_list[$1] end end |
#rebuild_url(data) ⇒ Object
833 834 835 836 837 838 |
# File 'lib/converterbase.rb', line 833 def rebuild_url(data) @url_list.each_with_index do |url, id| data.sub!("[#URL=#{convert_numbers(id.to_s)}]", "<a href=\"#{url}\">#{url}</a>") end end |
#replace_by_replace_txt(text) ⇒ Object
replace.txt により単純置換
1083 1084 1085 1086 1087 1088 |
# File 'lib/converterbase.rb', line 1083 def replace_by_replace_txt(text) @setting.replace_pattern.each do |pattern| src, dst = pattern text.gsub!(src, dst) end end |
#replace_illust_tag(data) ⇒ Object
なろうの挿絵タグを挿絵注釈に変換挿絵画像が存在しなければダウンロードして保存する
844 845 846 847 848 849 850 851 852 853 854 855 |
# File 'lib/converterbase.rb', line 844 def replace_illust_tag(data) data.gsub!(/^(<i[0-9]+\|[0-9]+>)\n?/m) do next "" unless @setting.enable_narou_illust chuki = @illustration.get($1) if chuki @illust_chuki_list << chuki "[#挿絵=#{@illust_chuki_list.count - 1}]\n" else "" end end end |
#replace_narou_tag(data) ⇒ Object
小説家になろう専用タグを置換
285 286 287 288 289 |
# File 'lib/converterbase.rb', line 285 def replace_narou_tag(data) data.gsub!("【改ページ】", "") data.gsub!(/<KBR>/i, "\n") data.gsub!(/<PBR>/i, "\n") end |
#replace_tatesen(str) ⇒ Object
786 787 788 |
# File 'lib/converterbase.rb', line 786 def replace_tatesen(str) str.gsub("|", "※[#縦線]") end |
#replace_url(data) ⇒ Object
URL っぽい文字列を一旦別のIDに置き換えてあとで復元することで、変換処理の影響を受けさせない
826 827 828 829 830 831 |
# File 'lib/converterbase.rb', line 826 def replace_url(data) data.gsub!(URI.regexp) do |match| @url_list << match "[#URL=#{@url_list.count - 1}]" end end |
#rstrip_all_lines(data) ⇒ Object
すべての行の行末空白を削除
65 66 67 |
# File 'lib/converterbase.rb', line 65 def rstrip_all_lines(data) data.gsub(/[ \t]+$/m, "") end |
#sesame(str, ten) ⇒ Object
778 779 780 781 782 783 784 |
# File 'lib/converterbase.rb', line 778 def sesame(str, ten) if str.include?("|") str.sub("|", "[#傍点]") + "[#傍点終わり]" else str.insert(-(ten.length + 1), "[#傍点]") + "[#傍点終わり]" end end |
#stash_hankaku_num_and_comma(num) ⇒ Object
105 106 107 108 109 110 |
# File 'lib/converterbase.rb', line 105 def stash_hankaku_num_and_comma(num) @@num_and_comma_list_counter ||= 0 @@num_and_comma_list_counter += 1 @num_and_comma_list[@@num_and_comma_list_counter] = num "[#半角数字=#{@@num_and_comma_list_counter}]" end |
#stash_kanji_num(data) ⇒ Object
118 119 120 121 122 123 124 125 126 |
# File 'lib/converterbase.rb', line 118 def stash_kanji_num(data) data.gsub!(/[#{KANJI_NUM}十百千万億兆京]+/).with_index do |match, i| if "#{$`[-1]}#{$'[0]}" =~ /[\d0-9]/ next match end @kanji_num_list[convert_numbers(i.to_s)] = match "[#漢数字=#{i}]" end end |
#symbols_to_zenkaku(data) ⇒ Object
記号を全角に変換
318 319 320 321 322 323 324 325 |
# File 'lib/converterbase.rb', line 318 def symbols_to_zenkaku(data) data.tr!("“”‘’〝〟", %!""''""!) data.gsub!(/"([^"\n]+)"/, "〝\\1〟") data.gsub!(/'([^'\n]+)'/, "〝\\1〟") # MEMO: シングルミュート(ノノカギ)を表示出来るフォントはほとんど無い data.tr!("-=+/*《》'\"%$#&!?、<><>()|‐,._;:[]", "-=+/*≪≫’”%$#&!?、〈〉〈〉()|-,._;:[]") data.gsub!("\\", "¥") end |
#tcy(str) ⇒ Object
縦中横注記取得
330 331 332 |
# File 'lib/converterbase.rb', line 330 def tcy(str) "[#縦中横]#{str}[#縦中横終わり]" end |
#to_ruby(match, m1, m2, openclose_symbols) ⇒ Object
790 791 792 793 794 795 796 797 798 799 800 801 802 803 804 805 806 807 808 809 810 811 812 813 814 |
# File 'lib/converterbase.rb', line 790 def to_ruby(match, m1, m2, openclose_symbols) last_char = m1[-1] case when last_char == "|" # 直前に|がある場合ルビ化は抑制される "#{m1[0...-1]}#{openclose_symbols[0]}#{m2}#{openclose_symbols[1]}" when m2 =~ /^・+$/ # ルビが・だけの場合、傍点と判断 sesame(m1, m2) when m1.include?("|") "#{m1.sub(/|([^|]*)$/, "[#ルビ用縦線]\\1")}《#{m2}》" when object_of_ruby?(last_char) # なろうのルビ対象文字を辿って|を挿入する(青空文庫となろうのルビ仕様の差異吸収のため) m1.gsub(/([#{CHARACTER_OF_RUBY} ]+)$/) { match_target = $1 if match_target =~ /^( +)/ "#{$1}[#ルビ用縦線]#{match_target[$1.length..-1]}" else "[#ルビ用縦線]#{match_target}" end } + "《#{m2}》" else match end end |
#zenkaku_num_to_hankaku_num(num) ⇒ Object
全角数字を半角アラビア数字に
486 487 488 |
# File 'lib/converterbase.rb', line 486 def zenkaku_num_to_hankaku_num(num) num.tr("0-9#{KANJI_NUM}", "0-90-9") end |
#zenkaku_num_to_kanji(str) ⇒ Object
全角アラビア数字を漢数字に
137 138 139 |
# File 'lib/converterbase.rb', line 137 def zenkaku_num_to_kanji(str) str.tr("0-9", KANJI_NUM) end |
#zenkaku_rstrip(line) ⇒ Object
全角版 String#rstrip!
819 820 821 |
# File 'lib/converterbase.rb', line 819 def zenkaku_rstrip(line) line.gsub!(/[ \s]+\z/, "") end |