Class: ConverterBase
- Inherits:
-
Object
- Object
- ConverterBase
- Defined in:
- lib/converterbase.rb
Constant Summary collapse
- KANJI_NUM =
"〇一二三四五六七八九"
- KANJI_NUM_UNITS =
%w(万 億 兆 京).unshift("")
- KANJI_KURAI =
%w(十 百 千).unshift("")
- KANJI_NUM_UNITS_DIGIT =
{ "十" => 1, "百" => 2, "千" => 3, "万" => 4, "億" => 8, "兆" => 12, "京" => 16 }
- ROME_NUM_ALPHABET =
%w(II III IV VI VII VIII IX ii iii iv vi vii viii ix)
- ROME_NUM =
%w(Ⅱ Ⅲ Ⅳ Ⅵ Ⅶ Ⅷ Ⅸ ⅱ ⅲ ⅳ ⅵ ⅶ ⅷ ⅸ)
- HALF_INDENT_TARGET =
/^[ \t]*([〔「『((【〈《≪〝])/
- FULL_INDENT_TARGET =
/^[ \t]*(――)/
- AUTHOR_INTRODUCTION_SPLITTER =
前書き・後書きの検出及び処理 ==============================
/^ *[\**]{44}$/
- AUTHOR_POSTSCRIPT_SPLITTER =
/^ *[\**]{48}$/
- AUTHOR_COMMENT_CHUKI =
{ introduction: { open: "[#ここから前書き]", close: "[#ここで前書き終わり]" }, postscript: { open: "[#ここから後書き]", close: "[#ここで後書き終わり]" } }
- BRACKETS =
[%w(「 」), %w(『 』)
- OPENCLOSE_REGEXPS =
ネストに対応したかぎ括弧の正規表現
BRACKETS.map { |bracket| bo, bc = bracket /(?<oc>#{bo}[^#{bo+bc}]*(?:\g<oc>[^#{bo+bc}]*)*#{bc})/m }
- CHARACTER_OF_RUBY =
"一-龠A-Za-zA-Za-z"
Instance Attribute Summary collapse
-
#use_dakuten_font ⇒ Object
readonly
Returns the value of attribute use_dakuten_font.
Class Method Summary collapse
Instance Method Summary collapse
- #__calc_kanji_num_with_unit(string) ⇒ Object
- #__calc_sum_unit(units) ⇒ Object
- #after(io, text_type) ⇒ Object
- #after_convert(io) ⇒ Object
-
#alphabet_to_zenkaku(data, force = false) ⇒ Object
半角アルファベットを全角に変換する.
- #author_comment_force_close ⇒ Object
-
#auto_indent(data) ⇒ Object
行頭字下げ.
-
#auto_join_in_brackets(data) ⇒ Object
かぎ括弧内自動連結.
-
#auto_join_line(data) ⇒ Object
手動折り返しの自動連結.
- #before(io, text_type) ⇒ Object
- #before_convert(io) ⇒ Object
- #blank_line?(line) ⇒ Boolean
- #border_symbol?(line) ⇒ Boolean
-
#comments_block?(line) ⇒ Boolean
コメントブロックを検出する.
- #convert(text, text_type) ⇒ Object
-
#convert_aozora_special_charactoers(data) ⇒ Object
特殊な記号を外字注記に変換.
-
#convert_arrow(data) ⇒ Object
おかしくなりやすい矢印文字の変換.
-
#convert_dakuten_char_to_font(data) ⇒ Object
濁点のついてない文字に濁点をつける表現を対応.
-
#convert_for_all_data(data) ⇒ Object
小説データ全体に対して施す変換.
-
#convert_fraction_and_date(data) ⇒ Object
分数表記を○分の○表記に変更、及び日付表記を検出.
-
#convert_horizontal_ellipsis(data) ⇒ Object
中黒(・)や句読点を並べて三点リーダーもどきにしているのを三点リーダーに変換.
-
#convert_kanji_num_with_unit(data, lower_digit_zero = 0) ⇒ Object
漢数字を単位を使った表現に変換.
-
#convert_main(io) ⇒ Object
変換処理本体.
-
#convert_novel_rule(data) ⇒ Object
小説のルールに沿うように変換.
-
#convert_numbers(data) ⇒ Object
数字の変換.
-
#convert_page_break(data) ⇒ Object
一定以上の連続する空行を改ページに変換.
-
#convert_rome_numeric(data) ⇒ Object
ローマ数字っぽいアルファベットをローマ数字に変換.
-
#convert_special_characters(data) ⇒ Object
特定の表現・記号を変換していく.
-
#convert_tatechuyoko(data) ⇒ Object
縦中横にすべき表現を変換.
- #delay_outputs(data = "") ⇒ Object
-
#enchant_midashi(data) ⇒ Object
[#改ページ]直後の行を見出しに設定する.
-
#erase_comments_block(data) ⇒ Object
コメントブロックを削除する.
-
#erase_introduction(data) ⇒ Object
前書きを削除する.
-
#erase_postscript(data) ⇒ Object
後書きを削除する.
-
#exception_reconvert_kanji_to_num(data) ⇒ Object
アラビア数字を使うべきところはアラビア数字に戻す.
-
#find_introduction? ⇒ Boolean
前書きの検出.
-
#force_indent_special_chapter(line) ⇒ Object
章見出しっぽい文字列を字下げして前後に空行を入れる.
-
#half_indent_bracket(data) ⇒ Object
行頭かぎ括弧(等)に二分アキを追加する.
-
#hankaku_num_to_zenkaku_num(data) ⇒ Object
半角アラビア数字の全角化.
- #inclusion_author_comment_block?(line) ⇒ Boolean
-
#initialize(setting, inspector, illustration) ⇒ ConverterBase
constructor
A new instance of ConverterBase.
- #initialize_member_values ⇒ Object
-
#insert_blank_line_to_border_symbol(line) ⇒ Object
■などの区切りの前後には空行が必ず存在するようにする.
-
#insert_separate_space(data) ⇒ Object
特定の記号の直後は全角アキを挿入する.
-
#jisage(line, num) ⇒ Object
行頭空白を考慮した字下げ.
-
#join_inner_bracket(str) ⇒ Object
改行を連結した文章を作る.
- #kanji_num_to_integer(string) ⇒ Object
- #leave_author_comment_block?(line) ⇒ Boolean
- #midashi(str) ⇒ Object
-
#modify_kana_ni_to_kanji_ni(data) ⇒ Object
漢字の二じゃなくて間違えてカタカナのニを使ってるのを校正する.
-
#narou_ruby(data) ⇒ Object
小説家になろうのルビ対策.
-
#num_to_kanji(data) ⇒ Object
アラビア数字を漢数字に.
- #object_of_ruby?(char) ⇒ Boolean
- #outputs(data = "", force = false) ⇒ Object
-
#page_break?(line) ⇒ Boolean
改ページある?.
- #process_author_comment(line) ⇒ Object
-
#rebuild_english_sentences(data) ⇒ Object
英文を再構成する.
- #rebuild_hankaku_num_and_comma(data) ⇒ Object
- #rebuild_illust(data) ⇒ Object
- #rebuild_kanji_num(data) ⇒ Object
-
#rebuild_kome_to_gaiji(data) ⇒ Object
※の外字注記化.
- #rebuild_url(data) ⇒ Object
-
#replace_by_replace_txt(text) ⇒ Object
replace.txt により単純置換.
-
#replace_illust_tag(data) ⇒ Object
なろうの挿絵タグを挿絵注釈に変換 挿絵画像が存在しなければダウンロードして保存する.
-
#replace_narou_tag(data) ⇒ Object
小説家になろう専用タグを置換.
- #replace_tatesen(str) ⇒ Object
-
#replace_url(data) ⇒ Object
URL っぽい文字列を一旦別のIDに置き換えてあとで復元することで、変換処理の影響を受けさせない.
-
#rstrip_all_lines(data) ⇒ Object
すべての行の行末空白を削除.
- #sesame(str, ten) ⇒ Object
- #stash_hankaku_num_and_comma(num) ⇒ Object
- #stash_kanji_num(data) ⇒ Object
-
#symbols_to_zenkaku(data) ⇒ Object
記号を全角に変換.
-
#tcy(str) ⇒ Object
縦中横注記取得.
- #to_ruby(match, m1, m2, openclose_symbols) ⇒ Object
-
#zenkaku_num_to_hankaku_num(num) ⇒ Object
全角数字を半角アラビア数字に.
-
#zenkaku_num_to_kanji(str) ⇒ Object
全角アラビア数字を漢数字に.
-
#zenkaku_rstrip(line) ⇒ Object
全角版 String#rstrip!.
Constructor Details
#initialize(setting, inspector, illustration) ⇒ ConverterBase
Returns a new instance of ConverterBase.
28 29 30 31 32 33 34 |
# File 'lib/converterbase.rb', line 28 def initialize(setting, inspector, illustration) @setting = setting @inspector = inspector @illustration = illustration @use_dakuten_font = false initialize_member_values end |
Instance Attribute Details
#use_dakuten_font ⇒ Object (readonly)
Returns the value of attribute use_dakuten_font.
14 15 16 |
# File 'lib/converterbase.rb', line 14 def use_dakuten_font @use_dakuten_font end |
Class Method Details
.rebuild_brackets(data, stack) ⇒ Object
750 751 752 753 754 |
# File 'lib/converterbase.rb', line 750 def self.rebuild_brackets(data, stack) data.gsub(/[#かぎ括弧=(\d+)]/) do stack[$1.to_i] end end |
Instance Method Details
#__calc_kanji_num_with_unit(string) ⇒ Object
153 154 155 156 157 158 159 160 161 162 163 164 165 166 |
# File 'lib/converterbase.rb', line 153 def __calc_kanji_num_with_unit(string) total = 0 string.scan(/([#{KANJI_NUM}]*)([十百千]*)/) do |num, units| break if num + units == "" num = "1" if num.empty? num_tr = num.tr(KANJI_NUM, "0-9") if units.empty? total += num_tr.to_i else total += (num_tr + __calc_sum_unit(units).to_s[1, 99]).to_i end end total end |
#__calc_sum_unit(units) ⇒ Object
147 148 149 150 151 |
# File 'lib/converterbase.rb', line 147 def __calc_sum_unit(units) units.each_char.inject(0) do |sum, c| sum + ("1" + "0" * KANJI_NUM_UNITS_DIGIT[c]).to_i end end |
#after(io, text_type) ⇒ Object
24 25 26 |
# File 'lib/converterbase.rb', line 24 def after(io, text_type) io end |
#after_convert(io) ⇒ Object
1000 1001 1002 |
# File 'lib/converterbase.rb', line 1000 def after_convert(io) after(io, @text_type) end |
#alphabet_to_zenkaku(data, force = false) ⇒ Object
半角アルファベットを全角に変換する
force : 強制的に全アルファベットを全角にするか?
false の場合、英文章(半角スペースで区切られた2単語以上)を半角のままにする
446 447 448 449 450 451 452 453 454 455 456 457 458 459 460 461 |
# File 'lib/converterbase.rb', line 446 def alphabet_to_zenkaku(data, force = false) if force data.gsub!(/[a-zA-Z]+/) do |match| match.tr("a-zA-Z", "a-zA-Z") end else data.gsub!(/[\w.,!?' ]+/) do |match| if match.split(" ").count > 1 @english_sentences << match "[#英文=#{@english_sentences.count - 1}]" else match.tr("a-zA-Z", "a-zA-Z") end end end end |
#author_comment_force_close ⇒ Object
692 693 694 695 696 |
# File 'lib/converterbase.rb', line 692 def if @in_author_comment_block outputs(AUTHOR_COMMENT_CHUKI[@in_author_comment_block][:close]) end end |
#auto_indent(data) ⇒ Object
行頭字下げ
必ず下げなければいけないところは強制的に字下げ 他の部分は全体的に判断して字下げ
536 537 538 539 540 541 542 543 |
# File 'lib/converterbase.rb', line 536 def auto_indent(data) data.gsub!(FULL_INDENT_TARGET, " \\1") if @setting.enable_auto_indent && @inspector.inspect_indent(data) data.gsub!(/^([^#{Inspector::IGNORE_INDENT_CHAR}])/) do $1 == " " || $1 == " " ? " " : " #{$1}" end end end |
#auto_join_in_brackets(data) ⇒ Object
かぎ括弧内自動連結
726 727 728 729 730 731 732 733 734 735 736 737 738 739 740 741 742 743 744 745 746 747 748 |
# File 'lib/converterbase.rb', line 726 def auto_join_in_brackets(data) if !@setting.enable_auto_join_in_brackets && !@setting.enable_inspect_invalid_openclose_brackets return end OPENCLOSE_REGEXPS.each_with_index do |openclose, i| stack = {} data.gsub!(openclose).with_index do |match, j| joined_str = join_inner_bracket(match) if @setting.enable_auto_join_in_brackets && joined_str error = @inspector.validate_joined_inner_brackets(match, joined_str, BRACKETS[i]) stack[j] = error ? match : joined_str else stack[j] = match end "[#かぎ括弧=#{j}]" end if @setting.enable_inspect_invalid_openclose_brackets # 正しく閉じてないかぎ括弧だけが data に残ってる @inspector.inspect_invalid_openclose_brackets(data, BRACKETS[i], stack) end data.replace(ConverterBase.rebuild_brackets(data, stack)) end end |
#auto_join_line(data) ⇒ Object
手動折り返しの自動連結
759 760 761 762 |
# File 'lib/converterbase.rb', line 759 def auto_join_line(data) # 次の行の冒頭が開き記号だったら意図的な改行だと判断して連結しない data.gsub!(/([^、])、\n ([^「『((【<<〈《≪…‥―])/, "\\1、\\2") end |
#before(io, text_type) ⇒ Object
16 17 18 19 20 21 22 |
# File 'lib/converterbase.rb', line 16 def before(io, text_type) data = io.string convert_page_break(data) if @text_type == "body" data.gsub!("\n\n", "\n") data.gsub!("\n\n\n", "\n\n") io end |
#before_convert(io) ⇒ Object
996 997 998 |
# File 'lib/converterbase.rb', line 996 def before_convert(io) before(io, @text_type) end |
#blank_line?(line) ⇒ Boolean
577 578 579 |
# File 'lib/converterbase.rb', line 577 def blank_line?(line) line =~ /\A[ \t]*$/ end |
#border_symbol?(line) ⇒ Boolean
570 571 572 573 574 575 |
# File 'lib/converterbase.rb', line 570 def border_symbol?(line) @@symbols ||= open(File.join(Narou.get_preset_dir, "bordersymbols.txt"), "r:BOM|UTF-8") { |fp| fp.read.strip } line =~ /^[ \t]*[#{@@symbols}]+$/ end |
#comments_block?(line) ⇒ Boolean
コメントブロックを検出する
コメントブロックの定義は - のみが50回以上連続された行に囲まれている間
477 478 479 480 481 482 483 |
# File 'lib/converterbase.rb', line 477 def comments_block?(line) if line =~ /^-{50,}$/ @in_comment_block ^= 1 return true end @in_comment_block end |
#convert(text, text_type) ⇒ Object
1004 1005 1006 1007 1008 1009 1010 1011 1012 |
# File 'lib/converterbase.rb', line 1004 def convert(text, text_type) return "" if text == "" @text_type = text_type io = StringIO.new(rstrip_all_lines(text)) (io = before_convert(io)).rewind (io = convert_main(io)).rewind (io = after_convert(io)).rewind return io.read end |
#convert_aozora_special_charactoers(data) ⇒ Object
特殊な記号を外字注記に変換
388 389 390 391 392 |
# File 'lib/converterbase.rb', line 388 def convert_aozora_special_charactoers(data) data.gsub!("※", "※※") # 外字注記表記だと border_symbol? 等で困るのであとで外字注記化する data.gsub!("≪", "※[#始め二重山括弧]") data.gsub!("≫", "※[#終わり二重山括弧]") end |
#convert_arrow(data) ⇒ Object
おかしくなりやすい矢印文字の変換
377 378 379 380 381 382 383 |
# File 'lib/converterbase.rb', line 377 def convert_arrow(data) @@device ||= Narou.get_device # Kindle PW でしか確認してないのでとりあえず device=kindle の場合のみ変換 if @@device && @@device.kindle? data.tr!("⇒⇐", "→←") end end |
#convert_dakuten_char_to_font(data) ⇒ Object
濁点のついてない文字に濁点をつける表現を対応
濁点つきフォントに部分的に切り替える
408 409 410 411 412 413 414 415 416 417 418 |
# File 'lib/converterbase.rb', line 408 def convert_dakuten_char_to_font(data) data.gsub!(/(.)[゛゙]/) do m1 = $1 if m1 =~ /[ぁ-んァ-ヶι]/ @use_dakuten_font = true "[#濁点]#{m1}[#濁点終わり]" else tcy(m1 + "゛") end end end |
#convert_for_all_data(data) ⇒ Object
小説データ全体に対して施す変換
969 970 971 972 973 974 975 976 977 978 979 980 981 982 983 984 985 986 987 988 989 990 991 992 993 994 |
# File 'lib/converterbase.rb', line 969 def convert_for_all_data(data) auto_join_in_brackets(data) auto_join_line(data) if @setting.enable_auto_join_line erase_comments_block(data) replace_illust_tag(data) replace_url(data) replace_narou_tag(data) convert_rome_numeric(data) alphabet_to_zenkaku(data, @setting.enable_alphabet_force_zenkaku) convert_numbers(data) exception_reconvert_kanji_to_num(data) if @setting.enable_convert_num_to_kanji && @text_type != "subtitle" \ && @setting.enable_kanji_num_with_units convert_kanji_num_with_unit(data, @setting.kanji_num_with_units_lower_digit_zero) end rebuild_kanji_num(data) insert_separate_space(data) convert_special_characters(data) convert_fraction_and_date(data) modify_kana_ni_to_kanji_ni(data) if @text_type == "body" || @text_type == "textfile" half_indent_bracket(data) auto_indent(data) end convert_dakuten_char_to_font(data) end |
#convert_fraction_and_date(data) ⇒ Object
分数表記を○分の○表記に変更、及び日付表記を検出
スラッシュで区切られた数字が2個なら分数、3個なら日付と定義
232 233 234 235 236 237 238 239 240 241 242 243 244 245 246 247 248 249 250 251 252 253 254 255 256 257 258 259 260 261 262 263 264 265 |
# File 'lib/converterbase.rb', line 232 def convert_fraction_and_date(data) if !@setting.enable_transform_fraction && !@setting.enable_transform_date return end target_num = "\d0-9#{KANJI_NUM}十百千万億兆京垓" data.gsub!(/[#{target_num}\//]+/) do |match| numerics = match.split(/[\//]/) case numerics.count when 2 # 分数 if @setting.enable_transform_fraction "#{zenkaku_num_to_kanji(numerics[1])}分の#{zenkaku_num_to_kanji(numerics[0])}" else match end when 3 # 日付 if @setting.enable_transform_date begin date = Date.new(*numerics.map { |s| s.tr!("0-90-9#{KANJI_NUM}", "0-90-90-9") s.to_i }) rescue ArgumentError match else convert_numbers(date.strftime(@setting.date_format)) end end else match end end end |
#convert_horizontal_ellipsis(data) ⇒ Object
中黒(・)や句読点を並べて三点リーダーもどきにしているのを三点リーダーに変換
876 877 878 879 880 881 882 883 884 885 886 887 888 889 890 |
# File 'lib/converterbase.rb', line 876 def convert_horizontal_ellipsis(data) return if !@setting.enable_convert_horizontal_ellipsis || @text_type == "subtitle" %w(・ 。 、).each do |char| data.gsub!(/#{char}{3,}/) do |match| pre_char, post_char = $`[-1], $'[0] if pre_char == "―" || post_char == "―" match else "…" * ((match.length / 3.0 / 2).ceil * 2) end end end data.gsub!("。。", "。") data.gsub!("、、", "、") end |
#convert_kanji_num_with_unit(data, lower_digit_zero = 0) ⇒ Object
漢数字を単位を使った表現に変換
800万1000 といったような表現は、内部一度で 8001000 に変換する。 lower_digit_zero はこの最後の 000 に適用される
182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 200 201 202 203 204 205 206 207 208 209 210 211 212 |
# File 'lib/converterbase.rb', line 182 def convert_kanji_num_with_unit(data, lower_digit_zero = 0) data.gsub!(/([#{KANJI_NUM}十百千万億兆京]+)/) do |match| total = kanji_num_to_integer($1) m1 = total.to_s.tr("0-9", KANJI_NUM) if m1 =~ /〇{#{lower_digit_zero},}$/ digits = m1.reverse.scan(/.{1,4}/).map(&:reverse).reverse # 下の桁から4桁ずつ区切った配列を作成 keta = digits.count - 1 digits.map.with_index { |nums, keta_i| four_digit_num = nums.scan(/./).map.with_index { |d, di| next "" if d == "〇" kurai = KANJI_KURAI[nums.length - di - 1] if d == "一" # 4桁の千の前は一は必須ではなく、5桁以上の場合の千の前には一をつける # 1100 → 千百、11100 → 一万一千百 if kurai != "" && !(keta > 0 && kurai == "千") d = "" end end d + kurai }.join if four_digit_num.length > 0 four_digit_num + KANJI_NUM_UNITS[keta - keta_i] else "" end }.join else match end end end |
#convert_main(io) ⇒ Object
変換処理本体
@text_type: 渡されるテキストの種類。subtitle, introduction, body, postscript, textfile のどれか
1019 1020 1021 1022 1023 1024 1025 1026 1027 1028 1029 1030 1031 1032 1033 1034 1035 1036 1037 1038 1039 1040 1041 1042 1043 1044 1045 1046 1047 1048 1049 1050 1051 1052 1053 1054 1055 1056 1057 1058 1059 1060 1061 1062 1063 1064 1065 1066 1067 1068 1069 1070 1071 1072 1073 1074 1075 1076 1077 1078 1079 1080 1081 1082 1083 1084 1085 1086 1087 1088 1089 1090 1091 1092 1093 |
# File 'lib/converterbase.rb', line 1019 def convert_main(io) @write_fp = StringIO.new case @text_type when "introduction" return @write_fp if @setting.enable_erase_introduction when "postscript" return @write_fp if @setting.enable_erase_postscript end if @text_type == "textfile" @write_fp.puts(io.gets + io.gets) # タイトル・著者名スキップ data = io.read else data = io.read end initialize_member_values convert_for_all_data(data) if @text_type == "textfile" # convert_for_all_data -> replace_narou_tag # で改行化を行わないと正確な改行数は分からない = ProgressBar.new(data.count("\n") + 1) .output(0) end @read_fp = StringIO.new(data) if @text_type == "subtitle" @write_fp.write(data) else @read_fp.each_with_index do |line, i| .output(i) if @text_type == "textfile" @request_skip_output_line = false zenkaku_rstrip(line) if @request_insert_blank_next_line outputs unless blank_line?(line) @request_insert_blank_next_line = false end (line) if @text_type == "textfile" insert_blank_line_to_border_symbol(line) force_indent_special_chapter(line) outputs(line) unless @delay_outputs_buffer.empty? @write_fp.write(@delay_outputs_buffer) @before_line = @delay_outputs_buffer @delay_outputs_buffer = "" else @before_line = line end end if @text_type == "textfile" end @write_fp.rewind data = @write_fp.string if @text_type == "textfile" if @setting. erase_introduction(data) if @setting.enable_erase_introduction erase_postscript(data) if @setting.enable_erase_postscript end if @setting.enable_enchant_midashi enchant_midashi(data) end end rebuild_illust(data) rebuild_url(data) rebuild_english_sentences(data) rebuild_hankaku_num_and_comma(data) rebuild_kome_to_gaiji(data) # 再構築された文章にルビがふられる可能性を考慮して、 # この位置でルビの処理を行う narou_ruby(data) if @setting.enable_ruby # 三点リーダーの変換は、ルビで圏点として・・・を使っている場合を考慮して、ルビ処理後にする convert_horizontal_ellipsis(data) data.strip! .clear if @text_type == "textfile" @write_fp end |
#convert_novel_rule(data) ⇒ Object
小説のルールに沿うように変換
423 424 425 426 427 428 429 430 431 432 433 434 435 436 437 438 |
# File 'lib/converterbase.rb', line 423 def convert_novel_rule(data) # 括弧の閉じの直前の句点を消す data.gsub!(/。([」』)])/, "\\1") # 原則偶数個を1セットで使うべき文字を偶数個に補正 # MEMO:(―も偶数個セットにするべきだが、記号的な意味で使われる場合もあるので無視) %w(… ‥).each do |target| data.gsub!(/#{target}+/) do |match| len = match.length len += 1 if len.odd? target * len end end # たまに見かける誤字対策 data.gsub!(/。 /, "。") data.gsub!(/([?!])。/, "\\1") end |
#convert_numbers(data) ⇒ Object
数字の変換
72 73 74 75 76 77 78 79 80 81 |
# File 'lib/converterbase.rb', line 72 def convert_numbers(data) # 小数点を・に data.gsub!(/([\d0-9#{KANJI_NUM}]+?)[\..]([\d0-9#{KANJI_NUM}]+?)/, "\\1・\\2") if @setting.enable_convert_num_to_kanji && @text_type != "subtitle" num_to_kanji(data) else hankaku_num_to_zenkaku_num(data) end data end |
#convert_page_break(data) ⇒ Object
一定以上の連続する空行を改ページに変換
958 959 960 961 962 963 964 |
# File 'lib/converterbase.rb', line 958 def convert_page_break(data) if @setting.enable_convert_page_break threshold = @setting.to_page_break_threshold + 1 # `改ページ' を使うと見出し付与等で混乱するので自動生成したものは区別する data.gsub!(/\n{#{threshold},}/, "\n[#改頁]\n") end end |
#convert_rome_numeric(data) ⇒ Object
ローマ数字っぽいアルファベットをローマ数字に変換
※alphabet_to_zenkaku の前に実行する必要あり
298 299 300 301 302 |
# File 'lib/converterbase.rb', line 298 def convert_rome_numeric(data) ROME_NUM_ALPHABET.each_with_index do |rome, i| data.gsub!(/([^a-zA-Z])#{rome}([^a-zA-Z])/, "\\1#{ROME_NUM[i]}\\2") end end |
#convert_special_characters(data) ⇒ Object
特定の表現・記号を変換していく
307 308 309 310 311 312 313 |
# File 'lib/converterbase.rb', line 307 def convert_special_characters(data) convert_aozora_special_charactoers(data) symbols_to_zenkaku(data) convert_tatechuyoko(data) convert_novel_rule(data) convert_arrow(data) end |
#convert_tatechuyoko(data) ⇒ Object
縦中横にすべき表現を変換
337 338 339 340 341 342 343 344 345 346 347 348 349 350 351 352 353 354 355 356 357 358 359 360 361 362 363 364 365 366 367 368 369 370 371 372 |
# File 'lib/converterbase.rb', line 337 def convert_tatechuyoko(data) # 感嘆符及び疑問符の縦中横化 # AozoraEPUB3の縦中横設定を使えば明示的に注記を使う必要はないが、 # 見出しの中では自動で縦中横にはならないため、明示的指定をしておく # 事前に !? は全角にしておく data.gsub!(/!+/) do |match| if "#{$`[-1]}#{$'[0]}".include?("?") next match end len = match.length if len == 3 tcy("!!!") elsif len >= 4 # 4個以上なら偶数になるように調整(奇数だった場合増やす方向(+1))して2個ずつ縦中横 len += 1 if len.odd? tcy("!!") * (len / 2) else match end end data.gsub!(/[!?]+/) do |match| case match.length when 2 tcy(match.tr("!?", "!?")) when 3 # 見た目的にこのパターンだけ縦中横化を許容する if %w(!!? ?!!).find { |v| v == match } tcy(match.tr("!?", "!?")) else match end else match end end end |
#delay_outputs(data = "") ⇒ Object
56 57 58 59 60 |
# File 'lib/converterbase.rb', line 56 def delay_outputs(data = "") unless @request_skip_output_line @delay_outputs_buffer << data + "\n" end end |
#enchant_midashi(data) ⇒ Object
[#改ページ]直後の行を見出しに設定する
902 903 904 905 906 907 908 909 910 911 912 913 914 915 916 917 918 919 920 921 922 923 924 925 |
# File 'lib/converterbase.rb', line 902 def enchant_midashi(data) def midashi(str) midashi_title = str.gsub("[#半字下げ]", "").gsub(/^[ \s]+/, "").gsub(/[ \s]+$/, "") @inspector.subtitle = midashi_title "[#3字下げ][#ここから中見出し]#{midashi_title}[#ここで中見出し終わり]" end data.gsub!(/[#改ページ]\n(.+?)\n/) do |match| m1 = $1 rest = $' if $1 =~ /#{AUTHOR_COMMENT_CHUKI[:introduction][:open]}/ match else # 見出しの次の行が空行ではない場合空行を追加する add_tail = rest =~ /\A$/ ? "" : "\n\n" "[#改ページ]\n#{midashi(m1)}\n#{add_tail}" end end data.gsub!(/([#改ページ]\n)(#{AUTHOR_COMMENT_CHUKI[:introduction][:open]}.+?#{AUTHOR_COMMENT_CHUKI[:introduction][:close]}\n)(.+?\n)/m) do m1, m2, m3 = $1, $2, $3 add_tail = $' =~ /\A$/ ? "" : "\n" "#{m1 + midashi(m3) + m2}#{add_tail}" # 前書き→見出しの順番を見出し→前書きに入れ替えて置換 end end |
#erase_comments_block(data) ⇒ Object
コメントブロックを削除する
488 489 490 |
# File 'lib/converterbase.rb', line 488 def erase_comments_block(data) data.gsub!(/^-{50,}\n.*^-{50,}\n/m, "") end |
#erase_introduction(data) ⇒ Object
前書きを削除する
930 931 932 933 934 935 936 937 938 939 |
# File 'lib/converterbase.rb', line 930 def erase_introduction(data) del_count = 0 data.gsub!(/([#改ページ])\n#{AUTHOR_COMMENT_CHUKI[:introduction][:open]}.+?#{AUTHOR_COMMENT_CHUKI[:introduction][:close]}/m) do del_count += 1 $1 end if del_count > 0 @inspector.info("前書きをすべて削除しました。削除した数は#{del_count}個です。") end end |
#erase_postscript(data) ⇒ Object
後書きを削除する
944 945 946 947 948 949 950 951 952 953 |
# File 'lib/converterbase.rb', line 944 def erase_postscript(data) del_count = 0 data.gsub!(/#{AUTHOR_COMMENT_CHUKI[:postscript][:open]}.+?#{AUTHOR_COMMENT_CHUKI[:postscript][:close]}\n([#改ページ]|\z)/m) do del_count += 1 $1 end if del_count > 0 @inspector.info("後書きをすべて削除しました。削除した数は#{del_count}個です。") end end |
#exception_reconvert_kanji_to_num(data) ⇒ Object
アラビア数字を使うべきところはアラビア数字に戻す
217 218 219 220 221 222 223 224 225 |
# File 'lib/converterbase.rb', line 217 def exception_reconvert_kanji_to_num(data) return unless @setting.enable_convert_num_to_kanji data.gsub!(/([A-Za-z])([#{KANJI_NUM}・~]+)/) do # ver1・01 のようなパターンも許容する $1 + $2.tr(KANJI_NUM, "0-9") end data.gsub!(/([#{KANJI_NUM}・~]+)([A-Za-z])/) do $1.tr(KANJI_NUM, "0-9") + $2 end end |
#find_introduction? ⇒ Boolean
前書きの検出
649 650 651 652 653 654 655 656 657 658 659 660 661 |
# File 'lib/converterbase.rb', line 649 def find_introduction? pos = @read_fp.pos result = false @read_fp.each do |line| break if page_break?(line) if line =~ AUTHOR_INTRODUCTION_SPLITTER result = true break end end @read_fp.pos = pos result end |
#force_indent_special_chapter(line) ⇒ Object
章見出しっぽい文字列を字下げして前後に空行を入れる
TODO: 半角数字の縦中横注記をいれた影響で、2桁の半角数字が認識されてないのをどうにかする
550 551 552 553 554 555 556 557 558 559 560 561 |
# File 'lib/converterbase.rb', line 550 def force_indent_special_chapter(line) line.sub!(/^(?:[ \t]|[#二分アキ])*([-―<<〈-]*)([0-90-9#{KANJI_NUM}]+)([-―>>〉-]*)$/) do @request_insert_blank_next_line = true top, chapter, bottom = $1, $2, $3 if top != "" && "―--".include?(top) top = "― " bottom = " ―" end (blank_line?(@before_line) ? "" : "\n") + " [#ゴシック体]" + \ top + hankaku_num_to_zenkaku_num(zenkaku_num_to_hankaku_num(chapter)) + bottom + "[#ゴシック体終わり]" end end |
#half_indent_bracket(data) ⇒ Object
行頭かぎ括弧(等)に二分アキを追加する
「や(などの前にカスタム注記([#二分アキ])を追加し、半文字分字下げする(二分アキ)。 kindle paperwhite で鍵括弧のインデントがおかしいことへの対応
526 527 528 |
# File 'lib/converterbase.rb', line 526 def half_indent_bracket(data) data.gsub!(HALF_INDENT_TARGET, "[#二分アキ]\\1") if @setting.enable_half_indent_bracket end |
#hankaku_num_to_zenkaku_num(data) ⇒ Object
半角アラビア数字の全角化
1桁、3桁以上:全角化 2桁:縦中横化
505 506 507 508 509 510 511 512 513 514 515 516 |
# File 'lib/converterbase.rb', line 505 def hankaku_num_to_zenkaku_num(data) data.gsub!(/\d+/) do |num| if num.length == 2 tcy(num) elsif num.length == 3 && @text_type == "subtitle" && $`.empty? tcy(num) else num.tr("0-9", "0-9") end end data end |
#inclusion_author_comment_block?(line) ⇒ Boolean
663 664 665 666 667 668 669 670 671 672 673 674 675 |
# File 'lib/converterbase.rb', line 663 def (line) result = false if page_break?(line) if find_introduction? @in_author_comment_block = :introduction result = true end elsif line =~ AUTHOR_POSTSCRIPT_SPLITTER @in_author_comment_block = :postscript result = true end result end |
#initialize_member_values ⇒ Object
36 37 38 39 40 41 42 43 44 45 46 47 48 |
# File 'lib/converterbase.rb', line 36 def initialize_member_values @request_insert_blank_next_line = false @request_skip_output_line = false @before_line = "" @delay_outputs_buffer = "" @in_comment_block = false @english_sentences = [] @url_list = [] @illust_chuki_list = [] @kanji_num_list = {} @num_and_comma_list = {} @in_author_comment_block = nil end |
#insert_blank_line_to_border_symbol(line) ⇒ Object
■などの区切りの前後には空行が必ず存在するようにする
584 585 586 587 588 589 590 591 592 593 594 |
# File 'lib/converterbase.rb', line 584 def insert_blank_line_to_border_symbol(line) result = "" if border_symbol?(line) unless blank_line?(@before_line) result << "\n" end @request_insert_blank_next_line = true jisage(line, 4) end line.sub!(/\A/, result) end |
#insert_separate_space(data) ⇒ Object
特定の記号の直後は全角アキを挿入する
270 271 272 273 274 275 276 277 278 279 280 |
# File 'lib/converterbase.rb', line 270 def insert_separate_space(data) data.gsub!(/([!?!?]+)([^!?!?])/) do m1, m2 = $1, $2 m2 = " " if m2 == " " if m2 =~ /[^」]\]』】〉》〕>>≫))"”’〟 ☆★♪[―]/ "#{m1} #{m2}" else "#{m1}#{m2}" end end end |
#jisage(line, num) ⇒ Object
行頭空白を考慮した字下げ
566 567 568 |
# File 'lib/converterbase.rb', line 566 def jisage(line, num) line.sub!(/^[ \t]*/, " " * num) end |
#join_inner_bracket(str) ⇒ Object
改行を連結した文章を作る
改行がひとつもなかった場合は nil を返す
713 714 715 716 717 718 719 720 721 |
# File 'lib/converterbase.rb', line 713 def join_inner_bracket(str) joined_str = str.dup return nil if str.count("\n") == 0 joined_str.gsub!(/([…―])\n/, "\\1。\n") joined_str = joined_str.split("\n").map { |s| s.sub(/^ +/, "") }.join joined_str end |
#kanji_num_to_integer(string) ⇒ Object
168 169 170 171 172 173 174 |
# File 'lib/converterbase.rb', line 168 def kanji_num_to_integer(string) total = 0 string.scan(/([#{KANJI_NUM}十百千]+)([万億兆京]*)/) do |num, units| total += (__calc_kanji_num_with_unit(num).to_s + units.each_char.map { |c| "0" * KANJI_NUM_UNITS_DIGIT[c] }.join).to_i end total end |
#leave_author_comment_block?(line) ⇒ Boolean
677 678 679 680 681 682 683 684 685 686 687 688 689 690 |
# File 'lib/converterbase.rb', line 677 def (line) result = false case @in_author_comment_block when :introduction if line =~ AUTHOR_INTRODUCTION_SPLITTER result = true end when :postscript if page_break?(line) result = true end end result end |
#midashi(str) ⇒ Object
903 904 905 906 907 |
# File 'lib/converterbase.rb', line 903 def midashi(str) midashi_title = str.gsub("[#半字下げ]", "").gsub(/^[ \s]+/, "").gsub(/[ \s]+$/, "") @inspector.subtitle = midashi_title "[#3字下げ][#ここから中見出し]#{midashi_title}[#ここで中見出し終わり]" end |
#modify_kana_ni_to_kanji_ni(data) ⇒ Object
漢字の二じゃなくて間違えてカタカナのニを使ってるのを校正する
895 896 897 |
# File 'lib/converterbase.rb', line 895 def modify_kana_ni_to_kanji_ni(data) data.gsub!(/([^ァ-ヶー])ニ([^ァ-ヶー])/, "\\1二\\2") end |
#narou_ruby(data) ⇒ Object
小説家になろうのルビ対策
767 768 769 770 771 772 773 774 775 776 777 778 779 780 |
# File 'lib/converterbase.rb', line 767 def narou_ruby(data) # 《》なルビの対処 data.gsub!(/(.+?)≪(.+?)≫/) do |match| to_ruby(match, $1, $2, ["≪", "≫"]) end # ()なルビの対処 if @text_type != "subtitle" data.gsub!(/(.+?)(([ぁ-んァ-ヶーゝゞ・A-Za-zA-Za-z ]{,20}))/) do |match| to_ruby(match, $1, $2, ["(", ")"]) end end data.replace(replace_tatesen(data)) data.gsub!("[#ルビ用縦線]", "|") end |
#num_to_kanji(data) ⇒ Object
アラビア数字を漢数字に
カンマ区切りの数字はアラビア数字のままにしておく もともと漢数字なのは他の変換を受けないように退避させておく
89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 |
# File 'lib/converterbase.rb', line 89 def num_to_kanji(data) stash_kanji_num(data) data.gsub!(/[\d0-9,,]+/) do |match| if match =~ /[,,]/ if match =~ /[\d]/ stash_hankaku_num_and_comma(match.tr(",", ",")) else match end else zenkaku_num_to_kanji(match.tr("0-9", KANJI_NUM)) end end data end |
#object_of_ruby?(char) ⇒ Boolean
784 785 786 |
# File 'lib/converterbase.rb', line 784 def object_of_ruby?(char) char =~ /[#{CHARACTER_OF_RUBY}]/ end |
#outputs(data = "", force = false) ⇒ Object
50 51 52 53 54 |
# File 'lib/converterbase.rb', line 50 def outputs(data = "", force = false) if !@request_skip_output_line || force @write_fp.puts(data) end end |
#page_break?(line) ⇒ Boolean
改ページある?
599 600 601 |
# File 'lib/converterbase.rb', line 599 def page_break?(line) line =~ /[#改ページ]/ end |
#process_author_comment(line) ⇒ Object
618 619 620 621 622 623 624 625 626 627 628 629 630 631 632 633 634 635 636 637 638 639 640 641 642 643 644 645 646 |
# File 'lib/converterbase.rb', line 618 def (line) if @setting. if @in_author_comment_block if (line) outputs(AUTHOR_COMMENT_CHUKI[@in_author_comment_block][:close]) if @in_author_comment_block == :introduction @request_skip_output_line = true line.clear @in_author_comment_block = nil elsif @in_author_comment_block == :postscript @in_author_comment_block = nil # [#改ページ](前書きの開始位置)を検出したため、 # 改めて前書きの検出をする (line) end end else if (line) # outputs を使うと改ページより前に注記が入ってしまうため、 # delay_outputs を使って出力を line 出力の後に遅らせる delay_outputs(AUTHOR_COMMENT_CHUKI[@in_author_comment_block][:open]) if @in_author_comment_block == :postscript @request_skip_output_line = true line.clear end end end end end |
#rebuild_english_sentences(data) ⇒ Object
英文を再構成する
466 467 468 469 470 |
# File 'lib/converterbase.rb', line 466 def rebuild_english_sentences(data) @english_sentences.each_with_index do |sentence, id| data.sub!("[#英文=#{convert_numbers(id.to_s)}]", sentence) end end |
#rebuild_hankaku_num_and_comma(data) ⇒ Object
112 113 114 115 116 |
# File 'lib/converterbase.rb', line 112 def rebuild_hankaku_num_and_comma(data) data.gsub!(/[#半角数字=(.+?)]/) do @num_and_comma_list[$1.to_i] end end |
#rebuild_illust(data) ⇒ Object
867 868 869 870 871 |
# File 'lib/converterbase.rb', line 867 def rebuild_illust(data) @illust_chuki_list.each_with_index do |chuki, id| data.sub!("[#挿絵=#{convert_numbers(id.to_s)}]", chuki) end end |
#rebuild_kanji_num(data) ⇒ Object
128 129 130 131 132 |
# File 'lib/converterbase.rb', line 128 def rebuild_kanji_num(data) data.gsub!(/[#漢数字=(.+?)]/) do @kanji_num_list[$1] end end |
#rebuild_kome_to_gaiji(data) ⇒ Object
※の外字注記化
convert_aozora_special_charactoers で2つにしておいた※を外字注記化する
399 400 401 |
# File 'lib/converterbase.rb', line 399 def rebuild_kome_to_gaiji(data) data.gsub!("※※", "※[#米印、1-2-8]") end |
#rebuild_url(data) ⇒ Object
843 844 845 846 847 848 |
# File 'lib/converterbase.rb', line 843 def rebuild_url(data) @url_list.each_with_index do |url, id| data.sub!("[#URL=#{convert_numbers(id.to_s)}]", "<a href=\"#{url}\">#{url}</a>") end end |
#replace_by_replace_txt(text) ⇒ Object
replace.txt により単純置換
1098 1099 1100 1101 1102 1103 |
# File 'lib/converterbase.rb', line 1098 def replace_by_replace_txt(text) @setting.replace_pattern.each do |pattern| src, dst = pattern text.gsub!(src, dst) end end |
#replace_illust_tag(data) ⇒ Object
なろうの挿絵タグを挿絵注釈に変換 挿絵画像が存在しなければダウンロードして保存する
854 855 856 857 858 859 860 861 862 863 864 865 |
# File 'lib/converterbase.rb', line 854 def replace_illust_tag(data) data.gsub!(/^(<i[0-9]+\|[0-9]+>)\n?/m) do next "" unless @setting.enable_narou_illust chuki = @illustration.get($1) if chuki @illust_chuki_list << chuki "[#挿絵=#{@illust_chuki_list.count - 1}]\n" else "" end end end |
#replace_narou_tag(data) ⇒ Object
小説家になろう専用タグを置換
285 286 287 288 289 |
# File 'lib/converterbase.rb', line 285 def replace_narou_tag(data) data.gsub!("【改ページ】", "") data.gsub!(/<KBR>/i, "\n") data.gsub!(/<PBR>/i, "\n") end |
#replace_tatesen(str) ⇒ Object
796 797 798 |
# File 'lib/converterbase.rb', line 796 def replace_tatesen(str) str.gsub("|", "※[#縦線]") end |
#replace_url(data) ⇒ Object
URL っぽい文字列を一旦別のIDに置き換えてあとで復元することで、変換処理の影響を受けさせない
836 837 838 839 840 841 |
# File 'lib/converterbase.rb', line 836 def replace_url(data) data.gsub!(URI.regexp) do |match| @url_list << match "[#URL=#{@url_list.count - 1}]" end end |
#rstrip_all_lines(data) ⇒ Object
すべての行の行末空白を削除
65 66 67 |
# File 'lib/converterbase.rb', line 65 def rstrip_all_lines(data) data.gsub(/[ \t]+$/m, "") end |
#sesame(str, ten) ⇒ Object
788 789 790 791 792 793 794 |
# File 'lib/converterbase.rb', line 788 def sesame(str, ten) if str.include?("|") str.sub("|", "[#傍点]") + "[#傍点終わり]" else str.insert(-(ten.length + 1), "[#傍点]") + "[#傍点終わり]" end end |
#stash_hankaku_num_and_comma(num) ⇒ Object
105 106 107 108 109 110 |
# File 'lib/converterbase.rb', line 105 def stash_hankaku_num_and_comma(num) @@num_and_comma_list_counter ||= 0 @@num_and_comma_list_counter += 1 @num_and_comma_list[@@num_and_comma_list_counter] = num "[#半角数字=#{@@num_and_comma_list_counter}]" end |
#stash_kanji_num(data) ⇒ Object
118 119 120 121 122 123 124 125 126 |
# File 'lib/converterbase.rb', line 118 def stash_kanji_num(data) data.gsub!(/[#{KANJI_NUM}十百千万億兆京]+/).with_index do |match, i| if "#{$`[-1]}#{$'[0]}" =~ /[\d0-9]/ next match end @kanji_num_list[convert_numbers(i.to_s)] = match "[#漢数字=#{i}]" end end |
#symbols_to_zenkaku(data) ⇒ Object
記号を全角に変換
318 319 320 321 322 323 324 325 |
# File 'lib/converterbase.rb', line 318 def symbols_to_zenkaku(data) data.tr!("“”‘’〝〟", %!""''""!) data.gsub!(/"([^"\n]+)"/, "〝\\1〟") data.gsub!(/'([^'\n]+)'/, "〝\\1〟") # MEMO: シングルミュート(ノノカギ)を表示出来るフォントはほとんど無い data.tr!("-=+/*《》'\"%$#&!?、<><>()|‐,._;:[]", "-=+/*≪≫’”%$#&!?、〈〉〈〉()|-,._;:[]") data.gsub!("\\", "¥") end |
#tcy(str) ⇒ Object
縦中横注記取得
330 331 332 |
# File 'lib/converterbase.rb', line 330 def tcy(str) "[#縦中横]#{str}[#縦中横終わり]" end |
#to_ruby(match, m1, m2, openclose_symbols) ⇒ Object
800 801 802 803 804 805 806 807 808 809 810 811 812 813 814 815 816 817 818 819 820 821 822 823 824 |
# File 'lib/converterbase.rb', line 800 def to_ruby(match, m1, m2, openclose_symbols) last_char = m1[-1] case when last_char == "|" # 直前に|がある場合ルビ化は抑制される "#{m1[0...-1]}#{openclose_symbols[0]}#{m2}#{openclose_symbols[1]}" when m2 =~ /^・+$/ # ルビが・だけの場合、傍点と判断 sesame(m1, m2) when m1.include?("|") "#{m1.sub(/|([^|]*)$/, "[#ルビ用縦線]\\1")}《#{m2}》" when object_of_ruby?(last_char) # なろうのルビ対象文字を辿って|を挿入する(青空文庫となろうのルビ仕様の差異吸収のため) m1.gsub(/([#{CHARACTER_OF_RUBY} ]+)$/) { match_target = $1 if match_target =~ /^( +)/ "#{$1}[#ルビ用縦線]#{match_target[$1.length..-1]}" else "[#ルビ用縦線]#{match_target}" end } + "《#{m2}》" else match end end |
#zenkaku_num_to_hankaku_num(num) ⇒ Object
全角数字を半角アラビア数字に
495 496 497 |
# File 'lib/converterbase.rb', line 495 def zenkaku_num_to_hankaku_num(num) num.tr("0-9#{KANJI_NUM}", "0-90-9") end |
#zenkaku_num_to_kanji(str) ⇒ Object
全角アラビア数字を漢数字に
137 138 139 |
# File 'lib/converterbase.rb', line 137 def zenkaku_num_to_kanji(str) str.tr("0-9", KANJI_NUM) end |
#zenkaku_rstrip(line) ⇒ Object
全角版 String#rstrip!
829 830 831 |
# File 'lib/converterbase.rb', line 829 def zenkaku_rstrip(line) line.gsub!(/[ \s]+\z/, "") end |