生成Kindle可读的mobi和PDF电子书

购买kindle以后，天然欣喜万分，不来自于工具自己，而来自于发现本身可以静下心来阅读长篇和复杂的文字了，可喜可贺。更重要的是，kindle减轻了我眼睛的莫大的压力。但立刻就出现几个问题：

• 不是全部的电子书都有kindle，最多见的是扫描PDF
• 大量的论文没法阅读,这和上面的问题一致
• 网络上不少精彩的博客，新闻，都是无法阅读的

可能有人说，用手机看不就得了？用手机看花边娱乐新闻固然很好，但是当看数学推导时，推送栏上面妹子发来的消息，会直接把你的思路所有打乱。没用过kindle的人，是有些难以体会那种接近于纸张的质感的。OK，既然是程序员，咱们就尝试解决这些问题。

有关kindlegen和HTML

kindlegen是亚马逊官方出品的一个电子书生成工具。但它明显就没打算让普通用户使用，命令行界面，几乎没有任何像样的文档。只是在实例样例里给了几个生成电子书的文件。我就由于没有文档兜了大弯，翻遍国外各大网站，才慢慢摸清kindlegen的使用细节。
能够这么理解,KG是将一组HTML和相关文件，打包成mobi文件的工具。

最简单的例子，随意编写一个HTML文件，送给KG，会生成对应的mobi。基本有title,h1,h2,正文，kindle渲染就差很少了。若是须要修改样式，能够提供CSS文件。
可是，这样的作法，没有图片，没有超连接，没法提供目录，若是输入单一的大型HTML文件，kindle的渲染性能就不足了。

所以，须要生成层级化，多文件形式的html文件夹，然而kg并不能直接识别html文件夹，仍是须要一些元数据描述。

编写元数据文件

要想解决这个问题，就须要编写两个文件,opf和ncx, 他们能够理解为KG的makefile, KG经过这两个文件索引HTML，目录和其余多媒体资源。介绍以下：

值得注意的是，全部的文件都应该保存在本地，尤为是jpg, html中的图片超连接，须要重定向到本地的jpg文件，若是依然在服务器上，据我所知，kg是不负责渲染下载的。

资源聚合文件: opf和ncx

因为opf文件很是重要，咱们下面就讲解opf的格式：

<package xmlns="http://www.idpf.org/2007/opf" version="2.0" unique-identifier="BookId">
<metadata xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:opf="http://www.idpf.org/2007/opf">
<dc:title>电子书标题</dc:title>
<dc:language>en-us</dc:language>
</metadata>
<manifest>
     <!-- table of contents [mandatory] -->
    <item id="tochtml" media-type="application/xhtml+xml" href="toc.html"/>
    <item id="item0" media-type="application/xhtml+xml" href="Artical-1277621753.html"/>
    ...
    <!--下面是图片-->
     <item id="0.368541311142" media-type="image/jpg" href="Images/-1720404282.jpg"/>
</manifest>
<spine toc="desertfire">
  <!-- 下面描述了KG生成电子书后文本的顺序 -->
    <itemref idref="toc"/>  
    <itemref idref="tochtml"/>  
    <itemref idref="item31"/>
  
</spine>
<guide>
    <reference type="toc" title="Table of Contents" href="toc.html"></reference>
    <reference type="text" title="Welcome" href="toc.html"></reference>
</guide>
</package>
```

须要注意的有如下几点：

• 全部资源都须要一个id,命名任意，但不能重复
• media-type描述了资源的类型，记住两类基本就够用了，"application/xhtml+xml"表明HTML文件，"image/jpg"或 "image/png"表明图片。
• 其余均可以省略，只是会影响电子书完整性。
  因为这两个文件内部其实都是html,因此修改编辑都很容易。

最终，KG的命令行目标，不是目录HTML,而是OPF文件！将全部的文件放入一个文件夹后，启动KG命令行，最后KG会在该目录下生成你心仪已久的mobi!

编辑HTML和OPF文件

知道其原理后，主要的任务是填充HTML和OPF文件，几页内容还好，若是内容繁多，不管是手工( ⊙ o ⊙ ),仍是编程字符串拼接，都会变得异常低效。
此时，就须要模板引擎出手了，python推荐使用Jinja2, 资料众多，功能强大，性能尚可。生成opf的模板文件，基本就长下面这个样子：

<package xmlns="http://www.idpf.org/2007/opf" version="2.0" unique-identifier="BookId">
<metadata xmlns:dc="http://purl.org/dc/elements/1.1/" xmlns:opf="http://www.idpf.org/2007/opf">
<dc:title>{{ title }}</dc:title>
<dc:language>en-us</dc:language>
</metadata>
<manifest>
      <!-- table of contents [mandatory] -->
    <item id="toc" media-type="application/x-dtbncx+xml" href="toc.ncx"/>
    <item id="tochtml" media-type="application/xhtml+xml" href="toc.html"/>
{% for item in navigation %}
    <item id="{{ item.id }}" media-type="application/xhtml+xml" href="{{ item.href }}"/>
{% endfor %}
 {% for item in media %}
   <item id="{{ item.id }}" media-type="image/{{ item.format}}" href="{{ item.href}}"/>
{% endfor %}
 
</manifest>
<spine toc="{{ title }}">
  <!-- the spine defines the linear reading order of the book -->
    <itemref idref="toc"/>  
    <itemref idref="tochtml"/>  
  {% for item in navigation %}
    <itemref idref="{{ item.id }}"/>
  {% endfor %}
</spine>
<guide>
    <reference type="toc" title="Table of Contents" href="toc.html"></reference>
    <reference type="text" title="Welcome" href="toc.html"></reference>
</guide>
</package>

我在此处就不费事讲解jinja2的语法了。这样，就能解决阅读网页新闻和HTML资源的问题了。

生成扫描版MOBI

下一个问题，是如何阅读扫描版的PDF，如电子书和论文。有如下几类初始想法：

权衡以后，咱们选用第二种方案。PDF分为两类，一种是一页一栏，如电子书，另外一种是一页两栏，如论文。
那么，为了保证质量，有如下的步骤：

将PDF转换为图片

若是使用python，则有一些类库可使用，如imagemagick和一系列相关类库。
但这些类库安装比较麻烦，所以笔者使用了软件生成，此处强烈推荐一款软件：
AP PDF to IMAGE 国产软件？的骄傲！不须要其余任何类库，体积小，性能稳定，生成图片尺寸可调，可批量处理，很是清晰！
百度可搜索各种绿色版下载，我都想给做者支付宝捐钱了。

图片处理

若是你是PS大神，固然可使用宏和批量命令完成这些，此处咱们用的仍是python，使用著名的PIL类库，下面贴出代码：

# coding=utf-8
import os

import Image as img
import jinja2 as jj

import extends
import libs.kindlestrip as kp



# 要PDF转JPG时，若是用python的方案，则须要安装一堆库
# 用现成的工具，则难以与Python集成，并且速度很慢，目前仍是采用现成的工具吧

# 当生成论文时，第一页的上半部分，单独抽出，剩下的分为四页导出。设置以下
horizon = 2
vertic = 2
firstpage = True
# 生成普通横版PDF时，则为以下设置：
# horizon = 1
# vertic  = 2
# firstpage=False

topblood = 0.05;
sideblood = 0.06;
booktitle = u"Paper";
author = "zhaoyiming"
outputfolder = "pdf2mobi/";
imgTypes = ['.png', '.jpg', '.bmp']
kindlegen = r"Tools/kindlegen.exe"  # kindlegen position
shouldsplit = True;
imagefolders = outputfolder + 'raw';
splitfolder = outputfolder + 'split'

docs = [];
pageindex = 0;

if shouldsplit == True:
    for root, dirs, files in os.walk(imagefolders):
        index = 0;
        for currentFile in files:
            crtFile = root + '\\' + currentFile
            format = crtFile[crtFile.rindex('.'):].lower();

            if format not in imgTypes:
                continue;
            crtIm = img.open(crtFile)
            crtW, crtH = crtIm.size
            hStep = crtW * (1 - 2 * sideblood) // horizon
            vStep = crtH * (1 - 2 * topblood) // vertic
            hstart = crtW * sideblood
            vstart = crtH * topblood;
            if (firstpage == True and pageindex == 0):
                crtOutFileName = 'pdf2mobi/split/' + str(index) + format,
                box = (hstart, vstart, crtW, crtH // 3)
                box = list((int(x) for x in box));
                cropped = crtIm.crop(box)
                cropped.save(crtOutFileName[0])
                myimg = {};
                myimg["href"] = "split/" + str(index) + format;
                myimg["id"] = index;
                myimg["format"] = format;
                myimg["width"] = box[2] - box[0];
                myimg["height"] = box[3] - box[1];
                docs.append(myimg)
                index += 1;

            for j in range(horizon):
                for i in range(vertic):
                    crtOutFileName = 'pdf2mobi/split/' + str(index) + format,
                    box = (hstart + j * hStep, vstart + i * vStep, hstart + (j + 1) * hStep, vstart + (i + 1) * vStep)
                    box = (int(x) for x in box);
                    cropped = crtIm.crop(box)
                    cropped.save(crtOutFileName[0])
                    myimg = {};
                    myimg["href"] = "split/" + str(index) + format;
                    myimg["id"] = index;
                    myimg["format"] = format;
                    myimg["width"] = hStep;
                    myimg["height"] = vStep;
                    docs.append(myimg)
                    index += 1;
            pageindex += 1;
else:
    for root, dirs, files in os.walk(imagefolders):
        index = 0;
        for currentFile in files:
            crtFile = root + '\\' + currentFile
            format = crtFile[crtFile.rindex('.'):].lower();
            if format not in imgTypes:
                continue;
            myimg = {};
            myimg["href"] = "split/" + str(index) + format;
            myimg["id"] = index;
            myimg["format"] = format;
            myimg["width"] = "1347";
            myimg["height"] = "1023";
            docs.append(myimg)
            index += 1;
images = [];
env = jj.Environment(loader=jj.FileSystemLoader([r"templates/"]))
articaltemplate = env.get_template('jpgs.html')

opftemplate = env.get_template('opf.html')
ncxtemplate = env.get_template('ncx.html')

extends.SaveFile(outputfolder + "toc.html", articaltemplate.render(navigation=docs, title=booktitle, author=author));
extends.SaveFile(outputfolder + booktitle + ".opf",
                 opftemplate.render(navigation=docs, title=booktitle, author=author, media=images));
extends.SaveFile(outputfolder + "toc.ncx", ncxtemplate.render(navigation=docs, title=booktitle, author=author));

currentPath = os.getcwd() + "\\" + outputfolder.replace("/", "\\") + booktitle + ".opf";
mobipath = outputfolder.replace("/", "\\") + booktitle + ".mobi";
kindlepath = os.getcwd() + "\\" + kindlegen.replace("/", "\\");
cmd = kindlepath + " " + currentPath;
cmd = cmd.encode();
print cmd;
os.system(cmd);
kp.Convert(mobipath, mobipath)

（我以为我应该把代码上传到github上，恩，一会再说）

这样，就能生成可读的漂亮的PDF转mobi了。

最终效果

这些代码花了我一个下午的时间，不过与爬虫配合，生成各位大神的博客，效果然是很是赞！

妈妈不再用担忧个人眼睛了！终于能够随时随地，没有广告地批量看大神们的博客了！

有任何问题，欢迎随时讨论。