义务教育阶段教材下载

查看 164|回复 10
作者:Senkita   
背景
临时需要几本人教版教材,就跑去人民教育出版社查看。
但是离网环境阅读不便,于是就想说下载下来。
网站没做反爬,直接爬取就行。所以这只是段随手写的几行小脚本,方便自用而已,大佬勿喷。

另:其他版本教材可到国家中小学智慧教育平台获取。在对应教材阅读页打开开发者工具-网络,下载异步加载完成的pdf.pdf文件即是。

教材版权归出版社所有,在此仅作代码交流用途。
地址
[ol]
  • 仓库:Textbook Crawler
    [/ol]
    代码
    import os
    import requests
    from PIL import Image
    class Crawler:
      textbooks: dict[str, dict[str, int]]
      def __init__(self, textbooks: dict[str, dict[str, int]]) -> None:
        self.textbooks = textbooks
      def download_pic(self, book: str) -> None:
        '''
        description: 下载图片
        param       {*} self
        param       {str} book
        return      {*}
        author     : Senkita
        '''
        os.makedirs(book, exist_ok=True)
        book_id: int = self.textbooks[book]['id']
        pages: int = self.textbooks[book]['pages']
        for page in range(pages):
          page_num: int = page + 1
          url: str = 'https://book.pep.com.cn/{}/files/mobile/{}.jpg'.format(
            book_id, page_num
          )
          res = requests.get(url)
          with open('{}/{}.jpg'.format(book, page_num), 'wb') as f:
            f.write(res.content)
      @staticmethod
      def sort_pic(book: str) -> list:
        '''
        description: 图片排序
        param       {str} book
        return      {list}
        author     : Senkita
        '''
        files: list = []
        for file in os.listdir(book):
          if file[-4:] == '.jpg':
            files.append(file[:-4])
        files.sort(key=lambda ele: int(ele))
        return files
      @staticmethod
      def generate_pdf(book: str, files: list) -> None:
        '''
        description: 生成PDF
        param       {str} book
        param       {list} files
        return      {*}
        author     : Senkita
        '''
        pics: list = []
        pdf: Image.Image = Image.open('{}/{}.jpg'.format(book, files[0]))
        files.pop(0)
        for pic in files:
          img: Image.Image = Image.open('{}/{}.jpg'.format(book, pic))
          if img.mode == 'RGBA':
            img = img.convert('RGB')
          pics.append(img)
        pdf.save(
          './{}.pdf'.format(book),
          'PDF',
          resolution=100.0,
          save_all=True,
          quality=100,  # 清晰度
          subsampling=0,
          append_images=pics,
        )
      def run(self) -> None:
        for book in self.textbooks:
          self.download_pic(book)
          files: list = self.sort_pic(book)
          self.generate_pdf(book, files)

    教材, 代码

  • xiaofeiTM233   

    我记得是有个办法直接下pdf的(如图)

    我一直是手动下的,刚刚浅看了一下,格式很简单,就是[Asm] 纯文本查看 复制代码https://r2-ndr.ykt.cbern.com.cn/edu_product/esp/assets_document/【地址中的contentId】.pkg/pdf.pdf
    发经验分享好了,国家中小学智慧教育平台教材下载方法(api) - 『福利经验』 - 吾爱破解 - LCG - LSG |安卓破解|病毒分析|www.52pojie.cn
    hofer   

    这是什么脚本,如何使用呢
    zgxhmj   

    会写的还是比我们这些人强呀
    laobenlang   

    可以,可以,这个可以。
    eskyboy   

    羡慕会写脚本的
    宝葫芦   

    吾爱有你更精彩!!!!
    mcumail   

    太棒了,膜拜中。。。
    千军破   

    谢谢,学习了
    bestmusic   

    谢谢分享!!!!
    您需要登录后才可以回帖 登录 | 立即注册