~/

python -c "import pdfplumber; p='/tmp/workspace/attachments/032207b5-194b-4119-a17a-587ba8523795/DOC-20260906-WA0009.pdf'; pdf=pdfplumber.open(p); print('PAGES',len(pdf.pages)); [print('---PAGE',i+1,'---\n',page.extract_text() or '') for i,page in enumerate(pdf.pages)]"

mkdir -p "/tmp/workspace/esl-handbook/assets" "/tmp/workspace/esl-handbook/output" "/tmp/workspace/esl-handbook/src" && python -c "import fitz; p='/tmp/workspace/attachments/032207b5-194b-4119-a17a-587ba8523795/DOC-20260906-WA0009.pdf'; d=fitz.open(p); [(lambda pix,i: pix.save(f'/tmp/workspace/esl-handbook/assets/source_page_{i}.png'))(page.get_pixmap(matrix=fitz.Matrix(2.5,2.5), alpha=False),i+1) for i,page in enumerate(d)]" && ls -lh "/tmp/workspace/esl-handbook/assets"

python -c "import importlib.util; mods=['pypdfium2','pdf2image','wand','PIL','pytesseract','cv2']; print({m:bool(importlib.util.find_spec(m)) for m in mods})"

python -c "import pypdfium2 as pdfium; p='/tmp/workspace/attachments/032207b5-194b-4119-a17a-587ba8523795/DOC-20260906-WA0009.pdf'; d=pdfium.PdfDocument(p); [(lambda im,i: im.save(f'/tmp/workspace/esl-handbook/assets/source_page_{i}.png'))(d[i].render(scale=3).to_pil(),i+1) for i in range(len(d))]" && ls -lh "/tmp/workspace/esl-handbook/assets"

python -c "from PIL import Image; import os; base='/tmp/workspace/esl-handbook/assets'; [Image.open(f'{base}/source_page_{i}.png').convert('RGB').resize((1000, int(Image.open(f'{base}/source_page_{i}.png').height*1000/Image.open(f'{base}/source_page_{i}.png').width))).save(f'{base}/preview_{i}.jpg',quality=55,optimize=True) for i in range(1,5)]" && ls -lh "/tmp/workspace/esl-handbook/assets/preview_"*

python -c "import importlib.util; print('easyocr',importlib.util.find_spec('easyocr')); print('keras_ocr',importlib.util.find_spec('keras_ocr')); print('rapidocr_onnxruntime',importlib.util.find_spec('rapidocr_onnxruntime'))"

pip install --user rapidocr_onnxruntime -q

pip install --target "/tmp/workspace/esl-handbook/vendor" rapidocr_onnxruntime -q

PYTHONPATH="/tmp/workspace/esl-handbook/vendor:$PYTHONPATH" python -c "from rapidocr_onnxruntime import RapidOCR; import glob; ocr=RapidOCR(); [print('\n--- PAGE',p.split('_')[-1],'---\n'+ '\n'.join([x[1] for x in (ocr(p)[0] or [])])) for p in glob.glob('/tmp/workspace/esl-handbook/assets/source_page_*.png')]"

fc-list | grep -i 'DejaVuSans.ttf' | head -1

/usr/share/fonts/truetype

python -c "import matplotlib; from matplotlib import font_manager; print(font_manager.findfont('DejaVu Sans'))"

python - <<'PY' from reportlab.lib.pagesizes import A4 from reportlab.pdfgen import canvas from reportlab.lib import colors from reportlab.pdfbase import pdfmetrics from reportlab.pdfbase.ttfonts import TTFont from reportlab.lib.utils import simpleSplit from reportlab.pdfbase.pdfmetrics import stringWidth from reportlab.lib.colors import HexColor import os, math out='/tmp/workspace/esl-handbook/output/Animal_Vocabulary_Speaking_Handbook.pdf' font='/opt/amazon/genesis1p-tools/venv/lib/python3.12/site-packages/matplotlib/mpl-data/fonts/ttf/DejaVuSans.ttf' pdfmetrics.registerFont(TTFont('DV',font)); pdfmetrics.registerFont(TTFont('DV-Bold',font)) W,H=A4 c=canvas.Canvas(out,pagesize=A4) c.setTitle('Animal Vocabulary and Speaking Practice') NAVY=HexColor('#16324F'); BLUE=HexColor('#3D8BFD'); SKY=HexColor('#EAF5FF'); MINT=HexColor('#E8FAF2'); YELLOW=HexColor('#FFF4C7'); PINK=HexColor('#FFE8F1'); PURPLE=HexColor('#7357E8'); ORANGE=HexColor('#FF9F43'); RED=HexColor('#EF5B77'); GREEN=HexColor('#27AE7A'); INK=HexColor('#233043'); GREY=HexColor('#5B6B7A') def header(title, subtitle, page): c.setFillColor(NAVY); c.rect(0,H-90,W,90,fill=1,stroke=0) c.setFillColor(colors.white); c.setFont('DV-Bold',20); c.drawString(38,H-45,title) c.setFont('DV',9.5); c.setFillColor(HexColor('#DCEBFF')); c.drawString(38,H-65,subtitle) c.setFillColor(ORANGE); c.circle(W-42,H-45,17,fill=1,stroke=0) c.setFillColor(NAVY); c.setFont('DV-Bold',10); c.drawCentredString(W-42,H-49,str(page)) def footer(): c.setStrokeColor(HexColor('#D8E4EE')); c.line(38,30,W-38,30) c.setFillColor(GREY); c.setFont('DV',7.5); c.drawString(38,17,'Read • Say • Practice') def draw_wrapped(text, x, y, maxw, size=10, leading=14, color=INK, bold=False): c.setFont('DV-Bold' if bold else 'DV',size); c.setFillColor(color) lines=simpleSplit(text,'DV-Bold' if bold else 'DV',size,maxw) for line in lines: c.drawString(x,y,line); y-=leading return y def card(x,y,w,h,fill, word, ru, meaning, accent): c.setFillColor(fill); c.roundRect(x,y-h,w,h,12,fill=1,stroke=0) c.setFillColor(accent); c.circle(x+22,y-23,11,fill=1,stroke=0) c.setFillColor(colors.white); c.setFont('DV-Bold',11); c.drawCentredString(x+22,y-27,word[0].upper()) c.setFillColor(NAVY); c.setFont('DV-Bold',15); c.drawString(x+42,y-23,word) c.setFillColor(PURPLE); c.setFont('DV',9); c.drawString(x+42,y-39,ru) draw_wrapped(meaning,x+15,y-59,w-30,8.8,12,INK) vocab=[ ('wings','крылья','the body parts that birds use to fly',BLUE), ('feathers','перья','soft, light parts that cover a bird’s body',PURPLE), ('gills','жабры','body parts fish use to breathe in water',GREEN), ('scales','чешуя','small hard pieces that cover and protect many fish',ORANGE), ('tail','хвост','the long part at the back of an animal’s body',RED), ('fins','плавники','flat body parts fish use to swim and turn',BLUE), ('wet skin','влажная кожа','skin that has water on it and is not dry',GREEN), ('legs','ноги','body parts animals use to stand, walk, or jump',ORANGE), ('fur','мех, шерсть','thick, soft hair that covers many mammals',PURPLE), ] # cover c.setFillColor(SKY); c.rect(0,0,W,H,fill=1,stroke=0) for x,y,r,col in [(75,730,42,BLUE),(500,750,28,ORANGE),(510,95,45,GREEN),(70,120,26,PURPLE)]: c.setFillColor(col); c.circle(x,y,r,fill=1,stroke=0) c.setFillColor(NAVY); c.setFont('DV-Bold',29); c.drawCentredString(W/2,635,'ANIMAL WORDS') c.setFillColor(PURPLE); c.setFont('DV-Bold',20); c.drawCentredString(W/2,600,'& SPEAKING PRACTICE') c.setFillColor(INK); c.setFont('DV',12); c.drawCentredString(W/2,562,'Learn the words. Read the translations. Speak with confidence.') # animal motifs for cx,cy,label,col in [(145,430,'BIRD',BLUE),(298,400,'FISH',ORANGE),(450,430,'FROG',GREEN)]: c.setFillColor(colors.white); c.circle(cx,cy,62,fill=1,stroke=0); c.setFillColor(col); c.setFont('DV-Bold',15); c.drawCentredString(cx,cy+5,label) c.setFillColor(GREY); c.setFont('DV',9); c.drawCentredString(cx,cy-15,{'BIRD':'wings • feathers','FISH':'gills • fins','FROG':'wet skin'}[label]) c.setFillColor(colors.white); c.roundRect(105,255,385,70,15,fill=1,stroke=0) c.setFillColor(NAVY); c.setFont('DV-Bold',16); c.drawCentredString(W/2,295,'English + Русский') c.setFont('DV',10); c.setFillColor(GREY); c.drawCentredString(W/2,272,'Every English sentence has a Russian translation below it.') c.showPage() # vocabulary pages for pg,items in enumerate([vocab[:5],vocab[5:]],start=2): header('Vocabulary', 'Word • Russian translation • Simple meaning',pg) y=H-120 for i,(word,ru,mean,acc) in enumerate(items): h=101; fill=[SKY,MINT,YELLOW,PINK,HexColor('#F0EBFF')][i%5] card(38,y,W-76,h,fill,word,ru,mean,acc) y-=h+12 # sentence box c.setFillColor(NAVY); c.roundRect(38,60,W-76,50,12,fill=1,stroke=0) c.setFillColor(colors.white); c.setFont('DV-Bold',10) ex = 'Example: Fish use gills and fins in water.' if pg==2 else 'Example: A rabbit has fur and four legs.' ru = 'Пример: Рыбы используют жабры и плавники в воде.' if pg==2 else 'Пример: У кролика есть мех и четыре ноги.' c.drawString(53,90,ex); c.setFont('DV',9); c.setFillColor(HexColor('#DCEBFF')); c.drawString(53,73,ru) footer(); c.showPage() questions=[ ('Which animal do you think has the most beautiful feathers?','I think a peacock has the most beautiful feathers.','Какое животное, по-твоему, имеет самые красивые перья?','Я думаю, что у павлина самые красивые перья.'), ('How do fish use their fins?','Fish use their fins to swim and turn in water.','Как рыбы используют свои плавники?','Рыбы используют свои плавники, чтобы плавать и поворачивать в воде.'), ('Why do birds need wings?','Birds need wings to fly and move through the sky.','Почему птицам нужны крылья?','Птицам нужны крылья, чтобы летать и двигаться по небу.'), ('What animal has a long tail?','A monkey has a long tail.','У какого животного длинный хвост?','У обезьяны длинный хвост.'), ('Where can a fish breathe with its gills?','A fish can breathe with its gills in water.','Где рыба может дышать жабрами?','Рыба может дышать жабрами в воде.'), ('How do scales help a fish?','Scales help protect a fish’s body.','Как чешуя помогает рыбе?','Чешуя помогает защищать тело рыбы.'), ('Which animal has wet skin?','A frog has wet skin.','У какого животного влажная кожа?','У лягушки влажная кожа.'), ('Why do rabbits have fur?','Rabbits have fur to help keep them warm.','Почему у кроликов есть мех?','У кроликов есть мех, чтобы им было тепло.'), ('How many legs does a dog have?','A dog has four legs.','Сколько ног у собаки?','У собаки четыре ноги.'), ('Can a bird fly without feathers?','No, a bird cannot fly well without feathers.','Может ли птица летать без перьев?','Нет, птица не может хорошо летать без перьев.'), ('What animal would you like to watch swimming?','I would like to watch a dolphin swimming.','За каким животным ты хотел(а) бы наблюдать, когда оно плавает?','Я хотел(а) бы посмотреть, как плавает дельфин.'), ('How does a cat use its tail?','A cat uses its tail to help it balance.','Как кошка использует свой хвост?','Кошка использует свой хвост, чтобы сохранять равновесие.'), ('What can you see on a bird’s body?','I can see wings and feathers on a bird’s body.','Что ты можешь увидеть на теле птицы?','Я могу увидеть крылья и перья на теле птицы.'), ('Which animal can jump with strong legs?','A frog can jump with strong legs.','Какое животное может прыгать с помощью сильных ног?','Лягушка может прыгать с помощью сильных ног.'), ('Would you like to touch a soft rabbit’s fur?','Yes, I would like to touch a soft rabbit’s fur.','Ты хотел(а) бы потрогать мягкий мех кролика?','Да, я хотел(а) бы потрогать мягкий мех кролика.')] # question pages 5 each, ample exact translation under each sentence for p in range(3): header('Speaking Practice', 'Read the question. Say the answer. Use the Russian translation to check.',p+4) y=H-115 for n,(q,a,qr,ar) in enumerate(questions[p*5:(p+1)*5],start=p*5+1): h=125 c.setFillColor([SKY,MINT,YELLOW,PINK,HexColor('#F0EBFF')][(n-1)%5]); c.roundRect(38,y-h,W-76,h,12,fill=1,stroke=0) c.setFillColor(ORANGE); c.circle(58,y-22,13,fill=1,stroke=0); c.setFillColor(colors.white); c.setFont('DV-Bold',10); c.drawCentredString(58,y-26,str(n)) c.setFillColor(NAVY); c.setFont('DV-Bold',9.4); c.drawString(80,y-20,'QUESTION') y1=draw_wrapped(q,80,y-35,W-130,9.5,12,INK) y1=draw_wrapped(qr,80,y1-1,W-130,8.4,11,PURPLE) c.setFillColor(GREEN); c.setFont('DV-Bold',9.2); c.drawString(80,y1-6,'ANSWER') y2=draw_wrapped(a,80,y1-21,W-130,9.2,12,INK) draw_wrapped(ar,80,y2-1,W-130,8.2,10.5,PURPLE) y-=h+10 footer(); c.showPage() # final practice page header('Speak & Create', 'Use the word bank to make your own animal sentences.',7) c.setFillColor(SKY); c.roundRect(38,635,W-76,78,14,fill=1,stroke=0) c.setFillColor(NAVY); c.setFont('DV-Bold',15); c.drawString(55,683,'Word Bank') c.setFont('DV',11); c.setFillColor(INK); c.drawString(55,660,'wings • feathers • gills • scales • tail • fins • wet skin • legs • fur') c.setFont('DV',9); c.setFillColor(PURPLE); c.drawString(55,642,'крылья • перья • жабры • чешуя • хвост • плавники • влажная кожа • ноги • мех') for i,(eng,rus) in enumerate([('My animal is a ________________.','Моё животное - ________________.'),('It has ________________.','У него есть ________________.'),('It uses ________________ to ________________.','Оно использует ________________, чтобы ________________.'),('I like this animal because ________________.','Мне нравится это животное, потому что ________________.')]): y=590-i*105 c.setFillColor([MINT,YELLOW,PINK,HexColor('#F0EBFF')][i]); c.roundRect(38,y-75,W-76,75,12,fill=1,stroke=0) c.setFillColor(NAVY); c.setFont('DV-Bold',11); c.drawString(55,y-24,eng) c.setFillColor(PURPLE); c.setFont('DV',9.5); c.drawString(55,y-43,rus) c.setStrokeColor(GREY); c.line(55,y-61,W-55,y-61) c.setFillColor(NAVY); c.roundRect(38,95,W-76,65,12,fill=1,stroke=0) c.setFillColor(colors.white); c.setFont('DV-Bold',14); c.drawCentredString(W/2,132,'I can speak about animals!') c.setFont('DV',9.5); c.setFillColor(HexColor('#DCEBFF')); c.drawCentredString(W/2,112,'Я могу говорить о животных!') footer(); c.save() print(out) PY python - <<'PY' from pypdf import PdfReader p='/tmp/workspace/esl-handbook/output/Animal_Vocabulary_Speaking_Handbook.pdf' r=PdfReader(p) print('pages=',len(r.pages),'size=',os.path.getsize(p) if (__import__('os')) else 0) for i,page in enumerate(r.pages): print(i+1, (page.extract_text() or '')[:80].replace('\n',' | ')) PY

~/

~/esl-handbook

python - <<'PY' from reportlab.lib.pagesizes import A4 from reportlab.pdfgen import canvas from reportlab.lib import colors from reportlab.lib.colors import HexColor from reportlab.pdfbase import pdfmetrics from reportlab.pdfbase.ttfonts import TTFont from reportlab.lib.utils import simpleSplit from pypdf import PdfReader, PdfWriter import os root='/tmp/workspace/esl-handbook' base=f'{root}/output/Animal_Vocabulary_Speaking_Handbook.pdf' supp=f'{root}/output/article_translation_section.pdf' final=f'{root}/output/Animal_Vocabulary_Speaking_Handbook_with_Article_Translation.pdf' font='/opt/amazon/genesis1p-tools/venv/lib/python3.12/site-packages/matplotlib/mpl-data/fonts/ttf/DejaVuSans.ttf' pdfmetrics.registerFont(TTFont('DV',font)); pdfmetrics.registerFont(TTFont('DV-Bold',font)) W,H=A4 NAVY=HexColor('#16324F'); BLUE=HexColor('#3D8BFD'); SKY=HexColor('#EAF5FF'); MINT=HexColor('#E8FAF2'); YELLOW=HexColor('#FFF4C7'); PINK=HexColor('#FFE8F1'); PURPLE=HexColor('#7357E8'); ORANGE=HexColor('#FF9F43'); GREEN=HexColor('#27AE7A'); INK=HexColor('#233043'); GREY=HexColor('#5B6B7A') c=canvas.Canvas(supp,pagesize=A4) c.setTitle('Animal Words and Speaking Practice - Article Translation') def wrapped(text,x,y,width,font='DV',size=10,leading=13,color=INK): c.setFont(font,size); c.setFillColor(color) for ln in simpleSplit(text,font,size,width): c.drawString(x,y,ln); y-=leading return y def header(title, subtitle, n, color): c.setFillColor(NAVY); c.rect(0,H-88,W,88,fill=1,stroke=0) c.setFillColor(color); c.circle(W-50,H-44,20,fill=1,stroke=0) c.setFillColor(NAVY); c.setFont('DV-Bold',10); c.drawCentredString(W-50,H-48,str(n)) c.setFillColor(colors.white); c.setFont('DV-Bold',20); c.drawString(38,H-43,title) c.setFont('DV',9); c.setFillColor(HexColor('#DCEBFF')); c.drawString(38,H-63,subtitle) def footer(): c.setStrokeColor(HexColor('#D8E4EE')); c.line(38,28,W-38,28) c.setFillColor(GREY); c.setFont('DV',7.5); c.drawString(38,15,'English sentence • Русский перевод') def sentence_pair(y, eng, rus, fill, label=None): # calculate height generous e_lines=simpleSplit(eng,'DV-Bold',10.2,W-118) r_lines=simpleSplit(rus,'DV',9.3,W-118) h=30+len(e_lines)*13+len(r_lines)*12 c.setFillColor(fill); c.roundRect(38,y-h,W-76,h,11,fill=1,stroke=0) if label: c.setFillColor(ORANGE); c.circle(58,y-21,11,fill=1,stroke=0) c.setFillColor(colors.white); c.setFont('DV-Bold',9); c.drawCentredString(58,y-24,label) x=78 if label else 56 yy=y-18 yy=wrapped(eng,x,yy,W-x-55,'DV-Bold',10.2,13,INK) wrapped(rus,x,yy-2,W-x-55,'DV',9.3,12,PURPLE) return y-h-10 def article_page(number, animal, sub, color, fills, pairs, opening=None): header('Article Translation', animal+' • '+sub, number, color) y=H-115 if opening: c.setFillColor(SKY); c.roundRect(38,y-73,W-76,73,12,fill=1,stroke=0) c.setFillColor(NAVY); c.setFont('DV-Bold',11); c.drawString(56,y-21,'READ') yy=wrapped(opening[0],56,y-38,W-112,'DV-Bold',10,13,INK) wrapped(opening[1],56,yy-2,W-112,'DV',9.2,12,PURPLE) y-=86 for i,(eng,rus) in enumerate(pairs,1): y=sentence_pair(y,eng,rus,fills[(i-1)%len(fills)],str(i)) footer(); c.showPage() article_page(8,'All Animals','Article introduction',BLUE,[SKY,MINT,YELLOW], [('All animals can breathe and move, but they are different in many amazing ways.','Все животные могут дышать и двигаться, но они отличаются друг от друга многими удивительными способами.'), ('Here, we look at how they are the same and how they are different.','Здесь мы рассмотрим, чем они похожи и чем отличаются.'), ('This helps us put them into groups.','Это помогает нам разделять их на группы.')]) article_page(9,'Birds & Fish','Article translation',ORANGE,[SKY,YELLOW,PINK], [('All birds have two legs, two wings, and feathers, and most birds can fly.','У всех птиц есть две ноги, два крыла и перья, и большинство птиц умеют летать.'), ('The wings and feathers help them fly, and the feathers help keep them warm.','Крылья и перья помогают им летать, а перья помогают им сохранять тепло.'), ('Birds lay eggs with hard shells.','Птицы откладывают яйца с твёрдой скорлупой.'), ('They keep the baby birds inside safe from animals that want to eat them.','Скорлупа сохраняет птенцов внутри в безопасности от животных, которые хотят их съесть.'), ('Fish have gills to help them breathe in water.','У рыб есть жабры, которые помогают им дышать в воде.'), ('Scales all over their bodies help keep them safe from dangerous fish that want to bite them.','Чешуя по всему телу помогает защищать их от опасных рыб, которые хотят их укусить.'), ('They do not have legs, but their fins and tails help them swim.','У них нет ног, но плавники и хвосты помогают им плавать.'), ('Fish lay their eggs in water, and their eggs are soft.','Рыбы откладывают яйца в воде, и их яйца мягкие.')]) article_page(10,'Amphibians','Article translation',GREEN,[MINT,SKY,YELLOW], [('Amphibians are very interesting because they can live on land and in water.','Земноводные очень интересны, потому что они могут жить на суше и в воде.'), ('Amphibians need to have wet skin, so they live in wet places.','У земноводных должна быть влажная кожа, поэтому они живут во влажных местах.'), ('They lay their soft eggs in water.','Они откладывают свои мягкие яйца в воде.'), ('They have gills when they are young, and the gills help them breathe in water.','Когда они маленькие, у них есть жабры, и жабры помогают им дышать в воде.'), ('Most amphibians, like frogs, have legs that help them walk and jump on land.','У большинства земноводных, например у лягушек, есть ноги, которые помогают им ходить и прыгать по суше.')]) article_page(11,'Mammals','Article translation',PURPLE,[PINK,HexColor('#F0EBFF'),YELLOW], [('Some mammals live on land and some live in water.','Некоторые млекопитающие живут на суше, а некоторые живут в воде.'), ('Whales are water mammals, and cats, rabbits, and lions are land mammals.','Киты - водные млекопитающие, а кошки, кролики и львы - наземные млекопитающие.'), ('Hair or fur covers most land mammals’ bodies, and this helps keep them warm.','Волосы или мех покрывают тела большинства наземных млекопитающих, и это помогает им сохранять тепло.'), ('People are mammals too!','Люди тоже млекопитающие!'), ('Mammals do not lay eggs.','Млекопитающие не откладывают яйца.'), ('Their babies drink milk from their mothers.','Их детёныши пьют молоко своих мам.')]) c.save() writer=PdfWriter() for src in [base,supp]: r=PdfReader(src) for page in r.pages: writer.add_page(page) with open(final,'wb') as f: writer.write(f) print(final) print('base_pages',len(PdfReader(base).pages),'supp_pages',len(PdfReader(supp).pages),'final_pages',len(PdfReader(final).pages),'size',os.path.getsize(final)) PY

python - <<'PY' from pypdf import PdfReader p='/tmp/workspace/esl-handbook/output/Animal_Vocabulary_Speaking_Handbook_with_Article_Translation.pdf' r=PdfReader(p) print('PAGES',len(r.pages)) for i in range(7,11): t=r.pages[i].extract_text() or '' print('\nPAGE',i+1,'chars',len(t),'\n',t[:700]) PY

~/esl-handbook/output