แค็ตตาล็อก API ของ Runtime V2

ค่าเสียงแบบอ่านอย่างเดียวสำหรับตรวจจับเสียงในแอปหรือเกม ใช้ Audio(name) เพื่อโหลดตัวอย่างที่บันทึกไว้ หรือ Audio.recent(duration_ms) เพื่อคัดลอกเสียงที่เพิ่งจับมา การจับและจับคู่เสียงทำบนอุปกรณ์ โดยไม่อัปโหลดบัฟเฟอร์การฟังต่อเนื่องและไม่ให้สคริปต์เข้าถึงข้อมูลเสียงดิบ (PCM)

เก็บสี อ่านสีจากหน้าจอ หรือเปรียบเทียบสี ARGB ประกอบด้วยความทึบ (A), แดง (R), เขียว (G) และน้ำเงิน (B); compare(), distance_rgb() และ delta_e() ไม่ใช้ค่าความทึบ

สร้างแผงให้ผู้ใช้กรอกการตั้งค่ามาโคร เพิ่มช่องกรอกแล้วเรียก show() เพื่อแสดงแผง

ติดตามการเลื่อนของพื้นหลังระหว่างเฟรมหน้าจอด้วย OpenCV แบบหลายบริเวณ ไม่ตรวจจับผู้เล่นหรือหาตำแหน่งบนแผนที่ ให้ยกเว้น HUD และตัวละคร และจัดการซูมเกมภายนอกด้วยการจับคู่เทมเพลตและสเกล หากสงสัยว่ามีการซูมหรือหมุนจะได้ LOST ไม่ใช่ค่าประมาณซูม การสร้างไม่จับภาพ และแต่ละ flow เปิด tracker ได้ไม่เกิน 16 ตัว.

สร้างข้อความลอยเหนือแอปอื่น เรียก show() เพื่อแสดงและใช้การเปลี่ยนแปลงภายหลัง ใช้ track() เพื่อติดตามการกด ลาก หรือกดค้าง อ่านค่าปัจจุบันด้วย state(); text() และ background() เป็นเมธอด

ตำแหน่งบนหน้าจอในหน่วยพิกเซล ใช้สำหรับคลิก ปัด และทำเครื่องหมาย Scale และ anchor ปรับตำแหน่งตามขนาดหน้าจอ โดยจำกัดตำแหน่งสุดท้ายให้อยู่ในหน้าจอ อ่านพิกัดทั้งสองด้วย x, y = point

พื้นที่สี่เหลี่ยมบนหน้าจอสำหรับค้นหาภาพหรือสี จับภาพ หรือวาดกรอบ พิกัดเป็นพิกเซลตามแกนนอนและแนวตั้งปัจจุบัน หลังปรับขนาดและระยะเลื่อนจะใช้เฉพาะส่วนที่อยู่ในหน้าจอ อ่านขนาดด้วย x, y, width, height = region

การตั้งค่าสำหรับค้นหาภาพแม่แบบภายใน Region ส่งออบเจ็กต์นี้เป็น scale_param ของ Region การตั้งค่าเหล่านี้ไม่เปลี่ยนพิกัดของพื้นที่

ควบคุมการใช้ภาพจับหน้าจอซ้ำในการตรวจจับระหว่างการรันมาโครปัจจุบัน โดยปกติใช้ภาพซ้ำได้นานถึง 100 ms เรียกเมธอดผ่าน ScreenCapture โดยตรง ไม่ต้องสร้างออบเจ็กต์

บันทึกค่าตามชื่อให้มาโครปัจจุบันใช้ในการรันครั้งต่อไป ทุกโฟลว์ในการรันเดียวกันใช้ Storage ร่วมกัน ตัวแปรปกติใช้ร่วมเฉพาะแอ็กชัน PYTHON_CODE ที่ทำตามลำดับในโฟลว์เดียว รวมถึงใน GROUP โฟลว์ขนานมีตัวแปรแยกกัน Storage ไม่ใช่ช่องส่งข้อความระหว่างโปรเซส

ตำแหน่งและการตั้งค่าการเคลื่อนที่สำหรับหนึ่งขั้นของการปัด ส่งรายการ SwipePoint อย่างน้อยสองรายการให้ swipe([...]) เพื่อเลื่อนนิ้วหนึ่งนิ้วผ่านตำแหน่งเหล่านั้น

เข้าถึงข้อมูลระบบ/อุปกรณ์รันไทม์และทริกเกอร์การดำเนินการระดับระบบจากสคริปต์

ใช้ภาพที่บันทึกไว้เป็นเป้าหมายการจดจำ คุณย่อขยายหรือตัดภาพเป็น Template แยกต่างหาก แล้วบันทึกผลด้วย save_as() ได้

ใช้โมเดล TFLite ที่นำเข้าในตัวจัดการเทมเพลตเพื่อตรวจจับวัตถุหรือจำแนกภาพ เลือกชนิดโมเดลให้ถูกต้องที่นั่น รองรับเอาต์พุต: ตรวจจับ YOLOv8/YOLO11 [1,N,4+C]/[1,4+C,N]; ตรวจจับ YOLO26 [1,N,6]/[N,6]; จำแนก YOLO11/YOLO26 และ MobileNetV3 [1,C] รองรับ FLOAT32, INT8 และ UINT8 โดยอัตโนมัติ การจำแนกคืนคะแนนและข้อมูลคลาสโดยไม่มีจุดหรือกรอบบนหน้าจอ การรันต้องมีไฟล์โมเดลในเครื่อง หากหาไฟล์ไม่ได้จะเกิดข้อผิดพลาด

วัดเวลาที่ผ่านไปเป็นมิลลิวินาที หยุดชั่วคราวแล้วนับต่อโดยไม่เสียเวลาที่นับแล้ว

จัดการการคลิกและปัดแบบขนานจากสคริปต์หรือแอ็กชันของมาโคร: จัดกลุ่ม ดูความคืบหน้า รอ หรือยกเลิก ในสคริปต์ใช้ click(..., parallel=True) หรือ swipe(..., parallel=True) ต้องเปิดบริการการช่วยเหลือพิเศษของ CogniTab เพื่อส่งท่าทาง

ผลการจับคู่เสียงแบบอ่านอย่างเดียว คะแนนคือความคล้าย ไม่ใช่ความน่าจะเป็นของความถูกต้อง เวลาใน find() ใช้เส้นเวลาของเซสชันฟัง ส่วน match() ใช้เส้นเวลาของค่าเสียงที่ค้นหา เปรียบเทียบเวลาเพื่อไม่จัดการเสียงเดียวซ้ำ ใช้เวลาเป็นเหตุการณ์ตรวจพบเฉพาะเมื่อ matched เป็น True

เรียกโฟลว์แมโครที่มีชื่อให้ทำงานพร้อมกันและส่งข้อความระหว่างกัน แต่ละโฟลว์มีตัวแปรของตน ส่งข้อมูลเริ่มต้นผ่าน Flow.params ข้อความเป็นสำเนาอิสระและอ่านตามลำดับที่ส่ง

อ่านผลการค้นหาด้วยการจดจำ ตรวจ found ก่อนแตะหรือใช้ตำแหน่ง เพราะการค้นหาภาพที่ไม่สำเร็จอาจยังมีตำแหน่งของภาพที่ใกล้เคียงที่สุด

อ่านผลการจดจำหลายรายการเป็นลิสต์ของ Match ใช้ len(matches), matches[index] หรือลูป for ลิสต์ที่ไม่ว่างอาจมีรายการที่ไม่พบ โดยเฉพาะหลัง wait_any()/wait_all(); ตรวจ found ของแต่ละรายการ

ผลลัพธ์อ่านอย่างเดียวจาก MotionTracker.update() การเลื่อนแสดงการเคลื่อนของพื้นหลังระหว่างเฟรม ไม่ใช่ตำแหน่งสัมบูรณ์ การติดตามไม่คลิก ส่งอินพุต อัปโหลด หรือบันทึกข้อมูล

ใช้ในสาขาความสำเร็จในการจดจำใน UI Recognition.result ส่งคืนการจับคู่สำหรับหนึ่งเป้าหมายการรับรู้หรือ MatchList เมื่อหลายเป้าหมายตรงกัน

สถานะของการคลิกหรือปัดแบบขนาน ณ เวลาที่สอบถาม รับผ่านเมธอดของ Touch และจะไม่อัปเดตเอง

เก็บค่าภายใต้คีย์และอ่านด้วยคีย์ คีย์คงลำดับที่เพิ่ม การเขียนคีย์เดิมจะแทนที่ค่าโดยไม่ย้ายตำแหน่งคีย์ แต่ละคีย์มีหนึ่งค่า

เก็บรายการตามลำดับ โดยมีค่าซ้ำได้ อ่านตำแหน่งเริ่มที่ 0 วนลูปผ่านรายการ หรือเพิ่ม แทนที่ และลบรายการใน list เดิมได้

ลำดับจำนวนเต็มที่เปลี่ยนแปลงไม่ได้ สร้างด้วย range() ใช้ลำดับซ้ำได้โดยไม่ต้องสร้างรายการทั้งหมด และใช้ list() เมื่อต้องการรายการ

เก็บค่าโดยไม่ซ้ำและเพิ่มหรือลบภายหลังได้ ค่าที่เท่ากันปรากฏครั้งเดียว: True, 1 และ 1.0 เท่ากัน รายการต้องใช้เป็นคีย์ dictionary ได้ จึงไม่รับ list, dictionary, set หรือ tuple ที่มีสิ่งเหล่านี้ อย่าพึ่งพาลำดับการวนลูป

เก็บข้อความที่เขียนในเครื่องหมายคำพูดหรือแปลงด้วย str(value) แก้ไขสตริงเดิมโดยตรงไม่ได้ เมธอดของสตริงคืนค่าใหม่ ตำแหน่งและความยาวนับตามจุดรหัส Unicode: อีโมจิหนึ่งตัวใช้หนึ่งตำแหน่ง แต่ตัวอักษรที่มีเครื่องหมายกำกับแยกหรืออีโมจิที่ประกอบกันอาจใช้หลายตำแหน่ง

เก็บรายการตามลำดับและมีค่าซ้ำได้ แต่เพิ่ม ลบ หรือแทนที่หลังสร้างไม่ได้ list หรือ dictionary ที่ซ้อนอยู่ยังเปลี่ยนได้ ในเงื่อนไข tuple ว่างเป็น false และ tuple ที่มีรายการเป็น true