Airflow 3 ทำอะไรให้สาย Data และ Dev ง่ายขึ้นบ้าง?

DAG

ทุกวันนี้ทีม Data และ Dev ต้องเจอกับงานที่ซับซ้อน แต่ถ้ามีผู้ช่วยจัดการคิวงานให้ทุกขั้นตอน ชีวิตจะง่ายขึ้นขนาดไหน? วันนี้เลยชวนคุณ Patsakorn, Platform Services Engineer มาแชร์ว่า ทำไม Apache Airflow 3 ถึงกลายเป็นเพื่อนคู่ใจของสาย Data และ Dev ที่ช่วยให้ทำงานเร็วขึ้น ง่ายขึ้น และเหนื่อยน้อยลงจริง ๆ Apache Airflow คืออะไร? ลองจินตนาการว่าคุณเป็น Project Manager ที่ต้องจัดการโปรเจกต์ซับซ้อน มีหลาย Tasks ต้องทำตามลำดับ บาง Tasks เริ่มไม่ได้จนกว่า Tasks อื่นจะเสร็จ และต้องแน่ใจว่าทุกอย่างทำงานตามกำหนดเวลา ซึ่ง Apache Airflow ก็เหมือนกับการมี Automated Project Manager ให้กับ Data Workflows นั่นเอง DAG คืออะไร? DAG ย่อมาจาก Directed Acyclic Graph ตัวแรก Directed คือ Tasks ที่ไหลไปในทิศทางเดียว (เหมือนน้ำไหลลงสู่ที่ต่ำ) Acyclic คือไม่มี Circular Loops (Tasks ไม่วนกลับมาที่ตัวเอง) Graph คือ Visual Representation ของ Tasks ที่เชื่อมต่อกันโดย DAG มี 5 ประเภทที่ยอดนิยม ประเภทของ DAG 1. Standard DAG (Traditional Workflow) เป็น Workflow ที่พบบ่อยสุด Tasks ทำงานตามลำดับที่กำหนด เช่น Processing dail… Continue reading Airflow 3 ทำอะไรให้สาย Data และ Dev ง่ายขึ้นบ้าง?

อยากลองของ? LocalStack ช่วยคุณได้!

localstack

คุณควรรู้จักกับ LocalStack — เครื่องมือที่ช่วยให้เราสามารถจำลอง AWS มารันบนเครื่องตัวเองได้เหมือนมี AWS เวอร์ชันส่วนตัวเลยทีเดียว…

Opentofu: ยุคใหม่ของ Infrastructure as Code (IaC)

opentofu banner

ในยุคที่เทคโนโลยีคลาวด์และการพัฒนาแอปพลิเคชันมีการเปลี่ยนแปลงอย่างรวดเร็ว การจัดการ Infrastructure เป็นสิ่งสำคัญอย่างยิ่ง และ Opentofu คือหนึ่งในเครื่องมือที่ตอบโจทย์การจัดการนี้ได้อย่างมีประสิทธิภาพ

Resource on Cloud ไม่เป็นระเบียบ เก็บเรียบด้วย c7n

cloud custodian journey

หนึ่งในวิธีที่ได้รับความนิยมและถือว่าเป็นพื้นฐานของการบริหารจัดการต้นทุน คือ การติด Tags ให้กับ Resource แต่ละตัว เพื่อจำแนกและจัดหมวดหมู่ค่าใช้จ่ายของโปรเจกต์ต่างๆ ได้อย่างชัดเจน…

Airflow 3 มาแล้ววว!!! ทำไมถึงควรอัปเกรด และมีอะไรใหม่ที่น่าสนใจ?

ใครที่ทำงานสาย Data Engineering, Machine Learning Pipeline หรือ DevOps น่าจะเคยรู้จักและลองใช้งาน Apache Airflow กันมาบ้างแล้ว

Jira Automation ช่วยทีมทำงานได้ไวขึ้นจริง

TechX_Jira Automation_Thumbnail_Cover_TH

หลายๆองค์กรที่ทำงานแบบ Agile หรือ Scrum มักจะคุ้นชินกับ Jira เครื่องมือที่ใช้จัดการ และ Track การทำงานของทีม แต่รู้ไหมว่าเรายังนำ Jira มา Automate ช่วยลดเวลาและเพิ่มประสิทธิภาพการทำงานได้ เพียงใช้ Jira API ร่วมกับ Webhook นั่นเอง วันนี้คุณแพรว จากทีม Platform Services จะมาแชร์ตัวอย่างการใช้งานพร้อมสรุปข้อดี ข้อจำกัดให้เข้าใจง่ายๆใน 1 นาทีค่ะ Jira API คืออะไร? Jira API คือ การสั่ง Jira ด้วยการ Programming โดยตรง ตัวอย่างที่เราทำได้ เช่น1. อ่านข้อมูลของการ์ด Jira /rest/api/3/issue/{issueIdOrKey}2. เพิ่มคอมเม้นต์ในการ์ด Jira /rest/api/3/issue/{issueIdOrKey}/comment3. เลื่อนสถานะของการ์ด /rest/api/3/issue/{issueIdOrKey}/transitions Jira webhook คืออะไร? คือ กลไกที่ใช้ส่งข้อมูล Jira ไปยัง App หรือ Web Application เมื่อเจอเหตุการณ์หรือเงื่อนไขที่กำหนด ตัวอย่างการใช้งานจริง เนื่องจากการทำงานจริงจะมีการจำกัดสิทธิ์เข้าถึง Git ซึ่ง Flow จะเป็นการแจ้งเจ้าของ Project ให้ Grant สิทธิ์โดยการเพิ่มชื่อและข้อมูลอื่นๆอีกหลายขั้นตอน แต่พอเรานำเอา Jira มา Automate ร่วมกับ Jenkins ขั้นตอน Manual ต่างๆจะหา… Continue reading Jira Automation ช่วยทีมทำงานได้ไวขึ้นจริง

เมื่อการสเกลตาม CPU ไม่ใช่คำตอบ: รู้จัก KEDA ส่วนเสริมที่ทุก Kubernetes Cluster ต้องมี

TechX DevOps Platform KEDA Journey

บทความนี้อธิบายเกี่ยวกับ KEDA ซึ่งเป็นเครื่องมือเสริมสำหรับ Kubernetes ที่ช่วยให้การสเกลแอปพลิเคชันทำงานตามภาระงานจริงจากภายนอก แทนการอิงตาม CPU/Memory แบบดั้งเดิม โดยชูจุดเด่นเรื่องการสเกลเชิงรุก (Proactive Scaling) และการสเกลลงเหลือศูนย์ (Scale to Zero) เพื่อเพิ่มประสิทธิภาพและบริหารจัดการต้นทุน…

อยากมีตัวเองมาช่วยทำงานเพิ่ม? มาสร้าง Amazon Bedrock Agent ทำงานง่ายๆ กันเถอะ

DevOps SCB TechX bedrock agent

เราคงเคยได้ยินเกี่ยวกับ Amazon Bedrock กันมาแล้วจากบทความก่อนหน้านี้ แต่วันนี้ขอมาเล่าเสริมเกี่ยวกับตัว Amazon Bedrock Agent กันบ้าง ในยุคที่ AI เริ่มเข้ามามีบทบาทในชีวิตประจำวันและธุรกิจมากขึ้น เราไม่ได้ต้องการแค่ AI ที่ตอบคำถามแบบเดิม ๆ แต่เราต้องการ “ผู้ช่วย” ที่จะช่วยทำงานให้เราได้จริง ๆ

AML, Sanction List และ PEPs คืออะไร? คู่มือฉบับเข้าใจง่ายสำหรับธุรกิจที่ต้องการเติบโตอย่างยั่งยืน

AML, Sanction Lists, and PEPs: A Practical Guide for Businesses Seeking Sustainable Growth

การทำธุรกิจในปัจจุบันไม่ใช่แค่เรื่องของการสร้างยอดขายหรือขยายตลาดเท่านั้น แต่ยังต้องคำนึงถึงการปฏิบัติตามกฎหมายด้านการป้องกันการฟอกเงิน (AML) และการตรวจสอบรายชื่อบุคคลหรือองค์กรที่มีความเสี่ยง เช่น Sanction List และ PEPs เพื่อป้องกันปัญหาทางกฎหมายและรักษาความน่าเชื่อถือขององค์กร…

จาก Robot สู่ AI Agent: ยกระดับ Test Automation ด้วย Copilot และ Playwright

Robot Framework has long been a staple in UI test automation, but its keyword-driven approach struggles with modern web complexity, async behavior, and DevOps integration. Playwright offers a faster, more flexible, code-first alternative—with native support for modern browsers and clean, reusable syntax. Paired with GitHub Copilot and MCP integration in VSCode, test creation becomes intelligent and intuitive: describe the intent, and let Copilot generate the Playwright scaffolding. This shift marks a new era in test automation—faster, smarter, and fully aligned with today’s development workflows.

Robot Framework ได้เป็นเครื่องมือหลักในการทดสอบ UI มาอย่างยาวนาน แต่แนวทางที่ขับเคลื่อนด้วยคีย์เวิร์ดกลับมีปัญหากับความซับซ้อนของเว็บสมัยใหม่, พฤติกรรมแบบ async, และการผสานกับ DevOps ในปัจจุบัน Playwright มอบทางเลือกที่รวดเร็วและยืดหยุ่นกว่า พร้อมการรองรับเบราว์เซอร์สมัยใหม่และไวยากรณ์ที่สะอาดและสามารถนำกลับมาใช้ใหม่ได้ เมื่อผสมผสานกับ GitHub Copilot และการเชื่อมต่อผ่าน MCP ใน VSCode, การสร้างเทสต์กลายเป็นการทำงานที่ชาญฉลาดและมีความเข้าใจ: เพียงแค่บรรยายเจตนาของเทสต์ แล้วให้ Copilot สร้างโครงสร้าง Playwright ที่พร้อมใช้งานให้ทันที การเปลี่ยนแปลงนี้หมายถึงการเริ่มต้นยุคใหม่ในการทดสอบอัตโนมัติ—รวดเร็วขึ้น, ฉลาดขึ้น, และสอดคล้องกับกระบวนการพัฒนาที่ทันสมัย

ป้ายกำกับ: Technology