ทำความรู้จัก Big Data Ecosystem ประกอบไปด้วยกระบวนการอะไรบ้าง?

Project manager working and update tasks with milestones progress planning and Gantt chart scheduling diagram. business working with smart phone, tablet and laptop in office.

ในปัจจุบัน องค์กรที่รู้จักการใช้งาน Big Data ให้เกิดประโยชน์สูงสุดมักได้เปรียบเชิงธุรกิจมากกว่าองค์กรที่ไม่สามารถนำข้อมูลเหล่านี้มาใช้งานให้เกิดประโยชน์ได้ โดยการจะนำ Big Data มาใช้งานได้อย่างรอบด้านจะต้องทำความเข้าใจ Big Data Ecosystem ก่อน ซึ่งในบทความนี้ SCB TechX จะพาไปทำความรู้จักกับ Big Data Ecosystem เพื่อให้เห็นภาพรวมกระบวนการทำงานของ Big Data ทำความรู้จัก Big Data Ecosystem โดย Big Data Ecosystem หรือระบบนิเวศน์ข้อมูลมหาศาล เป็นภาพรวมใหญ่การทำงานของ Big Data ที่ประกอบไปด้วย 4 กระบวนการสำคัญ คือ 1. การนำข้อมูลเข้าแพลตฟอร์ม (Data Ingestion) การนำข้อมูลเข้าสู่แพลตฟอร์มหรือ Data Ingestion สามารถแบ่งได้ 3 แบบ ได้แก่ แบบกลุ่ม (Batch) คือ การนำข้อมูลเข้าแพลตฟอร์มตามกำหนด เช่น เดือนละครั้ง สัปดาห์ละครั้ง หรือเฉพาะกิจ แบบสตรีมมิ่ง (Streaming) คือ การนำข้อมูลเข้าสู่แพลตฟอร์มแบบต่อเนื่อง เพื่อการวิเคราะห์ข้อมูลแบบเรียลไทม์ แบบไมโคร (Micro-batching) คือ การประยุกต์ระหว่าง Batch และ Streaming เพื่อการวิเคราะห์ข้อมูลแบบเกือบเรียลไทม์ แต่ใช้ทรัพยากรน้อยกว่าการ Streaming โดยในการทำ Data In… Continue reading ทำความรู้จัก Big Data Ecosystem ประกอบไปด้วยกระบวนการอะไรบ้าง?

Tech Tips for Life: การ Classification Problems อย่างง่าย ด้วย KNN

องค์ประกอบที่สำคัญของการทำ Machine Learning คือการ Classification Problems ยิ่ง Model จำแนกปัญหาได้คมเท่าไร เราก็จะทำนายผลได้แม่นยำมากขึ้นเท่านั้น วันนี้จึงขอเชิญ Data Analytics จาก SCB TechX…

Tech Tips for Life: 5 เคล็ดลับ Query ข้อมูลติดสปีดให้ธุรกิจ

ปัจจุบันมีการนำ Data มาช่วยขับเคลื่อนธุรกิจ แต่จะทำอย่างไรให้การ Query ข้อมูลจำนวนมหาศาล มีความเร็ว ประหยัดต้นทุนเพื่อพร้อมใช้งาน? วันนี้คุณแจ็คพอต พงศกร ตั้งจิตวิไลกุล Data Engineer จาก SCB TechX จะมาแชร์เคล็ดลับเบื้องต้น 5 ข้อ…

ไขข้อสงสัย Databricks คือใคร? พลิกโฉมวงการ Big Data กับ Lakehouse

ยังคงเติบโตขึ้นอย่างต่อเนื่องสำหรับตลาด ‘Big Data Analytics’ หรือการวิเคราะห์ข้อมูลขนาดใหญ่ โดยในปี 2023 มูลค่าของตลาดอยู่ที่ 10 ล้านล้านบาท และมีแนวโน้มจะเติบโตขึ้นเรื่อยๆ จนแตะมูลค่า 25 ล้านล้านบาท ภายในปี 2030 (ตัวเลขโดยประมาณ) ซึ่งหนึ่งในผู้เล่นสำคัญของตลาดนี้ก็คือ บริษัท Databricks ในบทความนี้ SCB TechX จะพาไปทำความรู้จักว่า Databricks คือใคร และเหตุผลที่ทำให้ Databricks ได้ขึ้นแท่นเป็นผู้เล่นสำคัญในตลาด Big Data Analytics Databricks คือใคร Databricks คือ บริษัทพัฒนาซอฟต์แวร์สัญชาติอเมริกันที่ก่อตั้งขึ้นเมื่อปี 2013 ซึ่งเติบโตมาจากโครงการ AMPLab ในมหาวิทยาลัย University of California ปัจจุบันบริษัท Databricks ครองส่วนแบ่งตลาดมากเป็นอันดับสองที่ตัวเลข 16.24% โดยหนึ่งในเหตุผลที่ทำให้บริษัท Databricks มาได้ไกลขนาดนี้ก็คือ โปรดักซ์ที่เรียกว่า Data Lakehouse ซึ่งสามารถตอบโจทย์ธุรกิจและองค์กรได้เกือบทุกอุตสาหกรรม ส่งผลให้ฐานลูกค้าของบริษัท Databricks กว้างขวางและหลากหลาย ไม่ว่าจะเป็นอุตสาหกรรมด้านสื่อบันเทิง ค้าปลีก ไปจนถึงสถาบันทางการเงินต่างๆ ทำความรู้จักกับ Data Lakehouse สำหรับ D… Continue reading ไขข้อสงสัย Databricks คือใคร? พลิกโฉมวงการ Big Data กับ Lakehouse

Tech Tips for Life: Explainable AI with LIME

ปัจจุบันการพัฒนาตัวโมเดลที่ใช้วิเคราะห์ข้อมูลมีความซับซ้อน โมเดลส่วนใหญ่จึงมีความซับซ้อนตามไปด้วย ไม่สามารถอธิบายการทำงานได้แม้ผลลัพธ์จะถูกก็ตาม ทำให้ขาดความน่าเชื่อถือ…

Tech Tips for Life: What is A/B Testing?

A/B Testing มีประโยชน์กับธุรกิจอย่างไร วันนี้คุณ Rubina Rattanaruangsup, Data Science Business Analyst จาก SCB TechX จะมาสรุปพร้อมแนะนำขั้นตอนและตัวอย่างการใช้งานให้ทราบกันค่ะ…

Tech Tips for Life: ระหว่าง Apache Spark RDD กับ Apache Spark DataFrame เลือกอะไรดีนะ!

นักพัฒนาที่เพิ่งเริ่มใช้ Apache Spark อาจลังเลว่าจะเลือกใช้วิธีการจัดการข้อมูลอะไรดีกว่ากันระหว่าง Apache Spark RDD กับ Apache Spark DataFrame วันนี้จึงขอชวนกูรูด้าน Data คุณเบนซ์ ธนภัทร ซู Data Engineer…

มารู้จักเทคโนโลยี Data Solutions อย่าง Databases และ Data Warehouses กัน

ด้วยปริมาณข้อมูลที่เพิ่มขึ้นทุกวัน ส่งผลให้การจัดการข้อมูลเป็นเรื่องท้าทายของหลายธุรกิจ ซึ่งสิ่งที่จะมาช่วยในการจัดการข้อมูลอันมหาศาลเหล่านี้ก็คือ เทคโนโลยี Data Solutions ซึ่งปัจจุบันมีหลากหลายอย่างมาก และถูกพัฒนาขึ้นโดยอิงจากโจทย์ของธุรกิจหรือองค์กรต่างๆ โดยเทคโนโลยี Data Solutions ที่ SCB TechX จะมากล่าวถึงในบทความนี้ ได้แก่ Databases และ Data Warehouses ทำความรู้จักกับ Data Solutions สำหรับ Data Solutions คือ เทคโนโลยีที่เข้ามาช่วยจัดการข้อมูลทั้งหมด โดยครอบคลุมกระบวนการสำคัญ 4 ประการ ดังนี้ การนำข้อมูลเข้าระบบ: ในขั้นตอนนี้จะต้องมีการระบุแหล่งที่มาและวันเวลาของข้อมูล การประมวลผล: เป็นการประมวลผลให้ข้อมูลอยู่ในรูปแบบโครงสร้างที่เหมาะสมสำหรับการจัดเก็บ การจัดเก็บข้อมูล: หลังการประมวลผลข้อมูลจะถูกจัดเก็บใน Databases, Data Warehouses และ Data Lake ขึ้นอยู่กับจุดประสงค์การนำข้อมูลไปใช้งาน การวิเคราะห์ข้อมูล: ช่วยให้ธุรกิจสามารถนำข้อมูลที่มีอยู่ในมือมาใช้ประโยชน์ได้ ทั้งด้านการตลาด การบริการ ไปจนถึงการพัฒนาผลิตภัณฑ์ โดย Databases และ Data Warehouses เป็นเทคโนโลยี Data Solution ที่ได้… Continue reading มารู้จักเทคโนโลยี Data Solutions อย่าง Databases และ Data Warehouses กัน

ไขข้อสงสัย Data Analytics คืออะไร และ Data Analytics มีกี่ประเภท?

การมีข้อมูลมหาศาลอยู่ในครอบครอง ส่งผลดีให้ธุรกิจสร้างความได้เปรียบทางการแข่งขันได้ในหลายๆ ด้าน แต่การจัดการกับข้อมูลมหาศาลนั้นเป็นเรื่องท้าทายไม่น้อย ซึ่งต้องอาศัยการทำ Data Analytics เพื่อให้สามารถนำข้อมูลมาใช้งานได้จริง โดย Data Analytics คือ การจัดการกับข้อมูลมหาศาลให้อยู่ในรูปแบบที่เข้าใจง่าย ครอบคลุมตั้งแต่กระบวนการรวบรวม ประมวลผล และการวิเคราะห์ข้อมูล แล้ว Data Analytics มีกี่ประเภท? ประเภทของ Data Analytics สำหรับ Data Analytics สามารถแบ่งได้ 4 ประเภท ดังนี้ 1. Descriptive Analytics หรือการวิเคราะห์เชิงพรรณนา การวิเคราะห์เชิงพรรณนา คือ การวิเคราะห์ขั้นพื้นฐาน ช่วยให้เห็นภาพรวมและความสัมพันธ์ของข้อมูล ชี้ให้เห็นว่าเกิดเหตุการณ์อะไรขึ้นบ้างในอดีต ทำให้ธุรกิจสามารถวางแผนและตัดสินใจการดำเนินงานที่จะเกิดขึ้นในอนาคตได้ ยกตัวอย่าง การทำรายงานสรุปยอดขายประจำเดือนของร้านสะดวกซื้อ จะช่วยให้เจ้าของร้านสะดวกซื้อเห็นภาพรวมว่าในเดือนที่ผ่านมามียอดขายทั้งหมดเท่าไหร่ และเมื่อนำมาหักกับต้นทุนทั้งหมดจะเหลือกำไรเท่าไหร่ โดยเจ้าของร้านสามารถนำผลสรุปนี้มาใช้ประโยชน์ต่อไปได้ เช่น วางแผนเพิ่มยอดข… Continue reading ไขข้อสงสัย Data Analytics คืออะไร และ Data Analytics มีกี่ประเภท?

ทำความรู้จักข้อดี ข้อเสียของ Big Data และตัวอย่างธุรกิจ

ในยุคดิจิทัลนี้ “ข้อมูล” กลายเป็นเครื่องมือสำคัญที่ช่วยสร้างข้อได้เปรียบให้กับหลากหลายธุรกิจ โดยเฉพาะ “Big Data” ที่ธุรกิจระดับโลกนิยมนำมาใช้ให้เกิดประโยชน์กับองค์กร สำหรับ Big Data คือ ชุดข้อมูลขนาดใหญ่ที่มีความซับซ้อนมาก โดยขนาดและความซับซ้อนของ Big Data มีความสัมพันธ์กับการเติบโตของโลกดิจิทัลที่ผู้คนสามารถเข้าถึงแพลตฟอร์มต่างๆ บนโลกออนไลน์ได้ตลอดเวลา จึงมีข้อมูลเกิดขึ้นอยู่ตลอดเวลา โดยในบทความนี้ SCB TechX จะพาไปทำความรู้จักกับธุรกิจระดับโลกที่นำ Big Data มาใช้งานและข้อดี ข้อเสียของ Big Data ตัวอย่างธุรกิจที่นำ Big Data มาใช้งาน • การใช้ Big Data ของ Netflix สำหรับ Netflix ถือเป็นแพลตฟอร์มสตรีมมิ่งระดับโลกที่ประสบความสำเร็จด้วย Big Data ซึ่ง Big Data ของ Netflix เป็นการเก็บรวบรวมข้อมูลของลูกค้าทั้งหมด ไม่ว่าจะเป็นเชื้อชาติ อายุ ไปจนถึงพฤติกรรมการค้นหาบน Netflix ส่งผลให้ Netflix สามารถวิเคราะห์เชิงคาดการณ์และมองหาแนวโน้มว่าลูกค้าแต่ละกลุ่มชื่นชอบภาพยนตร์ หรือซีรีส์แนวไหน (การวิเคราะห์เชิงคาดการณ์ไม่สามารถคาดการณ์แนวโน้มได้แม่นยำ 100%) • การใช้ Big Data ของ Amazon ส่วน Big Data ของ … Continue reading ทำความรู้จักข้อดี ข้อเสียของ Big Data และตัวอย่างธุรกิจ

หมวดหมู่: Data Science