การกำกับดูแลข้อมูลและเหตุใดองค์กรจึงต้องการ

การกำกับดูแลข้อมูล รวมถึงบุคลากร กระบวนการ กฎ ข้อบังคับ นโยบาย และมาตรฐานที่บริษัทกำหนดเพื่อให้บรรลุเป้าหมายการจัดการข้อมูล ในขณะที่ทีมธุรกิจมักจะรับผิดชอบและช่วยสร้างกระบวนการที่จำเป็น ทีมเทคโนโลยีช่วยให้กระบวนการเหล่านี้เป็นไปโดยอัตโนมัติและเติมชีวิตชีวาให้กับพวกเขา ในระดับมหภาค เป็นส่วนหนึ่งของวาทกรรมทางการเมืองและความสัมพันธ์ระหว่างประเทศ ในขณะที่ในระดับจุลภาค เป็นส่วนหนึ่งของวิธีที่บริษัทต่างๆ วางแผนกลยุทธ์ข้อมูลของตน

หลักการกำกับดูแลข้อมูล

การกำกับดูแลข้อมูลมักจะคำนึงถึงปัจจัยหลายประการ เช่น:

ก) สร้างความมั่นใจในการเข้าถึงข้อมูลให้กับผู้มีส่วนได้ส่วนเสียต่างๆ

ข) ความเป็นเจ้าของข้อมูล

ค). แนวคิดใหม่ในการเพิ่มแหล่งข้อมูล

ง) รับรองความปลอดภัยของข้อมูลและรักษาการควบคุมการเข้าถึง

จ) มีการล้างข้อมูลและไปป์ไลน์การประมวลผลข้อมูล

ฉ) เป็นไปตามกฎและข้อกำหนดที่เกี่ยวข้องกับการเข้าถึงข้อมูลและการจัดเก็บข้อมูล

การกำกับดูแลข้อมูลที่มีประสิทธิภาพช่วยให้แน่ใจว่าทุกแง่มุมของข้อมูลที่บริษัทจัดการได้รับการจัดการผ่านกระบวนการต่างๆ ผู้จัดทำและผู้ตรวจสอบ เจ้าของข้อมูล และกลไกการควบคุม นอกจากนี้ยังช่วยให้มั่นใจได้ว่าความเป็นส่วนตัว ความสมบูรณ์ ความพร้อมใช้งาน และความสะอาดของข้อมูลจะได้รับการดูแลเมื่อมีการเข้าถึงและอัปเดตโดยหลายทีม

บริษัทในปัจจุบันมีโอกาสที่จะรวบรวมข้อมูลจำนวนมหาศาลจากแหล่งต่างๆ พวกเขาสามารถดึงข้อมูลจากเครื่องที่ใช้ เทคโนโลยี IOT หรือใช้ข้อมูลภายใน ซึ่งเป็นข้อมูลที่สร้างโดยลูกค้า ลูกค้า และกระบวนการ ทีม Data Science ยังสามารถใช้ประโยชน์จากแหล่งข้อมูลภายนอกและใช้ประโยชน์จากโซลูชันการขูดเว็บได้อีกด้วย

ขณะจัดการข้อมูลจากหลายแหล่ง ต้องใช้ความระมัดระวังก่อนที่จะรวบรวมข้อมูล และบริษัทต่างๆ จำเป็นต้องตรวจสอบการตรวจสอบความถูกต้องของข้อมูลในทุกระดับเพื่อลดความเสี่ยง ข้อมูลปริมาณมากไม่ได้รับรองความสำเร็จของบริษัทโดยอัตโนมัติ ซึ่งเป็นสาเหตุที่บริษัทต้องมีระเบียบวินัยด้านข้อมูลผ่านการกำกับดูแลข้อมูล

โดยปกติแล้ว ทีมงาน Data Governance ของบริษัทใดๆ ก็ตามประกอบด้วยสมาชิกในแนวดิ่งที่สำคัญ เช่น เทคโนโลยี ธุรกิจ การประกันคุณภาพ และการปฏิบัติตามข้อกำหนด ทีมงานทำงานเกี่ยวกับข้อกำหนดที่สำคัญซึ่งรวมถึงแต่ไม่จำกัดเพียง:

ก) การอนุมัตินโยบาย

ข) การสร้างแผงข้อมูลที่ปรึกษา

ค). การจัดสรรเจ้าของผลิตภัณฑ์ข้อมูลที่จำเป็น

ง) การแก้ไขข้อมูลและการปรับข้อมูลให้เป็นมาตรฐาน

จ) กลไกของกฎหรือเฟรมเวิร์ก

ฉ) โครงสร้างพื้นฐานของข้อมูล

ทีมการกำกับดูแลข้อมูลทำงานอย่างไร

ข้อกำหนดสำหรับการกำกับดูแลข้อมูลมักจะเริ่มต้นด้วยทีมธุรกิจ ตัวอย่างเช่น ให้เรานำกรณีการใช้งานของบริษัทที่ให้บริการสินเชื่อรายย่อยแก่นักศึกษาวิทยาลัย สำหรับธุรกิจดังกล่าว อาจมีข้อกำหนดในการจัดเก็บข้อมูลทางการเงินบางอย่างของผู้ที่สมัครขอสินเชื่อ ข้อมูลจะต้องถูกปิดบังในลักษณะที่ทีมและสมาชิกต่าง ๆ สามารถเข้าถึงจุดข้อมูลได้อย่างจำกัดที่พวกเขาต้องดำเนินการ

เมื่อทีมธุรกิจกำหนดข้อกำหนดแล้ว จะต้องได้รับการตรวจสอบโดยทีมการปฏิบัติตามข้อกำหนด การเปลี่ยนแปลงนี้ควรช่วยให้บริษัทปฏิบัติตามข้อกำหนดทางกฎหมายในระหว่างการตรวจสอบ เมื่อเพิ่มข้อกำหนดและการตรวจสอบความถูกต้องและข้อมูลเพิ่มเติมแล้ว ทีมเทคโนโลยีมักจะสร้างโซลูชัน

โซลูชันจะอยู่ในสองส่วน – a) โค้ดจริงที่ต้องเขียนเพื่อปกปิดข้อมูล b) การตั้งค่าโครงสร้างพื้นฐานที่จำเป็นบนแพลตฟอร์มคลาวด์เช่น AWS เมื่อสร้างการเปลี่ยนแปลงแล้ว จะต้องผ่านการทดสอบโดยทีมคุณภาพและการรับประกัน และตรวจสอบอีกครั้งโดยทีมการปฏิบัติตามข้อกำหนดก่อนที่จะเผยแพร่

เมื่อหลายทีมเป็นส่วนหนึ่งของโซลูชันเดียว อุปสรรคสำคัญประการหนึ่งคือคำศัพท์ สำหรับบริษัทอีคอมเมิร์ซ ทีมคลังสินค้าอาจเชื่อว่าเมื่อสินค้าถูก "จัดส่ง" หมายความว่าสินค้าถึงคลังสินค้าแล้ว ในขณะที่ทีมจัดส่งอาจเชื่อว่าคำนี้หมายถึง "ออกเพื่อจัดส่ง" จำเป็นต้องกำหนดคำศัพท์ทั่วไปเพื่อให้ทุกคนรับทราบข้อมูลเดียวกันในขณะที่จัดการกับปัญหาการกำกับดูแลข้อมูล

การกำกับดูแลข้อมูลกับการจัดการข้อมูล

การกำกับดูแลข้อมูลและการจัดการข้อมูล อาจดูเหมือนคำพ้องความหมาย แต่ไม่ใช่ อย่างไรก็ตาม ในกรณีส่วนใหญ่ การจัดการข้อมูลเป็นผลมาจากการกำกับดูแลข้อมูลส่วนหนึ่ง การจัดการข้อมูลเกี่ยวข้องกับแง่มุมต่างๆ ที่เกี่ยวข้องกับการจัดการและการจัดเก็บข้อมูล ซึ่งอาจรวมถึงการตั้งค่าโครงสร้างพื้นฐานระบบคลาวด์และการบำรุงรักษาในขณะที่รักษาต้นทุนไว้ นอกจากนี้ยังเกี่ยวข้องกับการล้างและประมวลผลข้อมูลจากหลายแหล่งเพื่อให้ผู้ที่เข้าถึงข้อมูลสามารถใช้ในรูปแบบพลักแอนด์เพลย์ ทีมจัดการข้อมูลจะทำงานตามข้อกำหนดบางอย่างในแต่ละวัน เช่น:

ก) การปรับข้อมูลให้เป็นมาตรฐานและการจัดรูปแบบ

ข) ไปป์ไลน์ข้อมูลและเวิร์กโฟลว์ ETL โดยใช้บริการต่างๆ เช่น ฟังก์ชันขั้นตอน

ค). การทำรายการข้อมูลโดยใช้บริการต่างๆ เช่น AWS Glue

ง) การสร้างและอัปเดต Data Lake แบบครบวงจร

ในทางกลับกัน ทีม Data Governance จะกำหนดนโยบายและข้อกำหนดในการปฏิบัติตามข้อกำหนดที่ต้องปฏิบัติตามเมื่อทีม Data Management ทำงานในโครงการของตน สถาปัตยกรรมพื้นฐานของสตรีมข้อมูลที่จำเป็นต้องได้รับการออกแบบก่อน จะต้องสอดคล้องกับมาตรฐานที่กำหนดโดยทีม Data Governance

กล่าวโดยสรุป ทีม Data Governance จะกำหนดกระบวนการและกฎสำหรับทุกอย่างที่เกี่ยวข้องกับข้อมูลในบริษัท ในขณะที่ทีมจัดการข้อมูลมักจะทำงานโดยใช้กฎและกระบวนการเหล่านั้น และตั้งค่าข้อกำหนดอินฟาเรด

ประโยชน์ของการกำกับดูแลข้อมูล

การกำกับดูแลข้อมูลอาจทำได้ยากในระยะสั้น แต่ก็เหมือนกับต้นไม้ที่ออกผลซึ่งจะคอยให้ผลลัพธ์เมื่อมีการสร้างแล้ว สามารถช่วยเพิ่มความพยายามของทีม Data Science และ Analytics และยังช่วยในการจัดการความเสี่ยงและปฏิบัติตาม:

ก) ด้วยการกำกับดูแลข้อมูล คุณจะมีชุดกฎมาตรฐานที่ใครก็ตามที่ทำงานในโครงการวิทยาศาสตร์ข้อมูลและต้องการเข้าถึงสตรีมข้อมูลของบริษัทสามารถปฏิบัติตามได้ ซึ่งจะช่วยลดความจำเป็นในการสื่อสารและการตัดสินใจหลายระดับ

ข) ด้วยเป้าหมายและข้อกำหนดที่ตั้งไว้ ต้นทุนที่เกี่ยวข้องกับการจัดการข้อมูลจะลดลงและการประหยัดต้นทุนจะสูงขึ้น สิ่งนี้ใช้ได้โดยเฉพาะอย่างยิ่งเมื่อบริษัทมีข้อมูลจำนวนมากอยู่ในมือ แต่มีการจัดเก็บ การเก็บถาวร และวิธีการเข้าถึงที่เหมาะสม

ค). กิจกรรมที่ขับเคลื่อนด้วยข้อมูลจะมีความโปร่งใสมากขึ้นและสิ่งนี้จะช่วยให้บริษัทต่างๆ สามารถให้คำตอบแก่ผู้มีส่วนได้ส่วนเสียหรือผู้ตรวจสอบบัญชีได้เร็วขึ้น

ง) ด้วยแนวทางที่เหมาะสม บริษัทสามารถมุ่งหาแหล่งข้อมูลภายนอกเพิ่มเติมเพื่อเพิ่มแหล่งข้อมูลในปัจจุบันและสร้างการศึกษาตลาดที่กว้างขึ้น

จ) ทีม Data Governance สามารถแก้ไขปัญหาที่เกี่ยวข้องกับข้อมูลได้รวดเร็วยิ่งขึ้นที่อาจพบโดยผลิตภัณฑ์หรือเทคโนโลยี หรือพบโดยทีมการปฏิบัติตามข้อกำหนด

ฉ) กลไกการตรวจสอบและการบันทึกที่ปรับปรุงใหม่จะช่วยให้มั่นใจถึงความปลอดภัยของข้อมูลและช่วยให้บริษัทต่างๆ ได้รับความไว้วางใจจากลูกค้า ด้วยการแฮ็กข้อมูลหลายครั้งทั่วโลกในช่วงไม่กี่ปีที่ผ่านมา ความปลอดภัยของข้อมูลอาจเป็นสาเหตุให้คุณสูญเสียลูกค้าทั้งหมด แม้ว่าผลิตภัณฑ์ของคุณจะคุ้มค่าเงินก็ตาม

การต่อสู้

การกำกับดูแลข้อมูลที่เพิ่มขึ้นนั้นเกิดจากการต่อสู้ที่บริษัทต่างๆ ต้องเผชิญหลังการโจมตีทางไซเบอร์หลายครั้งและการสูญเสียความไว้วางใจจากสาธารณชน ในปัจจุบัน การละเมิดจากภายนอก กฎระเบียบที่เพิ่มขึ้น และการประหยัดต้นทุนทำให้การกำกับดูแลข้อมูลเป็นสิ่งจำเป็นสำหรับบริษัททั้งขนาดใหญ่และขนาดเล็ก ที่ต้องจัดการกับข้อมูล กฎระเบียบล่าสุด เช่น California Consumer Privacy Act (CCPA) และ General Data Protection Regulation (GDPR) เพิ่มแรงจูงใจให้กับบริษัทที่สร้าง data-infra ตามมาตรฐานที่กำหนดไว้ล่วงหน้า

เช่นเดียวกับที่กรุงโรมไม่ได้สร้างเสร็จภายในวันเดียว การสร้างทีมการกำกับดูแลข้อมูลและการสร้างกรอบการทำงานสำหรับทั้งบริษัทในการปฏิบัติตามนั้นอาจไม่สามารถทำได้ในระยะเวลาอันสั้น เหตุผลเบื้องหลังคือ คุณจะต้องให้ผู้เข้าร่วมจากทีมต่างๆ มารวมกันและวิเคราะห์ข้อมูลที่บริษัทจะใช้ แหล่งที่มาของสตรีมข้อมูล วัตถุประสงค์ที่จะใช้สำหรับ และผู้ใช้ที่จะเข้าถึง ข้อมูล.

Web Scraping และธรรมาภิบาล

การขูดเว็บเป็นแหล่งข้อมูลภายนอกที่ใหญ่ที่สุดสำหรับอุตสาหกรรม เนื่องจากมีข้อมูลที่มีอยู่มากมายบนเว็บและการอัปเดตข้อมูลแบบเรียลไทม์ อย่างไรก็ตาม ความหวาดกลัวต่อการถูกฟ้องร้องและข้อกำหนดในการปฏิบัติตามกฎระเบียบทำให้เกิดอุปสรรคในเส้นทางของการใช้ การคัดลอกเว็บเป็นแหล่งข้อมูล การมีหนังสือกฎการกำกับดูแลข้อมูลที่เป็นมาตรฐานและทีมที่สามารถสร้าง "รายการสิ่งที่ต้องทำ" ทุกครั้งที่มีการเพิ่มแหล่งข้อมูลใหม่สามารถช่วยให้คุณปฏิบัติตามกฎหมายข้อมูลได้

หากคุณชอบอ่านบล็อกนี้ เรามั่นใจว่าคุณอาจต้องการอ่านความ แตกต่างระหว่างการปรับข้อมูลให้เป็นมาตรฐานและโครงสร้างข้อมูล อย่าลืมทิ้งความคิดเห็นอันมีค่าของคุณไว้ในส่วนความคิดเห็นด้านล่าง