In my last post I wrote about why i

In my last post I wrote about why intelligence agencies were apparently unable to “connect the dots” on the Nigerian underwear bomber. The post elicited a variety of comments, some from distinguished experts (Don Peppers in customer data, Sam Felton in strategic and competitive intelligence, Sanjay Poonen in enterprise integration, and Jeff Jonas in information security). Some felt that “connecting the dots” should have been an easy problem, but most agreed with me that it’s difficult.

In this post, I’ll describe what needs to happen if you want to connect disparate pieces of information about the same person, organization, or entity. I hope you’ll be further persuaded of both the difficulty and the value of such an effort. The need is widely felt, whether you’re trying to connect the dots on customers in business, terrorists in intelligence, patients in health care, molecules in drug development, etc.

Here’s what you need to pull off to make this happen:

The key terms in your database — names, attributes, etc. — need to either be rigidly controlled at data entry, or there must be some kind of semantic layer connecting different spellings and meanings of the same term. Jonas’ list of 24 spellings of the name “Abdulmutallab” is both amusing and tragic at the same time.
You have to be clear on what event or events you’re looking for. Are you trying to identify a likely customer purchase or attrition, a terrorist incident, a drug interaction, or what?
You have to have a model of what pattern of variables and data values predict that event. The model may be implicit in people’s heads, but that means that people will have to search through the data to find that pattern. If you want a computer to identify the pattern, the model and all variables have to be explicit and the data unambiguous.
Everybody who makes observations has to collaborate in entering the data. If a CIA field officer observes something about a terrorist, or a salesperson talks with a disgruntled customer, they have to get it into the database.
Note that I’ve said “the database.” There needs to be one place — not many — where the important information goes. One could conceivably set up a distributed database environment in which the relevant information would be synchronized and updated, but it would be a technical nightmare.
The database has to run continuous cross-checks to see if something new and important has been added to the record. (Jonas calls this “enterprise intelligence”, but I don’t think there is a widely-accepted name for it.)
There has to be a clear plan of action for what all related parties should do when the pattern is identified and the key event is imminent. The decision rules are critical here. Should a potential terrorist go onto the no-fly list? Should a customer be offered a substantial discount if he or she is about to attrite?
There has to be a mechanism for turning the plan into action. Whether you’re talking about terrorism or commerce, response time is of the essence.
There are probably a few other steps too, but perhaps you have realized how hard this is. Some steps are harder than others, of course. For example, the U.S. government has made substantial progress on developing a single database of potential terrorists (called TIDE, for Terrorist Identities Datamart Environment), but the Christmas Day incident suggests that steps 4, 6, 7, and 8 are not fully mature. Human behavior is almost always harder to change than information technology systems.

How about your organization? Are you ahead of or behind the U.S. intelligence community? Are you doing all eight steps with respect, for example, to your customers? If you are, I’d love to hear about it — and I’d like to become your customer!

ผลลัพธ์ (ไทย) 1:

ในการโพสต์ของฉันสุดท้าย ที่ผมเขียนเกี่ยวกับทำไมหน่วยข่าวกรองก็ไม่สามารถเห็นได้ชัดว่า "เชื่อมต่อจุด" บนเครื่องบินทิ้งระเบิดชุดชั้นในรี ลง elicited หลากหลายความคิดเห็น บางจากผู้เชี่ยวชาญที่แตกต่าง (เปบเปอร์ดอน เฟลตันสามในการแข่งขัน และยุทธศาสตร์ข่าวกรอง อัค Poonen ร่วมองค์กร และเจฟโจนัสในข้อมูลความปลอดภัยข้อมูลของลูกค้า) บางคนรู้สึกว่า "จุดเชื่อมต่อ" ควรได้มีปัญหาง่าย แต่ส่วนใหญ่ตกลงกับผมว่า มันเป็นเรื่องยากในบทความนี้ ฉันจะอธิบายอะไรต้องเกิดขึ้นถ้าคุณต้องการเชื่อมต่อชิ้นส่วนที่แตกต่างกันของข้อมูลเกี่ยวกับเดียวกันบุคคล องค์กร หรือเอนทิตี หวังว่า คุณจะสามารถเพิ่มเติมเกลี้ยกล่อมทั้งความยากและค่าของความพยายาม จำเป็นต้องมีอย่างกว้างขวางรู้สึก ไม่ว่าคุณกำลังพยายามเชื่อมต่อจุดบนลูกค้าในธุรกิจ ระบบสารสนเทศ การก่อการร้ายผู้ป่วยสุขภาพดูแล โมเลกุลยาพัฒนา ฯลฯนี่คือสิ่งที่คุณต้องการจะดึงออกให้นี้เกิดขึ้น:เงื่อนไขสำคัญในฐานข้อมูลของคุณเช่นชื่อ คุณลักษณะ ฯลฯ — ต้องจะ rigidly ควบคุมรายการข้อมูล หรือต้องมีสิ่งของชั้นความหมายสะกดคำแตกต่างกันและความหมายของคำเดียวกันเชื่อมต่อ รายการของโจนัสเลือก 24 ชื่อ "Abdulmutallab" มีทั้งขบขัน และน่าเศร้าในเวลาเดียวกันคุณจะต้องชัดเจนในเหตุการณ์หรือกิจกรรมที่คุณกำลังมองหาอะไร คุณกำลังระบุซื้อลูกค้ามีแนวโน้ม หรือ attrition เหตุการณ์ก่อการร้าย การโต้ตอบที่ยาเสพติด หรืออะไรคุณต้องมีรูปแบบใดรูปแบบของตัวแปร และค่าข้อมูลคาดการณ์เหตุการณ์ที่ รูปแบบอาจมีนัยในหัวของคน แต่นั่นหมายความ ว่า คนจะต้องค้นหาข้อมูลในการค้นหารูปแบบที่ ถ้าคุณต้องการเครื่องคอมพิวเตอร์เพื่อระบุรูปแบบ รูปแบบและตัวแปรทั้งหมดจะต้องชัดเจน และข้อมูลที่ชัดเจนทุกคนที่ช่วยให้การสังเกตมีการร่วมมือในการป้อนข้อมูล ถ้าเป็น CIA พันพิจารณาบางสิ่งบางอย่างเกี่ยวกับการก่อการร้าย หรือเจรจาพนักงานขายกับลูกค้า disgruntled พวกเขาต้องได้รับในฐานข้อมูลโปรดทราบว่า ฉันได้กล่าวว่า "ฐานข้อมูล" มีต้อง หนึ่ง — ไม่ได้ — ที่ข้อมูลสำคัญไป หนึ่งดักรอสามารถตั้งค่าสภาพแวดล้อมแบบกระจายฐานข้อมูลซึ่งข้อมูลที่เกี่ยวข้องจะถูกซิงโครไนส์ และปรับปรุง แต่มันจะเป็นฝันร้ายทางเทคนิคฐานข้อมูลเพื่อทำการตรวจสอบข้ามอย่างต่อเนื่องเพื่อดูถ้าสิ่งใหม่ และที่สำคัญมีการเพิ่มระเบียนได้ (โจนัสเรียกนี้ "องค์กรอัจฉริยะ" แต่ฉันไม่คิดว่า มีชื่อที่ยอมรับอย่างกว้างขวางสำหรับ)จะต้องมี แผนชัดเจนของการกระทำในสิ่งที่เกี่ยวข้องทุกฝ่ายควรทำเมื่อมีระบุรูปแบบ และเหตุการณ์สำคัญคือพายุฝนฟ้าคะนอง กฎการตัดสินใจสำคัญที่นี่ ผู้ก่อการร้ายที่เป็นไปได้ควรไปสู่รายการไม่บิน ควรลูกค้ารับส่วนลดพบว่าเขาหรือเธอจะ attriteThere has to be a mechanism for turning the plan into action. Whether you’re talking about terrorism or commerce, response time is of the essence.There are probably a few other steps too, but perhaps you have realized how hard this is. Some steps are harder than others, of course. For example, the U.S. government has made substantial progress on developing a single database of potential terrorists (called TIDE, for Terrorist Identities Datamart Environment), but the Christmas Day incident suggests that steps 4, 6, 7, and 8 are not fully mature. Human behavior is almost always harder to change than information technology systems.How about your organization? Are you ahead of or behind the U.S. intelligence community? Are you doing all eight steps with respect, for example, to your customers? If you are, I’d love to hear about it — and I’d like to become your customer!

ผลลัพธ์ (ไทย) 2:

โพสต์ล่าสุดของฉันฉันเขียนเกี่ยวกับสาเหตุที่หน่วยงานข่าวกรองไม่สามารถเห็นได้ชัดว่า "เชื่อมต่อจุด" บนเครื่องบินทิ้งระเบิดชุดชั้นในไนจีเรีย ออกมาโพสต์ความหลากหลายของความคิดเห็นจากผู้เชี่ยวชาญที่โดดเด่น (พริกดอนในข้อมูลของลูกค้าแซมเฟลตันปัญญาในเชิงกลยุทธ์และการแข่งขันแซนเจย์ Poonen ในการบูรณาการขององค์กรและเจฟฟ์โจนัสในการรักษาความปลอดภัยข้อมูล) บางคนรู้สึกว่า "การเชื่อมต่อจุด" ควรจะได้รับเป็นปัญหาที่ง่าย แต่ส่วนใหญ่เห็นด้วยกับผมว่ามันเป็นเรื่องยาก. ในบทความนี้ผมจะอธิบายสิ่งที่ต้องเกิดขึ้นถ้าคุณต้องการที่จะเชื่อมต่อชิ้นส่วนที่แตกต่างกันของข้อมูลเกี่ยวกับบุคคลเดียวกัน องค์กรหรือหน่วยงาน ฉันหวังว่าคุณจะได้รับการชักชวนให้ต่อไปของทั้งความยากลำบากและความคุ้มค่าของความพยายามที่ จำเป็นที่จะต้องเป็นความรู้สึกกันอย่างแพร่หลายไม่ว่าคุณกำลังพยายามที่จะเชื่อมต่อจุดกับลูกค้าในธุรกิจผู้ก่อการร้ายในหน่วยสืบราชการลับของผู้ป่วยในการดูแลสุขภาพในการพัฒนาโมเลกุลของยาเสพติด ฯลฯนี่คือสิ่งที่คุณต้องการที่จะดึงออกจะทำให้เรื่องนี้เกิดขึ้น: ที่สำคัญ เงื่อนไขในฐานข้อมูลของคุณ - ชื่อแอตทริบิวต์ ฯลฯ - ไม่จำเป็นต้องมีการควบคุมอย่างใดอย่างหนึ่งอย่างเหนียวแน่นในการป้อนข้อมูลหรือต้องมีชนิดของชั้นความหมายที่แตกต่างกันในการเชื่อมต่อการสะกดคำและความหมายของคำเดียวกันบาง รายการโจนัส '24 การสะกดของชื่อ "Abdulmutallab" เป็นทั้งตลกขบขันและน่าเศร้าในเวลาเดียวกัน. คุณต้องมีความชัดเจนในสิ่งที่เหตุการณ์หรือกิจกรรมที่คุณกำลังมองหา คุณพยายามที่จะระบุซื้อของลูกค้ามีแนวโน้มหรือขัดสีเหตุการณ์ก่อการร้ายปฏิสัมพันธ์ยาเสพติดหรืออะไรคุณจะต้องมีรูปแบบของสิ่งที่รูปแบบของตัวแปรและค่าข้อมูลคาดการณ์เหตุการณ์ที่ รูปแบบอาจจะเป็นนัยในหัวของผู้คน แต่นั่นหมายความว่าคนที่จะต้องค้นหาผ่านข้อมูลเพื่อหารูปแบบที่ หากคุณต้องการให้คอมพิวเตอร์เพื่อระบุรูปแบบรูปแบบและตัวแปรทั้งหมดจะต้องมีความชัดเจนและข้อมูลที่ชัดเจน. ทุกคนที่ทำให้การสังเกตที่มีการทำงานร่วมกันในการป้อนข้อมูล ถ้าเจ้าหน้าที่สนามของซีไอเอตั้งข้อสังเกตเกี่ยวกับการก่อการร้ายบางสิ่งบางอย่างหรือการพูดคุยกับพนักงานขายที่ลูกค้าไม่พอใจพวกเขาจะต้องได้รับมันลงในฐานข้อมูล. โปรดทราบว่าฉันได้กล่าวว่า "ฐานข้อมูล." มีความต้องการที่จะเป็นสถานที่หนึ่ง - ไม่มาก - ซึ่งข้อมูลที่สำคัญไป น่ากลัวหนึ่งสามารถตั้งค่าสภาพแวดล้อมฐานข้อมูลแบบกระจายซึ่งข้อมูลที่เกี่ยวข้องจะได้รับการทำข้อมูลให้ตรงกันและมีการปรับปรุง แต่มันจะเป็นฝันร้ายทางเทคนิค. ฐานข้อมูลที่มีการทำงานตรวจสอบข้ามอย่างต่อเนื่องเพื่อดูว่าสิ่งใหม่และที่สำคัญได้รับการเพิ่มบันทึก . (โจนัสนี้เรียกว่า "หน่วยสืบราชการลับขององค์กร" แต่ฉันไม่คิดว่ามีเป็นชื่อที่ได้รับการยอมรับกันอย่างแพร่หลายสำหรับมัน.) จะต้องมีการวางแผนที่ชัดเจนของการดำเนินการในสิ่งที่ทุกฝ่ายที่เกี่ยวข้องควรทำเมื่อรูปแบบที่มีการระบุและที่สำคัญ เหตุการณ์เป็นใกล้ กฎการตัดสินใจที่มีความสำคัญที่นี่ ผู้ก่อการร้ายที่มีศักยภาพที่ควรจะไปลงรายชื่อห้ามบิน? ลูกค้าควรได้รับการเสนอส่วนลดมากมายถ้าเขาหรือเธอเป็นเรื่องเกี่ยวกับ attrite? จะต้องมีกลไกในการเปลี่ยนแผนไปสู่การปฏิบัติ ไม่ว่าคุณจะพูดคุยเกี่ยวกับการก่อการร้ายหรือการพาณิชย์เวลาการตอบสนองเป็นของสำคัญ. อาจมีขั้นตอนอื่น ๆ น้อยเกินไป แต่บางทีคุณอาจได้ตระหนักถึงวิธีการที่ยากนี้ บางขั้นตอนที่ยากกว่าคนอื่น ๆ แน่นอน ยกตัวอย่างเช่นที่รัฐบาลสหรัฐมีความคืบหน้าอย่างมีนัยสำคัญในการพัฒนาฐานข้อมูลเดียวของผู้ก่อการร้ายที่มีศักยภาพ (เรียกว่า TIDE สำหรับการก่อการร้ายอัตลักษณ์ Datamart สิ่งแวดล้อม) แต่เหตุการณ์ที่เกิดขึ้นวันคริสต์มาสแสดงให้เห็นว่าขั้นตอนที่ 4, 6, 7, 8 และไม่สุกเต็มที่ พฤติกรรมของมนุษย์มักจะยากที่จะเปลี่ยนกว่าระบบเทคโนโลยีสารสนเทศ. วิธีการเกี่ยวกับองค์กรของคุณ คุณไปข้างหน้าหรือด้านหลังชุมชนข่าวกรองสหรัฐ? คุณทำทั้งแปดขั้นตอนด้วยความเคารพเช่นกับลูกค้าของคุณ? ถ้าคุณเป็นผมชอบที่จะได้ยินเกี่ยวกับมัน - และฉันต้องการที่จะกลายเป็นลูกค้าของคุณ!

ผลลัพธ์ (ไทย) 3:

ในการโพสต์ล่าสุดของฉันฉันเขียนเกี่ยวกับทำไมหน่วยข่าวกรองก็เห็นได้ชัดว่าไม่สามารถ " จุดเชื่อมต่อ " ในไนจีเรียชุดชั้นในเครื่องบินทิ้งระเบิด โพสต์โดยใช้ความหลากหลายของความคิดเห็นบางส่วนจากผู้เชี่ยวชาญที่มีชื่อเสียง ( พริกก็ในข้อมูลลูกค้า , แซม เฟลตันในเชิงกลยุทธ์และการแข่งขันการสืบราชการลับ สัญชัย poonen ในการบูรณาการ องค์กร และ เจฟฟ์ โจนัส ในการรักษาความปลอดภัยของข้อมูล )บางคนรู้สึกว่า " เชื่อมต่อจุด " น่าจะมีปัญหาได้ง่าย แต่ส่วนใหญ่เห็นด้วยกับผม ว่า มัน ยาก

ในบทความนี้ผมจะอธิบายสิ่งที่ต้องทำถ้าคุณต้องการที่จะเชื่อมต่อกับชิ้นที่แตกต่างกันของข้อมูลเกี่ยวกับบุคคลเดียวกัน องค์กร หรือนิติบุคคล ฉันหวังว่าคุณจะได้รับเพิ่มเติมได้ทั้งระดับความยาก และค่าของความพยายาม . ต้องเป็นที่รู้สึกว่าไม่ว่าคุณกำลังพยายามเชื่อมต่อจุดบนลูกค้าในธุรกิจ ผู้ก่อการร้ายในสติปัญญา ผู้ป่วย ในการดูแลสุขภาพ , โมเลกุลในการพัฒนายา ฯลฯ

ที่นี่คือสิ่งที่คุณต้องดึงออกเพื่อให้นี้เกิดขึ้น :

เงื่อนไขหลักในฐานข้อมูลของคุณ -- ชื่อ , คุณลักษณะ ฯลฯ อาจต้องถูกเข้มงวดควบคุม ในรายการข้อมูลหรือต้องมีบางชนิดของแต่ละชั้นเชื่อมต่อการสะกดคำที่แตกต่างกันและความหมายของชื่อเดียวกัน โจนัส ' รายชื่อ 24 การสะกดชื่อ " abdulmutallab " มีทั้งสนุกและเศร้าในเวลาเดียวกัน .
คุณต้องชัดเจนในสิ่งที่เหตุการณ์หรือเหตุการณ์ที่คุณกำลังมองหา คุณพยายามที่จะระบุลูกค้ามีแนวโน้มที่จะซื้อหรือการขัดสี , เหตุการณ์ก่อการร้ายยาปฏิสัมพันธ์ หรืออะไร ?
คุณต้องมีแบบจำลองของสิ่งที่รูปแบบของตัวแปรและข้อมูลค่าพยากรณ์เหตุการณ์นั้น รูปแบบอาจจะความนัยในหัวคนอื่น แต่นั่นหมายถึงว่า คนจะต้องค้นหาข้อมูล พบว่า รูปแบบ ถ้าคุณต้องการให้คอมพิวเตอร์เพื่อระบุรูปแบบ , รูปแบบและตัวแปรทั้งหมดจะต้องชัดเจน และข้อมูลที่ชัดเจน .
ทุกคนที่ทำให้สังเกตได้ร่วมมือในการป้อนข้อมูล ถ้าซีไอเอภาคสนามเจ้าหน้าที่สังเกตบางอย่างเกี่ยวกับผู้ก่อการร้าย หรือพนักงานขายพูดคุยกับลูกค้าที่ไม่พอใจที่พวกเขาจะต้องได้รับมันเข้าไปในฐานข้อมูล
ทราบว่าผมกล่าวว่า " ฐานข้อมูล " มีความต้องการที่จะเป็นหนึ่งในสถานที่ไม่กี่ที่ข้อมูลที่สำคัญไปหนึ่งเข้ามาสามารถตั้งค่าการกระจายฐานข้อมูลในสภาพแวดล้อมที่ข้อมูลจะตรงกัน และปรับปรุง แต่มันคงจะเป็นฝันร้ายที่เทคนิค .
ฐานข้อมูลต้องตรวจสอบเพื่อดูว่าสิ่งที่ข้ามอย่างต่อเนื่องใหม่และที่สำคัญได้รับการบันทึก . ( โจนาส นี้เรียกว่า " องค์กรอัจฉริยะ " แต่ผมไม่คิดว่ามันเป็นชื่อที่ได้รับการยอมรับอย่างกว้างขวางสำหรับมัน )