JP5649303B2 - メディア・ストリームに注釈を付ける方法および装置 - Google Patents

メディア・ストリームに注釈を付ける方法および装置 Download PDF

Info

Publication number
JP5649303B2
JP5649303B2 JP2009503323A JP2009503323A JP5649303B2 JP 5649303 B2 JP5649303 B2 JP 5649303B2 JP 2009503323 A JP2009503323 A JP 2009503323A JP 2009503323 A JP2009503323 A JP 2009503323A JP 5649303 B2 JP5649303 B2 JP 5649303B2
Authority
JP
Japan
Prior art keywords
media stream
supplemental content
item
user
viewer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009503323A
Other languages
English (en)
Other versions
JP2009532956A5 (ja
JP2009532956A (ja
Inventor
ピー． マッキンタイア，ジョン
ピー． マッキンタイア，ジョン
ダブリュ．ジェー． ストリンガー−カルヴァート，デヴィット
ダブリュ．ジェー． ストリンガー−カルヴァート，デヴィット
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SRI International Inc
Original Assignee
SRI International Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SRI International Inc filed Critical SRI International Inc
Publication of JP2009532956A publication Critical patent/JP2009532956A/ja
Publication of JP2009532956A5 publication Critical patent/JP2009532956A5/ja
Application granted granted Critical
Publication of JP5649303B2 publication Critical patent/JP5649303B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/036—Insert-editing
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/87—Combinations of radar systems, e.g. primary radar and secondary radar
    • G01S13/878—Combination of several spaced transmitters or receivers of known location for determining the position of a transponder or a reflector
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254—Management at additional data server, e.g. shopping server, rights management server
    • H04N21/2542—Management at additional data server, e.g. shopping server, rights management server for selling goods, e.g. TV shopping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2668—Creating a channel for a dedicated end-user group, e.g. insertion of targeted commercials based on end-user profiles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743—Video hosting of uploaded data from client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4756—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for rating content, e.g. scoring a recommended movie
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/47815—Electronic shopping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6377—Control signals issued by the client directed to the server or network components directed to server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309—Transmission or handling of upstream communications
    • H04N7/17318—Direct or substantially direct transmission and handling of requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309—Transmission or handling of upstream communications
    • H04N7/17336—Handling of requests in head-ends

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Remote Sensing (AREA)
  • Human Computer Interaction (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Marketing (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、全般的には広告に関し、より具体的には、見えるメディア・ストリームに関連する広告に関する。
テレビジョンおよび類似する媒体の伝統的な商業広告を避けるためのテレビジョン視聴者によるデジタル・ビデオ・レコーダＤＶＲの使用の増加に伴って、プロダクト・プレースメントが、広告主が消費者に到達するためのツールとしてますます重要になりつつある。
例えば、広告主は、特定の物品が人気女優によって映画の中で使用されるように配置し、その使用が前向きの製品イメージを消費者に投影し、これによって売上を増やすことを期待する場合がある。
しかし、プロダクト・プレースメントには、短所がないわけではない。例えば、芸術的関心は、通常、プロダクト・プレースメントが伝統的な商業広告より実質的に目立たないことを指図し（例えば、物品の名前の目立つ繰り返される表示が、一般に避けられる）、したがって、どの特定の物品またはブランドが描かれているのかが、視聴者に明白ではない場合がある。さらに、物品が識別可能である場合であっても、その物品についてより多くを知ることまたはその物品を購入することへの視聴者の潜在的関心が、物品が描かれることと視聴者が情報または購入の機会へのアクセスを有することとの間の時間遅れによってむしばまれる場合がある。
例えば描かれた物品に関する追加情報をオンデマンドで取り出すために、消費者が、プロダクト・プレースメントを描く媒体と相互作用することを可能にする複数の方法が提案されてきた。しかし、イネーブリング・テクノロジは、まだ比較的早期の段階にあり、したがって、ユーザ・インターフェースは、通常は扱いにくい。さらに、実装方法論は、計算的に複雑である傾向があり、したがって、非常に高価である。さらに、プロダクト・プレースメントに関連する広告情報が、メディア・ストリーム自体に埋め込まれる場合に、この情報を追加し、変更し、または削除することは、一般に、非実用的または不可能である。これは、物品の小売価格および／または入手可能性など、配置される物品の様々な特性の変化に起因して、広告の価値を経時的に低下させる。
さらに、これらの同一の懸念事項が、他の人気があるがより非伝統的な形の媒体に、しばしば持ち越される。例えば、インターネットまたは別の配信チャネルを介してビデオ・コンテンツへのオンデマンド・アクセスを提供する（例えば、映画制作者がビデオを作成し、その後、アクセス・プロバイダにアップロードし、その後、アクセス・プロバイダが、そのビデオを潜在的に一般市民を含む他者による視聴に使用可能にする）サービスが、ますます人気のあるものになりつつある。いくつかの場合に、アクセス・プロバイダは、視聴者が関心のある特定のビデオ・コンテンツを検索することを可能にすること、視聴者の人気によるビデオのランキング、および視聴者のコミュニティが特定のビデオをレーティングし、特定のビデオに関するコメントを投稿することを可能にすることなど、追加機能性を提供する。
そのようなサービスの提供は、特に多数の聴衆にかなりの量のビデオ・コンテンツを提示することに関連するストレージ・コストおよび帯域幅伝送コストに関して、高価である。したがって、ビデオ・アクセス・プロバイダを財務的に存続可能かつ持続可能にするために、確固とした収入源が必要である。現在のアクセス・プロバイダは、ビデオ・ホスティング料金をユーザに請求することによって、サブスクリプションまたはペイパービュー料金を視聴者に請求することによって、または、最も一般的には、ビデオの前またはビデオの後のコマーシャル、バナー広告、ポップアップ広告、および他のタイプの広告を介して、視聴する聴衆に広告情報を提示することによってを含む様々な手段によって収入を生成することを試みる。後者の場合に、オンライン・ビデオ・アクセス・プロバイダの収入モデルは、通常、視聴者経験または映画制作者のクリエイティブ・インテグリティに侵入しないように見えながら有効な広告をビデオ・コンテンツにどのように関連付けるかという、伝統的な媒体が直面する課題と同一の課題に直面する。
素朴な広告モデルでは、オンライン・ビデオの視聴者に提示される広告は、ランダムに、見られている特定のビデオ・コンテンツの主題または他の特性を顧慮せずに選択される。より洗練されたモデルでは、アクセス・プロバイダは、視聴者が関心のあるビデオ・コンテンツを見つけることを可能にすることを主に意図されたデータおよびプロセスを活用することによって、提示する広告の関連性を改善しようと努める。これは、例えば、ビデオ自体からの情報（例えば、所与のビデオの主題を判定する、音声認識、テキスト認識、または他のテクノロジを使用して生成される）を参照することによって、および／または特定のビデオを突き止める努力において視聴者によって入力された検索単語を参照することによって、達成することができる。
そのような方法は、オンライン・ビデオ・コンテキストでのビデオ「検索」を可能にすることにおいて多少は有効であることがわかっているが、そのような方法によって入手され、かつ／または利用される主題関連情報は、一般に、関連する広告の有効な選択および提示を可能にするには不正確すぎ、惑わせすぎ、曖昧すぎ、具体的すぎ、かつ／または多すぎる。
上で説明した不足は、有効な広告ターゲティングが、主題情報を全体的な視聴経験のコンテキスト内で理解することを必要とするという事実によって倍加される。現在、成功したオンライン・ビデオ・アクセス・プロバイダによってホスティングされる大量のビデオ（特に「ユーザ生成」コンテンツに関して）を扱うために必要な自動化されたシステムは、そのようなコンテキスト要素に対処することができない。例えば、自動化されたシステムが、所与のビデオが「新しいスポーツ・ユーティリティ・ビークルＳＵＶの購入」に関する主題を含んだことを認識する場合であっても、そのシステムは、その主題のコンテキストが、地球温暖化に対するＳＵＶの悪影響に関する警告であった（また、したがって、ＳＵＶ製造業者にとって望ましくない広告プレースメントを表した）という事実を理解できず、かつ／または考慮に入れられない場合がある。
さらに、現在の広告ターゲティング・システムは、ビデオの主題およびコンテキストとそのようなビデオのありそうな視聴者の人口統計および関心との間の重要な関係に対処する能力を欠いている。例えば、前もって定式化された（したがって、大規模に提供するには非常に高コストである）特定の指示がなければ、現在のシステムは、ＳＵＶの購入に対して警告するビデオを見ることに関心を持つ視聴者が、自然食品、節電型電球、キリマンジャロの融解する氷河を見る旅、または地域の「緑の党」の政治家の運動などの一見関連しない主題に関する広告を見ることにも関心を持つ可能性があると推量することはできない。
最後に、通常、広告を提示するためにアクセス・プロバイダによって使用される方法の多く（例えば、プリロール広告、ポップアップ広告、またはオーバーレイ広告）は、視聴経験に対して侵入的および／または破壊的であり、これによって、映画制作者のビデオのプレゼンテーションに対するその映画制作者のクリエイティブ・コントロールに干渉し、視聴者の視聴経験の質をそこなう。
上記および他の理由から、オンライン・ビデオ・アクセス・プロバイダによって従来使用されている広告方法は、映画制作者のビデオを作成するか共有する意欲を減らし、視聴者のビデオを見る意欲を減らし、広告主がアクセス・プロバイダによって販売のために提供される広告「インベントリ」により低い価値を置かせる。その結果、オンライン・ビデオ・アクセス・プロバイダは、彼らの視聴する聴衆によって表される潜在的な収入の機会を最大化することができない。
米国仮出願第６０／７８８３６７号 米国仮出願第６０／７８８３６８号 米国仮出願第６０／７４７３７９号 米国仮出願第６０／８０４０９１号 米国仮出願第６０／８６６８０３号 米国仮出願第６０／８７１７０５号 米国特許第６７４２０２１号 米国特許出願第１１／５４１，２８２号 米国特許出願第１０／９１２，５１７号 米国特許出願第１１／０６３，３５７号
したがって、当技術分野には、より有効でユーザ・フレンドリな広告を提供するために、テレビジョン、ホスティングされるオンライン・ビデオ、および類似物などのメディア・ストリームに注釈を付ける方法および装置の必要がある。
一実施形態で、本発明は、メディア・ストリームに注釈を付ける方法および装置である。ユーザによる注釈付きメディア・ストリームの作成を容易にする方法の一実施形態は、メディア・ストリームをユーザから受け取ることと、注釈付きメディア・ストリームを作るために補足コンテンツの少なくとも１つのアイテムをメディア・ストリームの少なくとも一部にマッピングすることと、注釈付きメディア・ストリームを格納することとを含む。
もう１つの実施形態で、ユーザによって提供される注釈付きメディア・ストリームを配信する方法は、ユーザから注釈付きメディア・ストリームを受け取ることであって、注釈付きメディア・ストリームは、注釈付きメディア・ストリームを作るためにメディア・ストリームの少なくとも一部にマッピングされる補足コンテンツの少なくとも１つのアイテムを含む、受け取ることと、注釈付きメディア・ストリームを格納することと、注釈付きメディア・ストリームを見る要求を視聴者から受け取ることと、注釈付きメディア・ストリームを視聴者に配信することとを含む。
もう１つの実施形態で、ユーザによって提供される注釈付きメディア・ストリームを配信する方法は、注釈付きメディア・ストリームを視聴者に配信することであって、注釈付きメディア・ストリームは、注釈付きメディア・ストリームを作るためにメディア・ストリームの少なくとも一部にマッピングされる補足コンテンツの少なくとも１つのアイテムを含む、配信することと、注釈付きメディア・ストリームが視聴者によって見られるときに手数料を徴集することとを含む。一実施形態で、徴集は、視聴者の側でのさらなるアクション（補足コンテンツの少なくとも１つのアイテムに含まれるハイパーリンクの選択または商取引の完了など）を必要とする。
本発明の教示は、添付図面と共に次の詳細な説明を考慮することによってすぐに理解することができる。
理解を容易にするために、可能な場合には、複数の図面に共通する同一の要素を示すために、同一の符号を使用した。
一実施形態で、本発明は、ビデオ信号を含むメディア・ストリームの注釈付けに関連する。本発明の実施形態は、ユーザ（例えば、広告主、コンテンツ作成者、および類似物）が、テレビジョン番組、コマーシャル、インフォマーシャル、予告編、ショッピング・チャネル・セグメント、音楽ビデオ、ムービー、ＶＨＳまたはＤＶＤのレコーディング、ビデオ・オンデマンド・コンテンツ、ビデオ・ゲーム（例えば、対話型テレビジョン・ゲーム、パーソナル・コンピュータ・ゲーム、オンライン・ゲーム、ハンドヘルド・ゲーム、およびコンソールベースのゲーム）、「ポッドキャスト」、ウェブキャスト（例えば、テレビ会議、教育放送など）、ホスティングされたオンライン・ビデオ、および類似物などのメディア・ストリームに、例えばメディア・ストリームに現れるか他の形でメディア・ストリームに関連する物品の広告コピー（例えば、商品、俳優、歌など）に関連する補足コンテンツへのマッピングを用いて注釈を付けることを可能にする。したがって、プロダクト・プレースメントおよび関連する広告の提示を、技術的展望から計算的に単純化され、視聴者の展望から実質的に控え目な形で実施することができる。さらに、本発明の実施形態は、確固とした収入源の生成を可能にし、この確固とした収入源は、インフラストラクチャのサポートを提供し、コンテンツ作成者、広告主、および視聴者による使用を奨励することができる。さらに、メディア・ストリームに注釈を付けることができ、メディア・ストリームを、単に情報を与えるか美的であるコンテンツなどの非商業的性質の補足コンテンツのアイテムにマッピングすることができる。
一実施形態で、注釈付きメディア・ストリームは、見えるメディア・ストリームである。「見える」とは、メディア・ストリームが、少なくともビデオ信号を含み、さらに、オーディオ信号またはテキスト信号などの他のコンポーネントを含むことができることを意味する。代替実施形態では、メディア・ストリームは、見えるコンポーネントを有するのではなく、少なくとも、オーディオ・コンポーネント（例えば、ストリーミング・ミュージック、ラジオ局放送、ビデオ・ストリームからはぎ取られたオーディオ・フィード）またはテキスト・コンポーネント（例えば、ストリーミング・テキスト、リッチ・サイト・サマリ、ｒｅａｌｌｙ ｓｉｍｐｌｅ ｓｙｎｄｉｃａｔｉｏｎ（ＲＳＳ）またはリアルタイム・シンプル・シンジケーション・フィード、インターネット・リレー・チャット・チャネル）を含む。例えば、一実施形態で、メディア・ストリームは、テレビジョン、パーソナル・コンピュータ、携帯電話機、携帯情報端末、ポータブル・メディア・プレイヤ、飛行機内または自動車内のシステム・ディスプレイ、あるいは「ヘッドアップ」ディスプレイのうちの少なくとも１つなどのディスプレイ・デバイスでの表示用のビデオ信号を含む。メディア・ストリームがオーディオ信号を含む場合には、ユーザ・デバイスは、イアホン、ヘッドホン、またはスピーカのうちの少なくとも１つを含むことができる。
本発明の特定の実施形態では、補足コンテンツへのマッピングと共にオンライン・ビデオ配信およびアクセス・プロバイダにアップロードされるメディア・ストリーム（ビデオ・コンテンツなど）に注釈を付ける方法が提供される。特定のコンテンツと、広告および視聴者対話の機会を含む補足コンテンツの提示とは、メディア・ストリームをアップロードするユーザ（例えば、コンテンツ作成者）によって指図することができ、あるいは、このユーザが、共同制作者が補足コンテンツを選択し、関連付けることを許可することができる。アップロードするユーザが補足コンテンツの選択を制御することを可能にすることによって、本発明は、アップロードするユーザが、メディア・ストリーム・コンテンツと補足コンテンツのどのアイテムがメディア・ストリームのありそうな視聴者に最も魅力的である可能性があるかとのそのユーザのコンテキスト的理解を活用することを可能にする。その結果、最も関連し、したがって最も有効な広告が、視聴者に提示される。さらに、ビジネス・モデルのコンポーネントとして、本発明は、アップロードするユーザ（および潜在的に共同制作者）が、メディア・ストリーム・コンテンツを貨幣化することを可能にする。
したがって、オンライン・ビデオ・コンテキストで広告を提示する現在の方法とは異なって、本発明の実施形態は、インターネットでのメディア・ストリームの提示が、視聴者が関連する広告と対話するため（例えば、視聴者「クリック・スルー」）、およびその対話を監視し、分析し、その対話に作用するためのユニークな可能性をもたらすという事実を活用する。従来のテレビジョン配信と異なって、ホスティングされる媒体およびビデオ・オンデマンドは、各個々のユーザによって選択された時刻に提示され、見られるのであって、スケジュールに従って同時に提示され、多数の視聴者によって見られるのではないという事実も活用される。したがって、ホスティングされる媒体のコンテキストでの同一のメディア・ストリームに関する見るイベントが、ある範囲の時間にまたがって配信されるので、視聴者対話を監視し、後続視聴者の経験の質を高めるのに使用することができる。本発明の実施形態は、この機会を利用して、例えば、メディア・ストリームの早期視聴者（例えば、最初の１０００人の視聴者）に広告の異なる選択を示すことと、これらの広告選択のそれぞれに対する視聴者の反応を監視することと、その後、そのメディア・ストリームのすべての後続視聴者および／または将来にこのメディア・ストリームまたは他のメディア・ストリームを見るときのこれらの早期視聴者にとって最も説得力のある広告を識別し、提示するのにこの情報を使用することとによって、広告の提示を最適化する。
図１は、本発明による放送価値連鎖１００の一実施形態を示す概略図である。具体的に言うと、価値連鎖１００は、テレビジョン価値連鎖を描いているが、当業者は、この図で実施される全般的な概念を事実上すべての形の媒体配信での応用に拡張できることを了解するであろう。価値連鎖１００は、少なくとも、１人または複数のコンテンツ作成者１０２、１人または複数の視聴者１０４、１人または複数のアクセス・プロバイダ１０６、１人または複数の広告購入者１０８、１人または複数の販売者１１０、およびストリーム注釈付けサービス・プロバイダ１１２を含む複数の実体を含む。
コンテンツ作成者１０２は、スタジオ、独立制作会社、ならびに、インターネット上で入手可能なテレビジョン番組、ムービー、コマーシャル、およびビデオなどの視聴者への配信用のメディア・ストリームを作成する個人さえ含む。コンテンツ作成者１０２は、そのメディア・ストリームをケーブル、衛星、インターネット、および遠隔通信サービス・プロバイダまたはワールド・ワイド・ウェブ・ホスティング・サイトなどの１つまたは複数のアクセス・プロバイダ１０６に供給し、このアクセス・プロバイダ１０６は、そのメディア・ストリームを視聴者１０４に供給し、この視聴者１０４は、そのメディア・ストリームを受け取る（例えば、テレビジョン、パーソナル・コンピュータ、携帯情報端末、または他のディスプレイ・デバイスを介して）。本発明によれば、視聴者１０４は、ディスプレイ・デバイス、リモート・コントロール、セット・トップ・ボックス、および／または他の入出力（Ｉ／Ｏ）デバイスと共に操作されるグラフィカル・ユーザ・インターフェースを介してこれらのメディア・ストリームと対話することができる。
小売業者、製造業者、およびサービス・プロバイダなどの販売者１１０は、消費者（例えば、視聴者１０４）に売るための製品およびサービスを作る。上で説明したように、そのような製品およびサービスを広告する一般的な形は、コンテンツ作成者１０２からメディア・ストリーム内の広告時間（例えば、主プログラム・コンテンツに割り込む伝統的なコマーシャルの形または主プログラム・コンテンツ内の製品の戦略的配置での）を購入することである。しばしば、広告時間またはプロダクト・プレースメントの購入は、新しい媒体リリースを追跡し、広告時間またはプレースメントをコンテンツ作成者１０２から直接に購入し、広告または製品を販売者１１０の代わりに配置するプロダクト・プレースメント・エージェントまたは広告代理店などの広告購入者１０８によって仲介される。上で説明したように、この仲介は、しばしば、過度に侵入的な広告コンテンツが氾濫せず、それに悩まされないことの視聴者の望みは言うまでもなく、物品を認識できる形で配置させることの販売者の望みおよびコンテンツのアーティスティック・インテグリティを維持することのコンテンツ作成者の望みなど、競合する懸念のバランスをとらなければならない。従来、広告時間の購入者に関して、販売者１１０またはその代理人は、おそらくは広告購入者１０８によって仲介された広告コンテンツをアクセス・プロバイダ１０６に提供し、このアクセス・プロバイダ１０６は、その広告コンテンツを、視聴者１０４への配信のためにメディア・ストリーム内に挿入する。
本発明によれば、ストリーム注釈付けサービス・プロバイダ１１２は、伝統的なプロダクト・プレースメントの効力を高めることによって競合する懸念のバランスを容易にする仲介者である。下でさらに詳細に説明するように、ストリーム注釈付けサービス・プロバイダ１１２は、コンテンツ作成者１０２、販売者１１０、および／またはアクセス・プロバイダ１０６と共に働いて、視聴者１０４に配信されるメディア・ストリーム用の実質的に控え目な広告を作成する。一実施形態で、ストリーム注釈付けサービス・プロバイダ１１２は、コンテンツ作成者１０２から特別にコーディングされたメディア・ストリームを受け取る。具体的に言うと、このメディア・ストリームは、（おそらくは一意の）セグメント識別子によって識別される複数のセグメントにコーディングされ、このセグメントのインデックスが、ストリーム注釈付けサービス・プロバイダ１１２に供給される。インデックスは、メディア・ストリームのどの特定のセグメントが、広告コンテンツとの関連付けに適切である可能性がある特定の物品または物品のタイプを描くかを、セグメント識別子によって指定することができる。さらに、ストリーム注釈付けサービス・プロバイダ１１２は、販売者１１０から広告コンテンツを受け取る。本発明によれば、ストリーム注釈付けサービス・プロバイダ１１２は、広告コンテンツをメディア・ストリームのセグメントに関連するセグメント識別子にマッピングし（例えば、インデックスに従って）、このマッピングを格納する。このマッピングは、その後、アクセス・プロバイダ１０６に供給され、アクセス・プロバイダ１０６は、このマッピングおよび見られるメディア・ストリームのセグメントに従って、視聴者１０４に広告コンテンツを供給することができる。
例えば、コンテンツ・プロバイダ１０２が、テレビジョン番組を含むメディア・ストリームを作成し、そのテレビジョン番組の所与の点で、ある女優が、特定のセーターを着て描かれると仮定する。そのセーターを販売する小売業者（例えば、販売者１１０）は、本発明に従って、そのセーターの商業的入手性を広告するのを助けるためにストリーム注釈付けサービス・プロバイダ１１２に連絡することができる。一実施形態で、ストリーム注釈付けサービス・プロバイダ１１２は、そのセーターに関連する広告コンテンツを、メディア・ストリームの対応するセグメントに関連付けられた１つまたは複数のセグメント識別子にマッピングし、メディア・ストリームが視聴者１０４に配信されるときに、視聴者１０４が適当なときにアクセス・プロバイダ１０６に信号を送信することによってオンデマンドで広告コンテンツにアクセスできるようにする。広告コンテンツには、そのセーターに関する商業的情報（例えば、そのセーターをそこから商業的に入手できる販売者、素材、色など）ならびにそのセーターを即座に購入するオプション（例えば、販売者のインターネット・ウェブ・サイトを介してまたは対話型テレビジョン・ショッピング機能によって）を含めることができる。
下でより詳細に説明するさらなる実施形態では、ストリーム注釈付けサービス・プロバイダ１１２は、有効なプロダクト・プレースメント広告を容易にすることに加えて、データ・マイニング・タスクをも実行することができる。例えば、アクセス・プロバイダ１０６および／またはストリーム注釈付けサービス・プロバイダ１１２は、個々の視聴者１０４または視聴者１０４のグループの関心を測定する手段（例えば、視聴者１０４が広告を要求する製品およびサービスのタイプを分析することによって）として、受け取られた視聴者信号をログ記録することができる。そのような情報を、販売者１１０および／または広告購入者１０８に供給して、彼らがある種の個々の視聴者１０４または視聴者１０４のグループから使用可能にする広告を調整する際に助けることができ、これによって、販売者がプロダクト・プレースメントの効力を最大化することを可能にすることができる。さらに、そのような情報は、特定のプロダクト・プレースメントの効力を査定し、これらのプレースメントに適当な価格設定モデルを決定するのに有用である可能性がある。
上では、別個の実体がある種のタスクまたは機能を実行する特定の配置を説明したが、当業者は、さらなる実施形態で、いくつかの実体が複数の機能性を提供できることを了解するであろう。例えば、代替実施形態で、上ではストリーム注釈付けサービス・プロバイダ１１２によって提供されるストリーム注釈付け機能性を、アクセス・プロバイダ１０６またはコンテンツ作成者１０２など、別の当事者によって提供することができる。代替案では、ストリーム注釈付けサービス・プロバイダ１１２、アクセス・プロバイダ１０６、または広告購入者１０８が、広告コンテンツへのマッピングのためにメディア・ストリームのセグメント識別子をインデクシングする責任を負うものとすることができる。さらなる実施形態では、コンテンツ作成者が、メディア・ストリームの作成だけではなく、広告コンテンツおよびマッピングを作成する責任を負うものとすることができる。したがって、本発明は、同一のタスクを実行するための多数の異なる配置を企図している。したがって、本発明によるストリーム注釈付けサービスは、既存のテレビジョン価値連鎖を活用する。
コンテンツ作成者が所与のメディア・ストリーム内で描かれる多数の「マイナー」製品（例えば、短い時間だけ現れる物品、視聴者の反応を生成しやすくはない物品など）の販売者を追跡することに長い時間を投資することは、費用効率がよくない場合がある。言い換えると、コンテンツ作成者が、プロパティ・リストに各物品の名前および販売者を単純に記録することは、比較的簡単であり、安価であるが、外へ出、物品のプレースメントを「売る」ことを試みることは、比較的時間集中型である。
一実施形態で、ストリーム注釈付けサービス・プロバイダ１１２は、所与のメディア・ストリームまたはメディア・ストリームのセットに現れる物品（例えば、製品、サービス、音楽、人）または物品のタイプ（例えば、１９６０年代の青銅ランプ）をリストするウェブ・サイトをホスティングする。下でより詳細に述べるように、販売者は、このウェブ・サイトを見、関心のある物品を検索することができる。というのは、潜在的にそのような物品が物品のライブラリまたはオントロジ内に配置されているからである。例えば、ランプ販売者は、メディア・ストリーム内で実際に描かれる物品に似ているが、正確には描かれた物品ではない可能性がある物品を目玉として宣伝する、視聴者への提示のための補足コンテンツ（例えば、広告コンテンツ）を提供することを望む場合がある。販売者が十分に関心を持つ場合に、その販売者は、視聴者への表示用のその販売者の補足コンテンツ（例えば、物品の写真、より多くの情報など）をマッピングすることに関する固定料金コストを即座に支払うことができる。このサービスから得られる収入は、メディア・ストリームを作成したコンテンツ作成者、メディア・ストリームに特別出演する俳優、および類似物と分け合うことができる。
一実施形態で、ストリーム注釈付けサービス・プロバイダ１１２は、メディア・ストリーム注釈付けのマーケット・イネーブラ（すなわち、技術的インフラストラクチャを提供する）、マーケット・メイカー（すなわち、プレースメント取引を仲介するサービス部門）、またはメディア・ストリーム市場全体のクリアリング・ハウスとして働くのではなく、ストリーム注釈付けサービス・プロバイダ１１２は、市場のアクティブ参加者になることを選択することができる。すなわち、ストリーム注釈付けサービス・プロバイダ１１２は、特定のメディア・ストリームに関して補足コンテンツを関連付ける権利を購入し（例えば、フラット料金で）、その後、クリックストリーム・ターゲティング情報の価値を付加した後に、最高額入札者にこの権利を（全体としてまたは部分的に）売ることができる。この手法を利用すると、コンテンツ作成者は、そのコンテンツの予測可能な価格を与えられ、ストリーム注釈付けサービス・プロバイダ１１２は、再販を行うリスク（および結果の潜在的利益）を負い、販売者は、ストリーム注釈付けサービス・プロバイダ１１２が単一の調整点を提供するので利益を得る。
図２は、コーディングされた（すなわち、インデクシングされた）メディア・ストリームを作る方法２００の一実施形態を示す流れ図である。方法２００は、例えば、ストリーム注釈付けサービス・プロバイダ１１２などのストリーム注釈付けサービス・プロバイダによるメディア・ストリーム注釈付けを容易にするために、図１に示されたものなどのコンテンツ作成者１０２によって実施することができる。代替案では、方法２００を、完全にストリーム注釈付けサービス・プロバイダ１１２で実施することができる。
方法２００は、ステップ２０２で開始され、ステップ２０４に進み、ここで、方法２００は、メディア・ストリーム内に現れる１つまたは複数の物品を識別し（すなわち、メディア・ストリームの撮影の前に）、識別された物品のそれぞれに（おそらくは一意の）タグを用いてタグ付けする。例えば、図２３に、複数の物品がタグ付けされる（すなわち、「ＲＦＩＤ」）、例示的撮影位置２３００を示す。
一実施形態では、メディア・ストリーム内に現れるすべての物品が、識別され、タグ付けされる。一実施形態では、物品は、ランダム・タグを用いてタグ付けされる。もう１つの実施形態では、１つまたは複数の特定の物品が、すべてのメディア・ストリームで使用される特定の一意のタグを割り当てられる（例えば、ソフト・ドリンクＸは、ソフト・ドリンクＸが使用されているメディア・ストリーム（１つまたは複数）にかかわりなく、および／またはメディア・ストリームを撮影するコンテンツ作成者にかかわりなく、必ずタグＹを用いてタグ付けされる）。この実施形態では、コンテンツ作成者によってアクセス可能なユニバーサル・データベースが、所与の物品に使用される適当なタグを指定することができる。そのようなデータベースは、例えばストリーム注釈付けサービス・プロバイダ１１２によって作成し、維持することができる。一実施形態で、識別された物品は、一意のｒａｄｉｏ ｆｒｅｑｕｅｎｃｙ ｉｄｅｎｔｉｆｉｃａｔｉｏｎ（ＲＦＩＤ）タグを用いてタグ付けされる。
ステップ２０６で、方法２００は、タグおよび関連付けられた物品のデータベース（例えば、図２３のデータベース２３０２）を作成するか更新する。一実施形態で、物品のデータベース・エントリは、関連付けられたタグのＩＤに加えて、物品自体に関する情報（例えば、アイテムの販売者１１０によって供給される）を含む。もう１つの実施形態で、物品のデータベース・エントリは、物品の説明、物品のイメージ、または物品が既にストリーム注釈付けサービス・プロバイダ１１２に登録されていることを示すハイパーリンクもしくは他の識別子（この場合に、物品に関する情報を、販売者の望みに従って事前にロードすることができる）のうちの少なくとも１つを含む。さらなる実施形態で、物品のデータベース・エントリは、物品の販売者がメディア・ストリーム内での物品のプレースメントおよび広告と引き換えに提供するつもりがある代償の尺度を含む。
ステップ２０８で、この方法は、メディア・ストリームが撮影されるときに実質的にリアル・タイムで、タグ付けされた物品上のタグを検出し、読み取る。一実施形態で、タグは、メディア・ストリームの撮影が行われる現場に配置される（および、タグ付けされる物品を含むセットから適当な読み取り距離に配置される）センサ・システムによって検出され、読み取られる。代替実施形態では、センサ・システムは、読み取り距離の問題を最小にするために、イメージ取込デバイス（１つまたは複数）にリンクされるのではなく、セットに（例えば、天井、床、および／またはマイクロホン・システムに）組み込まれる。後者の実施形態は、特に再利用される（すなわち、可動ではない）撮影位置について効率的であり、費用効率がよいはずである。もう１つの実施形態では、センサ・システムは、撮影の前または後のいずれかに撮影位置を歩き回り、タグ付けされた物品をスキャンする個人によって操作可能なハンドヘルド・センサ・システムである。この場合に、ハンドヘルド・センサ・システムによって記録される情報は、さらなる処理のためにデコーダに送られる（例えば、無線送信器を介してまたはセンサ・システムを接続できるネットワークを介して）。もう１つの実施形態では、センサ・システムは、イメージ取込デバイスの視野に一体化されるか、イメージ取込デバイス（１つまたは複数）と連繋して移動するように較正され、プログラミングされる関節動作式アームに組み込まれ、イメージ取込デバイスの視野（すなわち、実際に「ショット内」にあるものとして撮影されるもの）の中に現れる物品上のタグだけが読み取られるようになる。この実施形態は、イメージ取込デバイスの視野の外のタグを除外するために、三角測量システムに関連して達成することができる。タグがＲＦＩＤタグである実施形態では、センサ・システムは、ＲＦＩＤタグに問い合わせることができるＲＦＩＤセンサ・システムである。
例えば、一体化されたＲＦＩＤセンサ・システム２４０２を有するイメージ取込デバイス２４００を示す図２４に示されているように、イメージ取込デバイスの視野によって定義される撮影のフィールドとセンサ・システムの範囲によって定義されるタグ・アクティブ化のフィールドとが、撮影位置２４０６の同一の区域を強調表示する。したがって、センサ・システム２４０２によってアクティブ化されるタグは、タグ付けされた物品がイメージ取込デバイスの視野に現れるときに読み取られる。
ステップ２１０で、この方法は、メディア・ストリームが撮影されるときに実質的にリアル・タイムで、メディア・ストリームの各フレームに（おそらくは一意の）識別子を割り当てる。一実施形態で、識別子は、メディア・ストリームを撮影しているイメージ取込デバイス（１つまたは複数）（例えば、ビデオ・カメラ、スチール・カメラ、または類似物）に通信的にリンクされたエンコーダに従って、撮影されたセグメント（例えば、個々のフレーム）に割り当てられる。例えば、図２０に、複数のセグメント２００２１〜２００２ｎ（以下では集合的に「セグメント２００２」と称する）に論理的に分割された例示的メディア・ストリーム２０００を示す。図示の例では、各セグメント２００２は、メディア・ストリーム２０００の１つのフレームを含む。さらに、図示されているように、各セグメント２００２は、一意のセグメント識別子を割り当てられ、例えば、セグメント２００２１を識別するセグメント識別子は、「ＸＹＺ−１００」であり、セグメント２００２２を識別するセグメント識別子は、「ＸＹＺ−１０１」であり、セグメント２００２３を識別するセグメント識別子は、「ＸＹＺ−１０２」であり、以下同様である。セグメント識別子の「ＸＹＺ」部分は、メディア・ストリーム２０００を識別するプログラム識別子であり、セグメント識別子の数字部分は、メディア・ストリーム２０００内の特定のセグメントを識別する識別子である。
ステップ２１０でセグメントに割り当てられる識別子が、完成した（潜在的に編集された）メディア・ストリームと共に送信される「最終的な」セグメント識別子であるのではなく、同一シーンを撮影した複数の異なるイメージ取込デバイスによって生成されたストリームが一緒に単一の一体化されたメディア・ストリームに編集されるときなど、割り当てられる識別子が、最終的なセグメント識別子を生成するのに使用され得ることに留意されたい。言い換えると、下でより詳細に説明するように、後の段階のエンコーディングが、ステップ２１０で割り当てられた識別子をメタデータまたは類似物に埋め込む場合がある。
一実施形態で、セグメント識別子は、メディア・ストリームに関連するクローズド・キャプション化ストリーム内の標準「テキスト」として埋め込まれるが、このテキストは、メディア・ストリームおよびクローズド・キャプショニング・ストリームの視聴者に不可視になるように変更される（例えば、埋め込まれるセグメント識別子のテキストは、背景と同一の色で提示されるか、透明である）。この手法は、埋め込まれる情報をメディア・ストリームに追加するのに既存システムを活用するはずである。
一実施形態で、エンコーダは、メディア・ストリームに埋め込まれるプログラム識別子（例えば、国際標準視聴覚資料番号すなわちＩＳＡＮ）を入手するために、それがエンコーディングしつつあるメディア・ストリームを「読み取り」、次に、（ａ）各セグメントのセグメント識別子（おそらくはメディア・ストリーム内の他のセグメントの識別子と比較して一意）を生成すること、（ｂ）メディア・ストリーム内に埋め込まれる可能性がある他の情報からプログラム識別子およびセグメント識別子を区別するためにプログラム識別子およびセグメント識別子が関連プロセッサ（例えば、セット・トップ・ボックス、アクセス・プロバイダのシステム）によって使用されることを識別する一意シグニファイヤが潜在的に先行するセグメント識別子とプログラム識別子とを組み合わせること、ならびに（ｃ）クローズド・キャプショニングの「不可視」テキスト、インターネット・プロトコル・テレビジョンＩＰＴＶフレームの「メタデータ」セクション、垂直帰線消去期間、ウォーターマーク、または類似物など、どのような形（１つまたは複数）であれ必要な形でコード全体を自動的に埋め込むことという動作のうちの１つまたは複数を実行する。
異なるタイプのメディア・ストリームは、異なるプロパティ（例えば、異なるフレーム毎秒レート）を有し、第１フォーマットでセグメント識別子をエンコードされた１つのメディア・ストリームが第２フォーマットに変換されるときには、第２フォーマットとの一貫性を有するために、セグメント識別子コーディングも変化することが必要になる場合がある。一実施形態で、エンコーダは、「マスタ」メディア・ストリームに埋め込まれたコーディングを再検討し、適当な調整要因（例えば、異なるフレーム・レートまたは他の特性を考慮に入れるために必要な調整）を参照し、その後、調整されたコーディングを用いて「従属」メディア・ストリームをエンコードする。このプロセスは、複数の従属メディア・ストリームと同時に行うことができる。
戻って図２を参照すると、タグ付けされた物品が読み取られ、メディア・ストリームのセグメントがセグメント識別子を割り当てられたならば、方法２００は、ステップ２１２に進み、ステップ２０８および２１０で収集され、かつ／または割り当てられたデータに従って、セグメント識別子への物品のインデックスを作成する。エンコーダが、メディア・ストリームのセグメントに識別子を割り当てるのに使用される実施形態では、エンコーダを、センサ・システムに通信的にリンクすることができ、その結果、メディア・ストリームの各セグメントが撮影中に作成されるときに、ＲＦＩＤタグ上のＲＦＩＤコードが、読み取られ、同時に記録されるようになる。その後、インデックスをデータベース（例えば、エンコーダ内またはネットワークを介してリンクされた中央収集点に常駐する）に格納することができる。
方法２００は、ステップ２１４で終了する。
方法２００は、これによって、メディア・ストリーム内に現れる物品の、その物品が現れるメディア・ストリームのセグメント識別子への自動化されたリアルタイム・インデクシングを可能にする。これらのインデックスは、その後、ストリーム注釈付けサービス・プロバイダ１１２に供給されて、下でより詳細に説明するように、メディア・ストリームの、その中に現れる物品に関連するメタデータを用いるマークアップを容易にする。そのようなインデックスを、ビデオに現れる物品のプロパティ・リストを備え、メディア・ストリームを観察し、物品が現れるフレームを記録する個人によって実行することもできるが、方法２００がインデクシング・プロセスを大幅に単純化することに留意されたい。例えば、方法２００は、インデックスを作るのに必要な人数および時間の長さを実質的に減らし、これによって、コストを下げ、制作を加速する。一実施形態で、シーン（すなわち、フレームの範囲）が、メディア・ストリームの最終版からカットされる場合に、生のエンコーディングまたはインデックスを、最終的にストリーム注釈付けサービス・プロバイダ１１２に供給される最終的なインデックスに置換することができる。この最終的なインデックスのフレームを、その生の識別子と最終的な識別子との両方に関連付けることができる。
一実施形態で、メディア・ストリームのセグメント（すなわち、フレームのシーケンス）が、（おそらくは一意の）セグメント識別子によって識別される（例えば、格納されたインデックス内で）。一実施形態で、セグメント識別子は、セグメントに関連するフレーム番号のセット（例えば、フレームａからｃまで）を含む。もう１つの実施形態で、セグメント識別子は、生成された番号（例えば、セグメントのフレームをハッシュ化し、その後、オプションで暗号化することによって生成される）を含む。例えば、一実施形態で、セグメントは、時間セグメント中に発生するメディア・ストリームの１つまたは複数のフレームに関連するタイムコードまたはタイムコードのセット（例えば、ｔからｔ＋３まで）によって識別される時間セグメントである。いくつかの実施形態で、Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ（ＭＰＥＧ）タイムコードまたは米国映画テレビ技術者協会ＳＭＰＴＥタイムコードをセグメント識別子として使用することができる。一実施形態で、セグメント識別子は、セグメントを含むメディア・ストリームが編集されるか他の形で変換されるときに、セグメント識別子がプログラム・コンテンツの同一部分に関連付けられ続ける（例えば、セグメント識別子が個々のフレームに直接に関連付けられるようにメディア・ストリーム内にセグメント識別子を埋め込むことによって）形で、セグメントに関連付けられる。
代替実施形態では、セグメントは、メディア・ストリーム内の観察された時刻（例えば、ストップウォッチがメディア・ストリームと同一時刻にスタートされる場合のストップウォッチの読みに似た）に対応し、これによって、既知の位置（例えば、メディア・ストリームの始めまたはメディア・ストリーム内のシーンの始め）に対する相対的なタイミング情報を含む。代替案では、既知の位置からのメディア・ストリーム内のフレーム数が使用される。好ましくは、オフセットは、正のオフセットである（すなわち、既知の位置の後に発生するメディア・ストリーム内の点に関係する）が、相対位置を負にすることもできることが企図されている。
さらなる実施形態では、メディア・ストリームを、比較的少数の第１レベル・セグメントに分割することができ（例えば、テレビジョン番組をシーン全体またはコマーシャル・ブレークの間に発生する部分あるいはＤＶＤの１チャプタに対応するセグメントに分割する）、この第１レベル・セグメントのそれぞれは、さらに、第１レベル・セグメントの始めに対する相対的な時間識別（例えば、ストップウォッチ読み）を含む一連の第２レベル・サブセグメントに関連付けられる。例えば、メディア・ストリームをｎ個の第１レベル・セグメントＳ１，Ｓ２，．．．，Ｓｎに分割することができる。次に、これらの第１レベル・セグメントのそれぞれは、さらに、相対タイミング情報に関連付けられ、この相対タイミング情報は、本明細書で前に説明した実施形態によれば、第１レベル・セグメントが完全なメディア・ストリームであるかのように、第１レベル・セグメントの特定のサブセグメントに対応する。これは、各セグメントに関連する時刻が（おそらくは）途切れないストリーム内の固定点から始まるならば、インデックスによって暗示される関連付けの正確さを改善するはずである。
方法２００のさらなる実施形態では、インデックス内のエントリ（すなわち、物品および対応するフレームのエントリ）は、さらに、シーン情報（例えば、シーンに現れる俳優、シーンの位置など）によって増補される。この追加の注釈付けは、販売者および広告購入者が、物品が提示されるコンテキストを理解するのを助ける。代替案では、この増補を、ストリーム注釈付けサービス・プロバイダ１１２によって実行することができる。
さらなる実施形態では、インデックス・エントリは、インデクシングされた物品を最も有利に描くフレームまたは一連のフレームを識別する。例えば、物品全体が長い時間期間にわたって可視であるセグメントなど、１つまたは複数のフレームが、販売者（または購入者）の観点から物品の「最良の」ビューを描く場合がある。この実施形態では、物品を、有利なコンテキストで（例えば、特定の物品が、２人の人気俳優を含む大衆を喜ばせるシーンで特別扱いされる）物品を描く「フル」シーンまたは劇的シーン、および物品が現れる前、現れている間、および現れた後の２〜３秒を描く「広告」シーンなど、複数の異なる「シーン」に関連付けることができる。一実施形態で、ユーザは、指定されたパラメータ（例えば、「バンドＸＹＺが特別出演するすべての音楽ビデオでリード・シンガーが履いているすべての靴」）に基づいて、インデックス・エントリからシーンを選択することを可能にされ得る。
一実施形態では、タグおよび物品のデータベースが、異なるタグにマッピングされるが同一の物品である可能性が高い物品を識別するために維持される。例えば、あるコンテンツ作成者が、特定のサングラスを「ブランドＸモデルＹ、男性サングラス」として識別するが、別のコンテンツ作成者が、「ブランドＸ製のモデルＹサングラス」という句を使用する場合がある。そのような潜在的一致を識別することにより、ユーザは、そのような可能な関係を簡単に再検討し、説明がより均一になるようにするために説明を変更し、かつ／または関連する広告出力の更新などのタスクをより簡単かつ正確に行えるようにするためにこの２つの物品の間のリンクを定式化することができる。この検索／識別プロセスは、潜在的に、異なるコンテンツ作成者によっておよび／またはアクセス・プロバイダまたは注釈付けサービス・プロバイダによって維持されるデータベースに連絡しようとするはずである。
一実施形態で、ユーザは、外部データベース（例えば、第三者が提供する、物品のカタログ）からのデータを変更することを許可されない。ユーザは、読み取りアクセスだけを許可されるが、２つの物品の間の潜在的リンクを関連する当事者に簡単に通知し、並列変更を管理する機構を与えられる。例えば、両方の当事者がダウンロードできる改訂された説明を、アクセス・プロバイダまたはストリーム注釈付けサービス・プロバイダなどの第三者によって提供することができる。代替案では、新しい説明を最終化する前に両方の当事者（およびおそらくは広告ブローカまたは販売者などの第三者）が提案を申し出ることができる協調ツールを、設けることができる。
一実施形態で、１つまたは複数のＲＦＩＤタグが、特定の撮影状況に関する情報を含めるためにコンテンツ作成者によって記録される。例えば、セグメント全体が、マーシャル・アートを含むアクション・シーケンスを含む場合があり、撮影隊が（例えば、マーケティング部門の指示で）、その情報を記録させることを望む場合がある。例えば、シーンがマーシャル・アートを含むことを知ることは、下でさらに詳細に述べるように、視聴者が最終的にセグメントの提示中に補足コンテンツを入手することへの関心をシグナリングするときに、ある種のマーケティング情報／メトリックスを生成することを可能にする場合がある（例えば、特定の視聴者または視聴者のクラスが、アクション・シーケンスに続くビデオ・ゲーム広告に良好に反応することを知ることができる）。他の例は、「音楽シーケンス」として、ベニスの浜辺（例えば、特定の位置）を含む何かとして、あるタイプの撮影技法（例えば、白黒のみ）を用いるものとして、または類似物としてセグメントを記録することとすることができる。これらのタイプの情報のすべてが、セグメント内の任意の所与の物品と独立であるが、それでも、補足コンテンツをターゲティングするために非常に重要である可能性がある。
そのような情況では、物品独立であるがそれでも「セットで生で」提供されるＲＦＩＤインデクシングを用いて、前に述べたＲＦＩＤタグ付けプロセスを補足することが有用になる。したがって、「セグメントＲＦＩＤタグ」を、イメージ取込デバイス上に配置された各ＲＦＩＤセンサの非常に近くに配置し、その結果、セグメントＲＦＩＤタグがイメージ取込デバイスの視野内にない場合であっても、セグメントＲＦＩＤタグが必ず撮影中にインデクシングされるようにすることができる。例えば、セグメントＲＦＩＤタグを、イメージ取込デバイスのレンズの上にあるがＲＦＩＤセンサ・ビームの範囲内にある保持用ブラケット内に挿入することができる。一実施形態では、ＲＦＩＤタグを使用するのではなく、キーボードなどの入力デバイスを使用して、ＲＦＩＤ感知される物品と一緒にフィルム内でインデクシングされる、セグメント固有のアイテム独立情報を入力することができる。
一実施形態で、ある種の物品が、ＲＦＩＤタグを収めるには寸法が物理的に小さすぎる（または、実際に、物品がまったくなく、単に「概念」がある可能性がある）場合に、フィルムが正しくインデクシングされるようにするために、ＲＦＩＤタグを、実際の物品の近くに配置することができる。例えば、腕時計は、ＲＦＩＤタグを収めるには小さすぎる可能性があるが、その時計のすぐそばに現れるシャツの袖が、正確なインデクシングを保証するのに十分な近接を実現する。
図３は、本発明による、メディア・ストリームに現れる物品上のタグを検出し、読み取る方法３００の一実施形態を示す流れ図である。具体的に言うと、方法３００は、上で述べたセンサ・アレイの使用を介して３次元空間（例えば、撮影セット）内のタグ付けされた物品を検出し、突き止める手段を提供する。方法３００は、例えば、方法２００のステップ２０８に従って実施することができる。
方法３００は、ステップ３０２で初期化され、ステップ３０４に進み、ここで、方法３００は、３次元空間（例えば、天井および／または床あるいはマイクロホン・ブームなどの他の位置に配置されたセンサによって定義される）内の１つまたは複数の位置から１つまたは複数の物品タグを読み取る。
ステップ３０６で、方法３００は、読みに従って、物品のうちの１つまたは複数の３次元（すなわち、ｘ，ｙ，ｚ）位置を判定する。一実施形態で、物品の３次元位置の判定は、物品のタグの相対信号強度を反映する読みによって援助される。例えば、天井内のセンサが、床から１０フィート（３．０４８ｍ）に位置決めされ、ｓの信号強度がセンサから４フィート（１．２１９２ｍ）の距離を示すことがわかっている（例えば、超音波、レーザ、または他の手段によって）場合に、そのタグが３次元空間内で強度ｓの信号を発する物品の「高さ」を、床から約６フィート（１．８２８８ｍ）として計算することができる。
ステップ３０８で、方法３００は、センサ・アレイによって検出される３次元空間のうちで、イメージ取込デバイスの視界によって定義されるサブセットを識別する。一実施形態で、このサブセット空間は、まず３次元空間内でイメージ取込デバイスを突き止めるフレーミング・プロセスによって（例えば、イメージ取込デバイスの位置を物理的に測定することによって、またはセンサ・アレイによって読み取り可能なタグを用いてイメージ取込デバイス自体にタグ付けすることによって）判定される。これは、イメージ取込デバイスを、メディア・ストリーム用に撮影されるシーンに対して相対的に配置する。イメージ取込デバイスの相対位置がわかったならば、イメージ取込デバイスから読みを入手して、イメージ取込デバイスのズーム／視野（例えば、パノラマ・ショット対「タイト」ショット）と共に、イメージ取込デバイスのレンズが向けられている３次元方向を判定する。次に、これらの読みを組み合わせて、３次元サブセット空間を作る。このサブセット空間は、イメージ取込デバイスがパンされ、チルトされ、ズームされるときに変化するので、撮影が行われる際に連続的に再計算される。
ステップ３１０で、方法３００は、センサ・アレイによって定義される３次元空間内のタグ付けされた物品を選択する。次に、方法３００は、ステップ３１２に進み、選択された物品がフレーミング・プロセス（すなわち、ステップ３０８）によって判定されたサブセット空間内に現れるかどうかを判定する。これは、ステップ３０６の出力をステップ３０８の出力と比較することによって行うことができる。
方法３００が、ステップ３１０で、選択された物品がサブセット空間内に現れると結論する場合に、方法３００は、ステップ３１４に進み、選択された物品をタグ・ログ内で「アクティブ」としてマークする。例えば、図２５に、メディア・ストリーム・セグメントを識別する各セグメント識別子に関連するアクティブ・タグを識別する例示的タグ・ログ２５００を示す。
その代わりに、方法３００が、ステップ３１０で、選択された物品がサブセット空間内に現れないと結論する場合に、方法３００は、ステップ３１６に進み、選択された物品を「インアクティブ」としてマークする。一実施形態で、第２の物品に関連する第１の物品（例えば、俳優が身に着けている眼鏡）を、第１の物品がサブセット空間内でインアクティブとしてマークされるかまったくマークされない場合であっても、第２の物品がアクティブとしてマークされるときに必ず、そのサブセット空間内でアクティブとしてマークすることができる。
ステップ３１８で、方法３００は、センサ・アレイによって定義される３次元空間内で別のタグ付けされた物品を選択すべきかどうかを判定する。一実施形態で、方法３００は、まだ突き止められておらず、アクティブまたはインアクティブとしてマークされていない少なくとも１つのタグ付けされた物品がある場合に、別のタグ付けされた物品を選択する。方法３００が、ステップ３１８で、別のタグ付けされた物品を選択しなければならないと結論する場合に、方法３００は、ステップ３１０に戻り、上で説明したように進行して、別のタグ付けされた（しかしまだマークされていない）物品を選択する。その代わりに、方法３００が、ステップ３１８で、別のタグ付けされた物品を選択してはならないと結論する場合に、方法３００は、ステップ３２０で終了する。したがって、方法３００は、マークされる（アクティブまたはインアクティブとして）ことを意図されたすべてのタグ付けされた物品がマークされるまで、繰り返すか反復する。
上で図２に関して説明したように、撮影中の実質的に同時のプロセスが、メディア・ストリームのフレームを（おそらくは一意の）セグメント識別子と共にエンコードすることができる。ログ・ファイルは、これらのセグメント識別子を、フレームが作成された時間的瞬間に「アクティブ」である物品のリストと照合することができる。一実施形態で、このログ・ファイルは、各物品が１回だけリストされるが、メディア・ストリームの関連するセグメント識別子のすべてに関連付けられるように、物品ごとに編成される。
一実施形態で、方法３００を、生のコンテンツ供給をエンコードするように適合させることができる。その場合に、生のセグメント識別子は、メディア・ストリームのセグメントに関連付けられる唯一の識別子になる。その場合に、ライブ・オペレータは、セグメント識別子に関連付けられなければならないが、「アクティブ」としてはマークされない追加物品（例えば、タグ付けされなかった物品または有形の可視の商品ではなく、浜辺の休暇など、メディア・ストリームによって提案される「概念」に関連する物品）によってインデックスを補足することができる。さらに、そのようなマークされない物品を、編集されたインデクス（すなわち、生のコンテンツ供給について作成された生のインデックスではなく）に関連付けることができる。さらに、オペレータは、方法３００によってマークされた物品のアクティブ／インアクティブ指定を編集することを可能にされるものとすることができる（例えば、不正確さを訂正するために）。例えば、オペレータは、自動化された方法３００によってシーンから外れたと知覚されたが実際には現れていた物品をインデックスに追加するために「インアクティブ」物品のセットにアクセスすることができる。
図４は、コーディングされたメディア・ストリームを作る方法４００のもう１つの実施形態を示す流れ図である。方法２００と同様に、方法４００は、ストリーム注釈付けサービス・プロバイダ１１２によるストリーム注釈付けを容易にするために、コンテンツ作成者１０２によって実施することができる。その代わりに、方法４００を、完全にストリーム注釈付けサービス・プロバイダ１１２で実施することができる。
方法４００は、ステップ４０２で初期化され、ステップ４０４に進み、ここで、方法４００は、潜在的にメディア・ストリーム内に現れる１つまたは複数の物品および／または個人（例えば、俳優）のイメージの「エンサイクロペディア」（すなわち、データベース）を作成するか入手する。一実施形態で、このデータベース内のイメージは、ビデオ認識用に最適化される。これには、例えば、後の認識を容易にするために物品または個人を複数のアングルからまたは異なる照明を用いて撮影する（昼間のシーン対夜間のシーンなど、物品が実際にどのように撮影されたかに関わりなく物品を認識できるようにするために）ことを含めることができる。一実施形態で、物品または個人のデータベース・エントリは、１つまたは複数のイメージに加えて、物品または個人に関するテキストの識別する情報、物品または個人を一意に識別する識別番号、物品または個人がメディア・ストリーム内で移動する可能性が高い（例えば、自動車）のか静的なのかの表示、およびビデオ認識システムの正確さを高めることができるある種の属性の特徴を表す他のデータ（例えば、輝度、色相、または反射率）のうちの１つまたは複数を含む。もう１つの実施形態では、撮影位置が、エントリとしてデータベースに含まれ（例えば、雪および氷を特色とする戸外シーン対テントの内部を特色とする室内シーン）、前景オブジェクトを背景シーンから区別することを可能にする。もう１つの実施形態では、物品または個人のデータベース・エントリを、別のエンサイクロペディア内のエントリから選択することができる。
ステップ４０６で、方法４００は、セグメント識別子をエンコードされたメディア・ストリーム（すなわち、そのセグメントが既に識別情報と共にエンコードされているメディア・ストリーム）を入手する。次に、方法４００は、ステップ４０８に進み、認識を容易にするための入力としてステップ４０４で作成されたイメージのエンサイクロペディアを使用して、ビデオ認識システムに従ってメディア・ストリームを処理する。比較的小さいサイズのエンサイクロペディアが、メディア・ストリーム内に現れる物品のより正確な認識を可能にするに違いない。
ステップ４１０で、この方法は、認識結果を使用して、メディア・ストリームの１つまたは複数のセグメント識別子を、対応するセグメント（１つまたは複数）に現れる物品（または個人）の１つまたは複数の物品（または個人）ＩＤに関連付ける。一実施形態で、セグメント識別子と物品（または個人）ＩＤとの関連付けは、認識結果の人間の検証次第である。したがって、セグメントへの物品（および個人）のインデックスが作成される。その後、このインデックスを、例えば、下でより詳細に説明するように、将来の使用および処理のためにストリーム注釈付けサービス・プロバイダ１１２に供給することができる。その後、方法４００は、ステップ４１２で終了する。
方法４００のさらなる実施形態では、メディア・ストリームに対して実行されるビデオ認識処理（すなわち、ステップ４０８での）は、メディア・ストリームの撮影と同時に実行される（以前に撮影されたメディア・ストリームに対して実行されるのではなく）。セグメント識別子が一意である場合には、結果のインデックスの正確さは、すべての後続の編集に関わりなく維持されなければならない。
さらなる実施形態では、質を高められた認識結果のために、方法２００のタグ付け技法を方法４００と組み合わせることができる。例えば、タグＩＤ読みを使用して、ビデオ認識処理結果を交差検証することができる。
一実施形態で、ビデオ認識システムを、物品のある組合せが一緒に移動する傾向があることを「学習する」ようにプログラムすることができる（例えば、眼鏡およびイヤリングは、同一の視野内にあり、互いの近くに位置決めされる可能性が高い）。
もう１つの実施形態で、メディア・ストリームの「ズーム」を表す数が、その中にエンコードされる（例えば、メディア・ストリームを撮影したイメージ取込デバイス（１つまたは複数）を使用して）。これは、メディア・ストリームのセグメント内に描かれた形状の真のサイズを判定するのを助けることに関して有用である可能性がある。例えば、メディア・ストリームの所与のセグメントが「タイト」ショットを描き、イヤリングとネックレスとの両方がそのセグメント内で描かれることを知ることによって、自動化された認識システムがネックレスからイヤリングを正確に区別することを可能にすることができる。
一実施形態で、メディア・ストリームを撮影するイメージ取込デバイス（１つまたは複数）は、セグメント識別子エンコーダおよびビデオ認識システム（メディア・ストリーム内に現れる物品のエンサイクロペディアにリンクされる）にリンクされる。この場合に、セグメント識別子エンコーディングと補足コンテンツへのマッピングとの両方が、メディア・ストリームの撮影と同時に実行される。すべてのセグメント識別子が一意になるように選択される場合には、メディア・ストリームが最終的にどのように編集されるかにかかわりなく、セグメント識別子は、それでも、補足コンテンツの同一のアイテムを参照する。
一実施形態で、各メディア・ストリームの、その中で描かれる物品のエンサイクロペディアは、アクセス・プロバイダ、ストリーム注釈付けサービス・プロバイダ、または他の中央ホスティング・サービスにアップロードされる。次に、エンサイクロペディアを投入するために別のメディア・ストリームに対する「入力」カメラ作業を行う個人は、各物品のイメージを取り込み、非常に基本的な情報を入力することができる。このイメージおよび基本的情報を、アクセス・プロバイダに送信することができ、このアクセス・プロバイダで、このイメージおよび基本的情報が、既にファイル上にある情報と比較される。次に、アクセス・プロバイダは、ユーザが単純に採用するか拒絶することのできる「可能性のある」一致を送り返す。これは、初期情報をエンサイクロペディアに入力するプロセスを単純化するはずである。
一実施形態で、メディア・ストリーム内に現れる物品のエンサイクロペディアは、プロダクト・プレースメント・プロセスの様々な態様を容易にするために（例えば、「あなたの物品がメディア・ストリームに現れます。あなたがターゲティングされた広告および即時購入の機会をどのようにして提供できるかに関する追加情報については、アクセス・プロバイダに連絡してください」と述べる電子メールを広告主に送信することによって）、メディア・ストリームの撮影の前にアクセス・プロバイダにアップロードされる。
ビデオ認識を使用して、パーソナライズされたプロダクト・プレースメントをデジタル的に追加できるメディア・ストリームのセグメントを識別することもできる。例えば、ビデオ認識システムは、メディア・ストリーム内に現れるソフト・ドリンク缶が、そのソフト・ドリンクの販売者によって使用された「古い」缶デザインを表すことを認識することができる。この知識は、販売者が、その缶のより最新のデザインを描く新しいイメージを挿入できるメディア・ストリームのセグメントを判定することを可能にすることができる。その代わりに、所与の視聴者に関して描くべき最適の物品（例えば、ソフト・ドリンク対ビールの缶対一杯のミルク）を判定するために、データ・マイニング技法を実施することができる。
図５は、コーディングされたメディア・ストリームを作る方法５００のもう１つの実施形態を示す流れ図である。具体的に言うと、方法５００は、オリジナルのメディア・ストリーム内のオーディオ・キュー（すなわち、ビデオ・キューではなく）に基づいて、コーディングされたメディア・ストリームを作る。すなわち、方法５００は、メディア・ストリーム内で、言葉で言及されるが、必ずしも視覚的には描かれない可能性がある、物品に関連するメタデータのマッピングを可能にする。方法２００および４００と同様に、方法５００は、ストリーム注釈付けサービス・プロバイダ１１２によるストリーム注釈付けを容易にするために、コンテンツ作成者１０２によって実施することができる。その代わりに、方法５００を、完全にストリーム注釈付けサービス・プロバイダ１１２で実施することができる。
方法５００は、ステップ５０２で初期化され、ステップ５０４に進み、ここで、方法５００は、潜在的にメディア・ストリーム内に現れる１つまたは複数の物品および／または個人（例えば、俳優）の「エンサイクロペディア」（すなわち、データベース）を作成するか入手する。一実施形態で、物品または個人のデータベース・エントリは、物品または個人の識別する名前、物品または個人の１つまたは複数のイメージ、物品または個人に関するテキストの識別する情報、物品または個人を一意に識別する識別番号、物品または個人がメディア・ストリーム内で移動する可能性が高い（例えば、自動車）のか静的なのかの表示、およびビデオ認識システムの正確さを高めることができるある種の属性の特徴を表す他のデータ（例えば、輝度、色相、または反射率）のうちの１つまたは複数を含む。もう１つの実施形態では、物品または個人のデータベース・エントリを、別のエンサイクロペディア内のエントリと比較することによって入手し、この初期ステップを単純化することができる。もう１つの実施形態では、新しいエントリが作成されるときに必ず、ある範囲の潜在的に関連する補足データベース・エントリを自動的に生成することによって、このデータベースにさらに投入することができる（例えば、エッフェル塔の新しいエントリが、ノートル・ダムのエントリなど、パリに関連するエントリの生成を自動的にトリガする）。
ステップ５０６で、方法５００は、セグメント識別子をエンコードされたメディア・ストリーム（すなわち、そのセグメントが既に識別する情報と共にエンコードされているメディア・ストリーム）を入手する。次に、方法５００はステップ５０８に進み、認識を容易にするための入力としてステップ５０４で作成されたエンサイクロペディアを使用して、音声認識システムに従ってメディア・ストリームを処理する。比較的小さいサイズのエンサイクロペディアが、メディア・ストリーム内で言及される物品のより正確な認識を可能にするに違いない。
ステップ５１０で、この方法は、認識結果を使用して、メディア・ストリームの１つまたは複数のセグメント識別子を、対応するセグメント（１つまたは複数）に現れる物品（または個人）の１つまたは複数の物品（または個人）ＩＤに関連付ける。一実施形態で、セグメント識別子と物品（または個人）ＩＤとの関連付けは、認識結果の人間の検証次第である。したがって、セグメントへの物品（および個人）のインデックスが作成される。その後、このインデックスを、例えば、下でより詳細に説明するように、将来の使用および処理のためにストリーム注釈付けサービス・プロバイダ１１２に供給することができる。その後、方法５００は、ステップ５１２で終了する。
方法５００のさらなる実施形態では、メディア・ストリームに対して実行される認識処理（すなわち、ステップ５０８での）は、オーディオ情報ではなくクローズド・キャプショニング情報（すなわち、テキスト検索）に従って実行される。
さらなる実施形態では、質を高められた認識結果のために、方法２００のタグ付け技法を方法５００と組み合わせることができる。例えば、タグＩＤを使用して、オーディオ認識処理結果またはテキスト認識処理結果を検証することができる。
図６は、本発明による、メディア・ストリームに注釈を付ける方法６００の一実施形態を示す流れ図である。方法６００は、例えば、公開（伝統的なテレビジョン配信手段による公開およびインターネットを含むネットワーク上での配信による公開を含む）のためにメディア・ストリームを作るか編集する実体によって実施することができる。例えば、方法６００全体を、図１のストリーム注釈付けサービス・プロバイダ１１２によって実施することができる。その代わりに、方法６００を、コンテンツ作成者１０２と共にストリーム注釈付けサービス・プロバイダ１１２によって実施することができる。
方法６００は、ステップ６０２で初期化され、ステップ６０４に進み、ここで、方法６００は、例えばコンテンツ作成者１０２によって作成された、コーディングされた（すなわち、インデクシングされた）メディア・ストリームを入手する。上で述べたように、コーディングされたメディア・ストリームの少なくとも一部が、そのメディア・ストリームの１つまたは複数のフレームを含む複数の識別されたセグメントに論理的に分割される。これらのセグメントは、さらに、そこに現れる１つまたは複数の物品に関連付けられる。
ステップ６０６で、方法６００は、セグメント識別子のうちの少なくとも１つを補足コンテンツの少なくとも１つのアイテムまたはメタデータ（例えば、ビデオ信号の基礎になっているメディア・ストリームに関するデータ）にマッピングする。一実施形態で、補足コンテンツは、メディア・ストリーム内に現れる１つまたは複数の物品に関連する情報（商業的情報またはドキュメンタリ・ソースなど）を含む。上で述べたように、物品は、メディア・ストリーム内に現れる商業的製品（例えば、女優が着ているセーターまたは女優が消費する飲み物）、メディア・ストリーム内に現れるかメディア・ストリームに関連する個人（例えば、俳優または監督）、メディア・ストリームの一部であるオーディオ信号（例えば、サウンドトラック曲）、またはメディア・ストリームの少なくとも一部によって示唆される「概念」（例えば、浜辺のシーンが休暇を示唆する場合があり、レストランのシーンがレストラン予約を示唆する場合があり、映画を含むメディア・ストリームが続編の上映に関するチケット入手を示唆する場合がある）とすることができる。さらなる実施形態で、補足コンテンツが、商業的製品のクーポンを含むことができる。そのようなクーポンの引換えは、例えば、サービス・プロバイダの視聴者アカウントの下でのトークンの格納をトリガする、メディア・ストリームからの所与のセグメント識別子を視聴者が格納することを可能にすることによって、可能にすることができる。一実施形態で、トークンを印刷し、販売者に提示することができる。同一のトークンが複数の異なる購入者に使用されることを防ぐために、トークンに関連して完了した取引に関するデータを記録することができる。
したがって、例えば、補足コンテンツのアイテムを、メディア・ストリーム内に現れる（またはクレジットにリストされる）俳優のフィルモグラフィ、メディア・ストリーム内で聞かれるバンドによって公表されたアルバムのリスト、メディア・ストリーム内に現れる市販製品に関する情報（リアルタイム・ワールド・ワイド・ウェブ・ハイパーリンクなど）またはある位置（例えば、浜辺、山など）のイメージが描かれる場合に旅行サービスに関する情報、メディア・ストリーム内に現れる物品（例えば、降水）を表す香り、あるいは、メディア・ストリームに関連する物理的応答（例えば、振動式ビデオ・ゲーム・コントローラによって与えられるフィードバックに似た）とすらすることができる。一実施形態で、メディア・ストリームのセグメントを識別する任意の所与のセグメント識別子を、そのメディア・ストリーム内に現れる１つまたは複数の物品に関連する補足コンテンツにマッピングすることができる。
一実施形態で、マッピングは、補足コンテンツのアイテムを、補足コンテンツのそのアイテムに関連する情報を伝えるセグメントを識別するセグメント識別子に関連付ける（例えば、ソフト・ドリンクの特定のブランドに関連する補足コンテンツを、そのソフト・ドリンクが描かれるか俳優がそのソフト・ドリンクの名前に言及するセグメントを識別するセグメント識別子にマッピングすることができる）。もう１つの実施形態では、マッピングは、補足コンテンツのアイテムを、様々な他のセグメント内で描かれるか言及される物品のメニューまたは要約（例えば、「次のメディア・ストリームに現れる、追加情報が入手可能な物品は、ｘ、ｙ、およびｚを含む」）に関連するセグメントを識別するセグメント識別子に関連付ける。もう１つの実施形態では、補足コンテンツは、メディア・ストリーム全体（例えば、映画サウンドトラックの場合あるいはメディア・ストリームのＤＶＤまたはメディア・ストリームの劇場上映のチケットなど、メディア・ストリームの代替版を購入することに関連する補足コンテンツの場合など、すべてのセグメント）に関連付けられる。
例えば、図２１に、図２０のメディア・ストリーム２０００のセグメントを識別するセグメント識別子（「ＸＹＺ−１００」から「ＸＹＺ−２１１」まで）が補足コンテンツのアイテム２１０２１〜２１０２ｎ（以下では集合的に「アイテム２１０２」と称する）にマッピングされる、例示的マッピング２１００を示す。アイテム２１０２は、メディア・ストリーム２０００のセグメント内に現れる物品（例えば、衣類、家具）に関連する。例えば、男物シャツのアイテム２１０２１は、このシャツが、セグメント識別子「ＸＹＺ−１００」から「ＸＹＺ−１０２」によって識別される、メディア・ストリーム２０００のセグメントに関連することを示す。
一実施形態で、セグメント識別子への補足コンテンツのアイテムのマッピングは、関連する物品が現れるセグメントの後に（すなわち、時間的に）発生する複数のフレームを識別するセグメント識別子への補足コンテンツのアイテムのマッピングを含む。これは、下でより詳細に説明するように、視聴者が関心を持つ可能性があるメディア・ストリーム内の物品の描写に反応するためのある時間を視聴者に与える、時間遅れをもたらす。一実施形態で、この時間遅れは、描かれる物品に関する補足情報にアクセスすることへの関心を特定の視聴者が指定することに固有の反応時間を補償するのに、またはメディア・ストリーム内のすばやいカットの発生（すなわち、メディア・ストリーム内に現れる物品がすばやく変化する可能性がある場合）を補償するのに有用である可能性がある１つまたは複数のパラメータに従って調整される。
さらなる実施形態では、補足コンテンツは、データ・マイニングを実行する際に有用な情報を含む。例えば、図２２に、図２０に示されたメディア・ストリーム２０００のセグメントが、セグメントのジャンル、セグメントによって描かれるシーン、セグメント内で発生するアクションのレベル、セグメント内で目玉になる俳優、セグメント内で目玉になる音楽、およびセグメントによって表される「ショット」のタイプなどの補足コンテンツに関連付けられる、例示的マッピング２２００を示す。例えば、図示されているように、セグメント識別子ＸＹＺ−１００は、他の情報の中でも、メディア・ストリーム２０００の関連するセグメントが「コメディ」ジャンルを表し、「ひやかし」のシーンを含み、「女優Ａ」を目玉にすることを示す補足コンテンツにマッピングされる。
ステップ６０８で、方法６００は、補足コンテンツのアイテムへのセグメント識別子のマッピングを格納する。一実施形態で、このマッピングは、メディア・ストリームの一意のプログラム識別子に従ってインデクシングされるストア（例えば、図２１のデータベース２１０４）に格納される。このプログラム識別子は、メディア・ストリームの個々のセグメントを識別するセグメント識別子とは異なって、メディア・ストリーム全体を識別する。
方法６００は、ステップ６１２で終了される。
メディア・ストリームのセグメントを識別するセグメント識別子の、補足コンテンツへのマッピングは、計算的には、実施に最小限の特殊なコーディングを必要とするので、メディア・ストリーム自体に補足コンテンツを埋め込むものなどの従来のプロダクト・プレースメント・マークアップ技法より単純である。したがって、方法６００で実施される技法は、補足コンテンツをメディア・ストリームに関連付ける既知の技法より費用効率がよいと期待される。さらに、本手法の単純さは、いつ補足コンテンツをメディア・ストリームに関連付けることができるか、およびどの種類の補足コンテンツを関連付けることができるかに関して、より高い柔軟性を与える。例えば、補足コンテンツの関連付けを提供する会社は、適当な報酬と引き換えに限られた時間期間の間だけそのような関連付けを提供し、その後、メディア・ストリーム自体を再コーディングする必要なしにその関連付けを除去することができる。
一実施形態で、方法６００は、コンテンツ作成者および／またはマッパーが、補足コンテンツのアイテムが正しいセグメント識別子にマッピングされることを確認するために、メディア・ストリームに関連付けられた補足コンテンツ・マッピングを視覚的に再検討することを可能にする。一実施形態で、これは、ディスプレイの第１部分がメディア・ストリームを描き、ディスプレイの第２部分が、メディア・ストリームの現在描かれているセグメントに関連付けられた補足コンテンツのアイテムのすべてを自動的に描く、スプリット・スクリーン・ディスプレイによって可能にされる。一実施形態で、メディア・ストリームの所与のセグメントに関連付けられた補足コンテンツの関連付けられたアイテムのすべてが、視聴者タイプにかかわりなく、同時に表示される（例えば、男性に示される補足コンテンツのアイテムおよび女性に示される補足コンテンツのアイテム、「ヒップホップ」バージョンなど）。一実施形態で、補足コンテンツのアイテムは、書かれた記述子（すなわち、補足コンテンツのイメージなし）、「サムネイル」イメージ、および他の類似する手段など、様々な要約フォーマットで提示される。一実施形態で、視聴者に見られる補足コンテンツのアイテムのすべてが、マッピングを再検討するユーザに示され、その結果、ユーザは、全体的な視聴者経験を簡単に再検討する（例えば、補足コンテンツのアイテムが視聴者ディスプレイに現れる順序を検証する）ことができるようになる。一実施形態で、ユーザは、情報の特定の要素（例えば、特定の物品）を含む補足コンテンツのすべてのアイテムを再検討することを可能にされ、その結果、補足コンテンツの様々なアイテムにまたがる均一性を保存でき、かつ／または補足コンテンツのアイテムの間の相違を、意図された通りであるものとして確認できるようになる。
一実施形態で、トレーニングまたは他の目的のために、マッピングを作成する個人または個人のグループ（例えば、コンテンツ作成者、共同制作者、第三者のストリーム注釈付けサービス・プロバイダ、または類似物）は、メディア・ストリームおよび専門家によって作られたコーディングを含むディスプレイを提示され、その結果、マッピングを作成する個人（１人または複数）は、実際のコーディング（すなわち、視聴者に表示されるべき補足コンテンツと、視聴者に表示されることを意図されていない情報との両方を含む）を見られるようになる。一実施形態で、コーディングは、マッピングを作成する個人（１人または複数）がマッピングに関する補足コンテンツの選択を終えるまで、提示されない。一実施形態で、マッピングを作成する個人（１人または複数）によって犯された誤り（例えば、専門家によって作られたコーディングからの逸脱）は、マッピングを作成する個人（１人または複数）にその人の問題のあるコーディングの例を示すために追跡され、その結果、その人は、その人にとってよりむずかしいコーディング技法を実践する追加の機会を有するようになる。一実施形態では、上で説明した手法を、これによって専門家がマッピングを作成する個人（１人または複数）によって作られたマッピングを再検討し、確認するか断るか変更する、品質管理のために利用することができる。
アクセス・プロバイダまたはストリーム注釈付けサービス・プロバイダは、すべてのマッピングが、「何を」マッピングすべきか（例えば、イメージがログ記録される前にイメージに何個のセグメントが現れなければならないか）、それを「どのように」マッピングすべきか（例えば、「アクション」対「ロマンス」）、およびマッピングの実際の表記（例えば、「ロマンス」対「ロマンチック」）という本質的な諸態様に関して共通の手法を利用することを保証することが有用であることに気付く場合がある。手法の共通性を容易にするために、マッピングを作成する個人（１人または複数）は、特定の標準についてトレーニングを受ける必要がある場合がある。一実施形態で、１人または複数の個人（例えば、アクセス・プロバイダまたはストリーム注釈付けサービス・プロバイダの従業員）が、メディア・ストリームを同時に見、適当な補足コンテンツを作成し、マッピングし、かつ／または主題に関する適当な情報もしくはメディア・ストリームに関する他の情報を追加する（例えば、「ロマンス」ではなく「アクション」としてメディア・ストリームの特定のセグメントをログ記録する）。一実施形態で、複数の個人が、同一のメディア・ストリームのマッピングを作成するが、最終的なマッピングは、個人の過半数による選択によって決定される（例えば、２人の個人が、メディア・ストリームのあるセグメントを「アクション」として指定し、８人の個人が、同一セグメントを「アドベンチャ」として指定した）。代替案では、任意の人数の個人によって実行されるマッピング（潜在的に、複数の個人が同一プロジェクトに関して共同作業することを簡単に可能にするためにインターネットの能力を利用する）が、別の個人にまとめて提示され、この別の個人は、提案されるマッピングの中から「選別」して、最終的な正式のマッピングを選択する。一実施形態で、このマッピングは、その後、全体としてまたは部分的に、再検討およびコメントのために１つまたは複数の第三者に（例えば、メディア・ストリームを作成したコンテンツ作成者、その補足コンテンツがマッピングに含まれる広告主などに）提供される。
一実施形態で、各メディア・ストリームは、マッピングの作成に関して共同作業する個人の誰もが、マッピングが関連付けられる同一メディア・ストリームからの複数のセグメントを見ないことを保証するために、ログイン・システムを用いて複数のセグメントに分割される。これは、例えば、マッピングを作成する個人の「極度の疲労」を避けるため、またはプロット・ポイントの暴露を避けるために有用である可能性がある。
一実施形態で、オンライン・システムは、個人のチームがマッピングの作成において共同作業することを可能にする。一実施形態で、ログイン／ログアウト・システムは、すべてのマッピング作業が維持されるが、以前のマッピング・セッションからの変更が示されることを保証する。一実施形態で、マッピングを作成する個人は、彼らがマッピングに関して行う判断に関してお互いのためにメモを残す能力を与えられる。
図７は、本発明による、メディア・ストリームに注釈を付ける方法７００のもう１つの実施形態を示す流れ図である。具体的に言うと、方法７００は、コンテンツ作成者、販売者、または広告購入者が、補足コンテンツへのセグメント識別子のマッピングを作成することによってメディア・ストリームに注釈を付けることを可能にする（例えば、中間当事者によるマッピングが不要である）。一実施形態で、方法７００に従ってメディア・ストリームに注釈を付けるコンテンツ作成者は、個人（例えば、スタジオまたは放送会社ではなく）であり、あるいは視聴者ですらある。したがって、一実施形態で、方法７００は、ストリーム注釈付けサービス・プロバイダ１１２またはアクセス・プロバイダ１０６で実施される。ユーザが彼ら自身のメディア・ストリームを作成し、注釈を付けることを可能にする実施形態のさらなる議論を、アクセス・プロバイダによって提供されるサービスの文脈で述べるが、当業者は、そのようなアプリケーションを、その代わりに例えばストリーム注釈付けサービス・プロバイダまたは他のタイプのサービス・プロバイダによって提供できることを了解するであろう。
方法７００は、ステップ７０２で初期化され、ステップ７０４に進み、ここで、方法７００は、メディア・ストリームを受け取る。このメディア・ストリームは、例えば、コンテンツ作成者１０２が提供することができる。一実施形態で、このメディア・ストリームは、最終的なメディア・ストリームである（すなわち、生のビデオが、編集ステップおよび他の制作ステップを受け終えている）。一実施形態で、このメディア・ストリームは、ＭＰＥＧなどのデジタル・フォーマットで受け取られる。一実施形態で、メディア・ストリームの受け取りは、第１ファイル・フォーマットから第２ファイル・フォーマットへのトランスコーディングを含む（例えば、ＭＰＥＧからＦｌａｓｈすなわち米国カリフォルニア州サン・ノゼのＡｄｏｂｅ，Ｉｎｃ．社によって供給されるビデオ・フォーマットへ）。一実施形態で、メディア・ストリームの受け取りは、そのメディア・ストリームのセグメント識別子に関連付けられたメタデータの受け取りをも含む（例えば、シーン変化、「ムード」変化、ショット変化、または類似物を示す）。この情報は、後に、識別されたセグメントに関連付けるべき補足コンテンツを選択する際に有用である可能性がある。
一実施形態で、方法７００は、実質的にリアル・タイムで（すなわち、メディア・ストリームが撮影されつつあるときに）メディア・ストリームを受け取る。これは、方法７００が、販売者に、彼らの物品がある種の認識可能なタグ付け方式（例えば、上で述べたＲＦＩＤタグ）に従ってタグ付けされる場合に、その物品が撮影されつつあるときに知らせる（例えば、事前に登録されたアカウントに自動化電子メール通知を送信することによって）ことを可能にする。これは、シーンの「ラフ・カット」を販売者に表示することをも可能にし、その結果、販売者は、物品がどのように使用されているのかを見ることができ、より実質的な広告（すなわち、マッピングされた補足コンテンツの形の）のために支払いたいかどうかを判定できるようになる。
ステップ７０６で、方法７００は、メディア・ストリームに関連付けられる補足コンテンツ（例えば、コンテンツ作成者によって指図されまたは要求された）を受け取る。一実施形態で、そのような関連付けは、メディア・ストリームの時間セグメントに関して行われる（例えば、メディア・ストリームの最初のｘ分を識別するセグメント識別子Ｘが、補足コンテンツＹに関連付けられる）。もう１つの実施形態では、関連付けは、メディア・ストリームに含まれる（またはメディア・ストリームと共に供給される）メタデータに関して行われる（例えば、セグメント識別子、キュー・ポイント、または類似物によって定義されるセグメントを識別するセグメント識別子）。一実施形態では、メディア・ストリームの共通のセグメントに関連する補足コンテンツの複数のアイテムが、個別に関連付けられるのではなく、セットとして関連付けられる。したがって、メディア・ストリームの所与のセグメントに関連付けられる補足コンテンツは、補足コンテンツの１つのアイテムほどに少数を、または補足コンテンツの複数の個々のアイテムほどに多数を含むことができる。
一実施形態で、補足コンテンツは、テキスト、オーディオ、ビデオ、マルチメディア・プレゼンテーション、写真または他のイメージ、ｕｎｉｆｏｒｍ ｒｅｓｏｕｒｃｅ ｌｏｃａｔｏｒ（ＵＲＬ）、コンピュータ・アプリケーション、データ、コメント、および広告コピーを含むがこれらに限定はされない任意の形のコンテンツを含む。
さらなる実施形態で、補足コンテンツは、視聴者による対話的参加を可能にし、１つまたは複数のモダリティ（コンピュータ・マウス、キーボード、もしくは他の入力デバイス上のキーまたはボタンを押すこと、音声認識テクノロジによって処理される言葉による要求、動き認識システムによって処理される表す動き、または類似物）を使用して視聴者が開始できる要素を含む。そのような視聴者対話性を可能にする補足コンテンツの一例が、主補足コンテンツに関連する副情報またはサービスを受け取ることへの関心を視聴者が示すことを可能にする補足コンテンツである（例えば、「このＤＶＤについてさらに知り、割引クーポンを受け取るには、ここをクリックしてください」）。他の例は、視聴者が、特定の問題に関する投票を登録し、ディスプレイ・デバイス上で「ショート・カット」コントロール（例えば「カー・チェイスまで早送りするにはここをクリックしてください」または「「もう一度見る」にはここをクリックしてください」など、特定のシーンへのメディア・ストリームの前進を可能にするコントロールなど）をアクティブ化し、あるいは主表示画面または副表示画面のいずれかで置換メディア・ストリームまたは相補的メディア・ストリームを見る（例えば、メディア・ストリームを代替メディア・ストリームに置換するか、補足表示画面で代替メディア・ストリームを提示する）ことを可能にすることを含む。
さらなる実施形態では、補足コンテンツは、特定のイベントの発生時に自動的に処理されるかアクティブ化されることを意図された命令、コマンド、または他の情報を含む。例えば、そのような命令は、セットされた時間期間の間にメディア・ストリームを「一時停止し」（例えば、メディア・ストリームによって気を散らされずに視聴者が補足コンテンツを見ることを可能にするために）、あるいは、補足コンテンツの特定のアイテムが、ある処理（例えば、アニメーション全体の提示）を完了するまで、または視聴者が特定の選択を行う（例えば、質問に応答して「ｙｅｓ」または「ｎｏ」を答える）までディスプレイ・デバイスの早送り機能を「ロックする」ことができる。他の例は、ディスプレイ・デバイスまたはメディア・プレイヤの特定の「スキン」（すなわち、特定のグラフィカル「ルック・アンド・フィール」）を利用する命令、または補足コンテンツと独立のある種の情報またはアプリケーションの提示をアクティブ化するか指示する命令（視聴者の電子メール・システムを開くなど）を含む。
いくつかの実施形態で、補足コンテンツは、メディア・ストリームに関連付けることができるが、第三者のウェブ・サイトに常駐する場合があるものなどの独立のプロセスまたはシステムを識別するかアクティブ化することを意図された、キーワード、タグ、命令、他の識別する情報、または他のインデクシング情報を含む。例えば、スノーボード製造業者のあるブランドを指定する一意識別子（おそらくは、納税者番号、ＵＲＬ、またはアクセス・プロバイダによって割り当てられる別の番号）が、補足コンテンツ内に埋め込まれている場合に、メディア・ストリームがウェブ・サイト上で見られるときに、そのウェブ・サイトの適当な処理システムが、その特定のスノーボード製造業者に関連するバナー広告を選択し、表示するために、その識別子を処理することができる。
いくつかの実施形態で、補足コンテンツは、関心を持たれている主題の識別および取り出しで援助することを意図された、キーワード、タグ、命令、他の識別する情報、または他のインデクシング情報を含む。このタイプの主題タグ付けに現在利用されている多くの方法は、タグが、一般に、メディア・ストリームの関連するセグメントだけにより特定に適用されるのではなく、メディア・ストリーム全体に全体的に適用されるという事実に起因して、最適未満である。例えば、アフリカ旅行の３０分のホーム・ビデオをビデオ・アクセス・プロバイダにアップロードし、そのビデオ全体の主題を説明するのに一般化された単語を利用するユーザは、「アフリカ」および「旅行」としてそのようなビデオにタグを付ける可能性が高いが、視聴コミュニティにとってのそのようなタグ付けの価値の多くは、そのビデオが、３分の日没のキリマンジャロのビデオ、６分のンゴロンゴロ・クレーターのビデオ、１３分のセレンゲティのビデオ（そのうちの１０分はライオンに焦点を合わせ、３分はキリンに焦点を合わせている）などを含むという事実にある可能性がある。本発明は、タグを、メディア・ストリームによって伝えられる情報を識別するためにフレーム単位ほどに特定に適用できるので、タグ付けに対する優れた手法を提供する。
本発明のさらなる実施形態は、特定のタイプの情報の識別において助けるために、ユーザがコンテンツ・タグの特定のカテゴリを識別することを可能にする。そのような分類されたタグ付けは、メディア・ストリームのオーディオ部分（例えば、ビデオ内で述べられる主題）から導出されるかそれに関連するタグを「オーディオ導出」タグとして区別すること、メディア・ストリーム内に現れるイメージから導出されるかそれに関連するタグを「イメージ導出」タグとして区別すること、メディア・ストリームの全般的なムードから導出されるかそれに関連するタグを「ムード導出」タグとして区別すること、および類似物によって特定のタイプのコンテンツを検索する能力を可能にすることによって、検索機能性を改善する。これは、視聴者が、例えば、キリマンジャロに関するイメージ導出タグと共に「地球温暖化」のトピックに関するオーディオ導出タグを検索することを可能にする。一特定の実施形態では、イントラストリーム・コンテンツ・タグが適用される特定のメディア・ストリーム・セグメントの「サムネイル」表現を生成でき（例えば、キリマンジャロを表すビデオのフレームの小さいイメージ）、このサムネイルを、他のユーザが得る検索結果内でそれらのユーザに提示することができる。
補足コンテンツのさらなる実施形態は、コンテンツ作成者、視聴者、アクセス・プロバイダ、ある種の補足コンテンツの投稿者、および／または注釈付きメディア・ストリームがホスティングされるウェブ・サイトまたはサービスの所有者の間または中などの商取引を容易にするのに有用なデータを含む。例えば、コンテンツ作成者は、そのコンテンツ作成者によって提供されたものとして特定のメディア・ストリームまたは補足コンテンツの特定のアイテムを識別する一意識別子を含め（例えば、おそらくはそのコンテンツ作成者に関連するアカウント番号を利用して）、その結果、そのコンテンツ作成者が、そのような投稿を行ったことについてアクセス・プロバイダによって正しく「評価され」得るようになることを望む場合がある。他の例は、支払い機構（例えば、コンテンツ作成者の銀行口座支店コード）、手数料情報（例えば、視聴者がコンテンツ作成者によって投稿された補足コンテンツを介して取引を完了する場合にコンテンツ作成者に支払われる特定のパーセンテージ料金）、料金情報（例えば、補足コンテンツのある種のアイテムが見られるたびにコンテンツ作成者に支払われる料金）、および類似物に関連する情報を含む。
補足コンテンツの他の実施形態は、補足コンテンツの所与のアイテムが提示された回数を記録するデータ・テーブルなど、変数データを含む。例えば、メディア・ストリームが、補足コンテンツの特定のアイテムの提示をアクティブ化するのに必要な長さの時間にわたって表示されるたびに、変数データ・フィールドを更新して、その「視聴」を登録することができる。その後、このデータを、アクセス・プロバイダ内の他のシステムから使用可能にし、詳細な追跡する分析および報告（補足コンテンツの特定のアイテムが指定された時間期間中に特定の視聴者によって見られた回数の追跡など）を容易にすることができる。
いくつかの実施形態で、補足コンテンツは、「家庭向け」メディア・コンテンツ、「武器関連」広告コンテンツ、「成人向け」コンテンツ、および類似物を識別する記述子など、注釈付きメディア・ストリームの性質の記述子を含む。この情報は、そのようなタイプの情報の視聴または他のアクセスを制限するために、個々の視聴者または他者によって、あるいは自動化フィルタリング・システムおよび類似物によって、使用することができる。
一実施形態で、補足コンテンツは、注釈付きメディア・ストリームの視聴者に可視になることを意図される（ほとんどの広告コピーに関してそうであるように）。もう１つの実施形態で、補足コンテンツは、視聴者には間接的にのみ明白になることを意図される（メディア・ストリームに対する補足コンテンツの影響だけが視聴者に明白になる、上で説明した「ディスプレイ・デバイス・コントロールまたはメディア・プレイヤ・コントロール」タイプの補足コンテンツのうちのいくつかについてそうであるように）。もう１つの実施形態で、補足コンテンツは、視聴者に不可視になることを意図される（主題識別子、取引容易化データ、および類似物からなる補足コンテンツに関してそうであるように）。
上で説明した補足コンテンツのタイプのすべてを、様々な組合せで一緒にすることができる。例えば、補足コンテンツの混成アイテムを、（１）メディア・ストリームの一時停止および（２）メディア・ストリームの視聴者が特定の問題に関する投票を登録することの可能化のために、補足コンテンツの個々のアイテムのサブセットを組み合わせることによって作成することができる。
一実施形態で、補足コンテンツの第１のアイテムを、補足コンテンツの第２のアイテムに依存するようにすることができる。例えば、補足コンテンツの第１のアイテムが、メディア・ストリームが成人聴衆向けであることを伝える場合に、補足コンテンツの第２のアイテムを、特定のタイプの広告を提示するようにプログラムすることができる。さらなる実施形態では、補足コンテンツのアイテムを、補足コンテンツの第１のアイテムとの視聴者対話に依存するようにすることもできる。例えば、補足コンテンツの第１のアイテムが、メディア・ストリームを一時停止する補足コンテンツの個々のアイテムと、視聴者が特定の問題に関する投票を登録することを可能にする補足コンテンツの個々のアイテムとを組み合わせることによって作成された混成アイテムである場合に、補足コンテンツの第２のアイテムが、メディア・ストリームを、そのメディア・ストリームのうちで登録される投票に最も関連する部分に早送りする命令を提供することができる。
さらなる実施形態で、補足コンテンツを、特にアクセス・プロバイダのために作成することができる（例えば、特定の製品またはカスタムｅ−ｃｏｍｍｅｒｃｅ店舗へのｕｎｉｆｏｒｍ ｒｅｓｏｕｒｃｅ ｌｏｃａｔｏｒ（ＵＲＬ）ハイパーリンクに関する、アクセス・プロバイダと共に配置される情報）。その代わりに、補足コンテンツを、コンテンツ作成者自身によって販売のために作成され、かつ／または提供される物品（例えば、ガレージ・バンド自身のＤＶＤ）など、物品の特定のセットをショーケースに展示するために作成することができる。もう１つの実施形態では、補足コンテンツは、アクセス・プロバイダとは独立の先在する情報またはサービス（例えば、公衆ウェブ・エンサイクロペディアのエントリまたはｅ−ｃｏｍｍｅｒｃｅウェブ・サイト）を含む。
一実施形態では、主補足コンテンツが、主補足コンテンツと同一範囲の情報および／または機能性からなる副補足コンテンツにリンクされる。そのような副補足コンテンツは、例えば、主補足コンテンツを置換することによって（すなわち、視聴者が表示画面の特定の区域の上にカーソルを置き、追加情報が提示されるときなどの「ロール・オーバー」）、別々の表示区域内に副補足コンテンツを提示することによって、または関連するウェブ・ページへの別々のウェブ・ブラウザを開くことによってなど、様々な手段によって提示されることを意図されたものとすることができる。
一実施形態で、補足コンテンツは、メディア・ストリームの作成者によって作成される。もう１つの実施形態で、補足コンテンツは、メディア・ストリームの作成者によって、補足コンテンツのライブラリ（例えば、ストリーム注釈付けサービス・プロバイダ１１２またはメディア・ストリーム・アクセス・プロバイダによって提供される）から選択される。一実施形態で、補足コンテンツのライブラリは、事前に承認された広告情報を含む。補足コンテンツのライブラリは、任意の個数のエントリ（すなわち、特定の物品、人、概念などに関する）からなるものとすることができ、各エントリは、関連する補足コンテンツの任意の個数のアイテムからなるものとすることができる。各エントリおよび／または補足コンテンツの各アイテムは、上で説明した補足コンテンツを構成するものと同一範囲の情報および／または機能性からなるものとすることができる。例えば、所与の物品のライブラリ・エントリには、物品の商業的イメージおよび／または非商業的イメージ、物品に関するテキスト情報またはオーディオ情報、物品に関する短い「コマーシャル」、リアル・タイムで物品を買うためのハイパーリンク、物品の小売価格、または他の第三者のアプリケーションもしくは他の広告を含めることができる。このコンテンツは、販売者１１０および／または広告購入者１０８との提携を介して入手することができる。
さらなる実施形態では、物品のライブラリ・エントリは、物品をメディア・ストリーム内で描かせ、かつ／またはマッピングを介して物品を補足コンテンツに関連付けさせる（例えば、おそらくはメディア・ストリームのコンテンツもしくはジャンルまたは類似物などの指定された要因を条件として）ために物品の提供者（例えば、販売者）が支払うつもりのある金額を含む。これは、コンテンツ作成者が、最大の商業的価値をもたらす物品を識別するために、あるパラメータに従って「店を見てまわる」ことを可能にする。例えば、コンテンツ作成者が、ある俳優がメディア・ストリームの特定のセグメントでサングラスを身に付けて描かれることを知っている場合に、そのコンテンツ作成者は、ライブラリ内にリストされたすべてのタイプのサングラスを検索し、特定のサングラスを身に付けたその俳優を撮影することの相対価値（例えば、ブランドＸは、そのサングラスを配置させるためにブランドＹより多くを支払うつもりでいる）またはその代わりに任意の個数のサングラスのブランドに関する補足情報とのメディア・ストリームの関連付けを潜在的に容易にする「包括的」サングラスを身に付けたその俳優を撮影することの相対価値を調べることができる。一実施形態で、方法７００は、販売者がメディア・ストリーム内の物品のプレースメントに入札できる、オークションタイプの環境を提供することができる。例えば、図４４に、メディア・ストリーム４４０４に現れる所与の物品４４０２（例えば、スキー帽）に関連する補足コンテンツのアイテムを提供する能力が様々な販売者に競売で売られる例示的シナリオ４４００を示す。図示されているように、その物品を配置させるために最も多く支払うつもりの販売者（例えば、販売者Ｂ）によって投稿された補足コンテンツのアイテムが、最終的なマッピング４４０６のために選択される。
さらなる実施形態では、物品のライブラリ・エントリは、注釈付きメディア・ストリームの視聴者に関する物品の人気に関する追跡されるデータ（例えば、物品ごとまたはメディア・ストリームごとに受け取られるクリック・スルーの回数）を含む。これは、コンテンツ作成者が、メディア・ストリームと補足コンテンツとの間の関連付けをより有効に作成することを可能にする。さらなる実施形態では、物品のライブラリ・エントリが、他の類似する物品または代替物品を推薦する。これは、コンテンツ作成者が、例えば、メディア・ストリーム内で描くのに最も有効な物品を識別し（例えば、物品Ｘの補足コンテンツが、物品Ｙの補足コンテンツの２倍の視聴者を引き付ける）、あるいは、検討されなかった可能性がある他の有効な関連付けを識別する（例えば、物品Ａの補足コンテンツを見る視聴者が、物品Ｂの補足コンテンツをも見る傾向がある）のを助ける可能性がある。もう１つの実施形態では、物品のライブラリ・エントリは、人口統計識別子（例えば、「若く流行に敏感」、「懐かしのメロディ」、「１０代の反逆者」など）を含む。これらの人口統計識別子は、自動的に提供することができ、あるいは、ライブラリのユーザがカスタマイズすることができる。
一実施形態で、ライブラリは、複数の方法による簡単な検索／ブラウジングのために編成される。例えば、ライブラリ内のコンテンツを、階層構造（例えば、男性の衣類、スポーツウェア、スキーウェア、ジャケット、ダウン・ジャケット）、キーワード（例えば、ブランド名または物品名）、最も最近の追加／アップロード、最も人気のある物品（オプションで、年齢、性別、アフィニティ・グループなどの人口統計によって編成される）、関連する販売者が支払うつもりのあるパーセンテージ手数料（例えば、コンテンツを最初にリストさせるためにｘドル）、またはメディア・ストリームの説明によって暗示される通りに（例えば、キーワード）に従って編成することができる。一実施形態で、ライブラリは、ユーザが、ドラッグ・アンド・ドロップ、チェック・ボックス、物品番号入力、または物品番号選択という方法のうちの少なくとも１つによってメディア・ストリームとの実際のまたは潜在的な関連付けのために補足コンテンツを選択することを可能にする。
一実施形態で、補足コンテンツのライブラリは、そこから補足コンテンツが導出された第三者ソース（例えば、図１の販売者１１０などの販売者）に「ライブ・リンク」され、これによって、ライブラリをできる限り最新状態のままにすることが可能になる。例えば、第三者ソースによって投稿された補足コンテンツのアイテムを含むライブラリ・エントリを、投稿者の製品在庫、価格設定、またはマーケティングの変更に応答して自動的に更新することができる。そのような「プレースホルダ」には、例えば、第三者ウェブ・サイトから情報を入手するのに自動化された「ボット」を使用することによって（例えば、オンライン分類広告サイト上で売りに出されているすべてのギターをプルすることによって）、あるいは、データ所有者によって提供されるＡＰＩを介してリモートでホスティングされるデータベースを参照することによって（例えば、ウェブ・サービスＡＰＩを介してオンライン・オークション・サイトの「現在のオークション」データベースにアクセスすることによって）投入することができる。
一実施形態で、補足コンテンツの第三者ソースは、「値引き」指向コンテンツ、「贅沢」指向コンテンツ、「ローカルに入手可能」指向コンテンツ、または外国語指向コンテンツなど、特定のタイプの補足コンテンツの提供に特化することができる。
一実施形態では、ライブラリのうちで所与の販売者（例えば、商人、供給業者、または製造業者）の物品に関連する部分は、その販売者がライブラリのめいめいの部分を安全に更新することを可能にするパスワード保護されたシステムを介してその販売者からアクセス可能にされる。さらなる実施形態では、ライブラリ内のエントリを有する物品を、撮影済みであり、方法７００が実行されるアクセス・プロバイダによって視聴者に現在提示されている物品にリンクすることができ（下でより詳細に説明するように）、その結果、アクティブ・マッピングを更新して、新しい情報を反映できるようになる。一実施形態で、販売者が特定の物品に関連するエントリをライブラリから除去するときに、通知（例えば、自動的にまたは販売者によって許可された個人によって作成される）が、除去される物品に関連付けられたメディア・ストリームを提供したコンテンツ作成者に送信される。一実施形態で、除去されるエントリに関連付けられたメディア・ストリーム内のすべての注釈が、自動的にメディア・ストリームの視聴者から「不可視」またはアクセス不能にされる（しかし、関連付けは、メディア・ストリームを提供した当事者によって承認されるまで、除去されず、変更されない）。
一実施形態で、所与の物品のライブラリ・エントリに含まれる補足コンテンツの個々のアイテムには、生情報（例えば、所与の物品の特定の価格、「ブランドＸのＭＰ３プレイヤ−３ＧＢ」などのその物品の特定の名前、購入達成のための特定のＵＲＬ、または類似物）、様式化された情報（例えば、複数の異なるフォントを使用して提示される所与の物品の名前、または同一の物品の複数の異なるイメージ）、混成コンテンツ（例えば、視聴者が購入の機会にアクセスすることを可能にするための埋め込まれたＵＲＬを含む様式化された「今すぐ購入」イメージなど、補足コンテンツの単一のアイテムを形成するために組み合わされる、生情報および様式化された情報などの補足コンテンツの個々のアイテムの組合せ）、あるいはコンパイルされた情報（例えば、包括的エントリを形成する、生情報、様式化された情報、および混成情報の様々な組合せ）など、様々なカテゴリの情報を含めることができる。
ライブラリ内のエントリに、補足コンテンツの特定のアイテムの選択または作成に直接には関連しない機能性を含めることができる。例えば、所与のライブラリ・エントリ内で、ライブラリ・ユーザが、補足コンテンツのある種のアイテムが展開されているすべてのメディア・ストリームの要約（おそらくは、メディア・ストリームの「サムネイル」表現またはある他の形の要約データを介する）を見ることを可能にすることができる（すなわち、特定のライブラリ・エントリへの訪問者が、そのライブラリ・エントリに含まれる補足コンテンツのアイテムのうちの一部またはすべてを展開したすべてのメディア・ストリームを見ることができるようになる）。
一実施形態で、ライブラリ・エントリは、複数の異なる特性またはデータのいずれかの、補足コンテンツの個々のアイテムへの割当を容易にする「プレースホルダ」を含む。例えば、複数の異なる販売者が、同一ブランドの靴を提供する場合があり、類似するエントリを「グループ化」することによってユーザのためにライブラリを単純化するために、ライブラリをホスティングするサービスが、特定の靴を単一のライブラリ・エントリの下にリストすることを選択することができる。しかし、その靴を提供できる販売者の数のゆえに、このエントリは、その靴を提供するものとしてライブラリ・ホストにそれ自体を識別した多数の販売者に対処できる必要がある。この機能を容易にするために、ライブラリ・エントリに、補足コンテンツの任意の個数の同等のアイテムからなるか、なんらかの形でそれにリンクされる「プレースホルダ」を含めることができる。補足コンテンツの同等のアイテムを、優先順位付け階層内に配置することができ、その結果、補足コンテンツの同等のアイテムのうちのある種のアイテムが、おそらくは特定のルールまたは命令を参照することによって決定されて、優先順位を有するようになる。例えば、上で説明した靴の例では、「販売者の名前」に関連するプレースホルダが、補足コンテンツの３つの同等のアイテムすなわち、販売者１の名前、販売者２の名前、および販売者３の名前を参照する場合がある。３つの販売者名を、優先順位付け階層内に配置し、ある種の他の条件が満足されない限り（この場合には他の販売者のうちの１つの名前が表示される）、ユーザがそのライブラリ・エントリにアクセスするときに（かつ／またはそのライブラリ・エントリが補足コンテンツの特定のアイテム内で実施されるときに）、販売者１が、デフォルトとして「販売者の名前」として表示されるようにすることができる。そのライブラリ・エントリにアクセスするユーザは、マッピングの作成において、補足コンテンツの単一のアイテムにアクセスし、これを選択し、利用することができる（おそらくは、補足コンテンツの複数の異なる同等のアイテムが関連するプレースホルダにリンクされることを知りさえせずに）。補足コンテンツの同等のアイテムは、異なるカメラ・アングルから撮影された同一製品の複数の写真など、補足コンテンツの同一の基本アイテムの複数の変形形態からなるものとすることもできる。その場合に、ユーザは、補足コンテンツの同等のアイテムのうちの特定の１つまたは複数を選択することを可能にされるものとすることができる。
もう１つの実施形態で、複数の異なる販売者によって異なる価格で提供される単一の製品に関するものなど、複数のライブラリ・エントリを、特定の製品に関してライブラリ内で使用可能にすることができる。このライブラリ・エントリを、様々な判断基準に従って編成し、グループ化することができる（例えば、「低価格」広告または「在庫あり」広告を含む補足コンテンツ、広告コンテンツではなく補足ブランディング・コンテンツ、音楽ありまたは音楽なしの補足コンテンツ、グラフィックスが重い補足コンテンツ、特定の人口統計、地理、または言語をターゲットとする補足コンテンツ、および類似物）。本明細書で前に述べたように、ライブラリ・エントリおよびそれに含まれる補足コンテンツのアイテムは、広告またはコマーシャル材料を含む必要はない（例えば、芸術的表現、ソフトウェア「ミニアプリ」などのアイテムからなるものとすることができる）が、それでも、例えば「字幕」、「アニメーション」、または「写真」などのより抽象的なまたは一般的な見出しの下での、ライブラリの階層編成内に含めることができる。
所与のライブラリ・エントリに含まれる補足コンテンツのアイテムは、ライブラリをホスティングするサービス、ライブラリのユーザ、特定の広告主、またはオンライン・マーチャンダイザおよびオンライン・アグリゲータの「アフィリエイト」プログラムを含む任意の個数のソースから来るものとすることができる。ライブラリ・エントリまたはそれに含まれる補足コンテンツのアイテムをライブラリに含めること、および／またはライブラリ・エントリの「プレースメント」優先順位付けは、アクセス・プロバイダと補足コンテンツの所与のアイテムまたはアイテムのグループの投稿者（例えば、あるクラスのライブラリ・ユーザに対して製品のライブラリ・エントリが顕著に特別扱いされることを望む、特別扱いされる製品の製造業者）との間で折衝される料金に基づく階層など、様々な優先順位付け階層の参照に依存するものにすることができる。そのような料金は、直接に（例えば、ライブラリ・エントリが特定のカテゴリ内のすべての検索結果の先頭に現れることに関するフラット料金）または間接に（例えば、販売者が、アクセス・プロバイダによって販売者のサイトに向けられた顧客に売られた各製品に関してアクセス・プロバイダに比較的より高いフラットレートおよび／またはパーセンテージの手数料を支払うことに合意した場合に、アクセス・プロバイダのライブラリ・エントリの提示に関する優先順位付け階層は、その情報を考慮に入れることができる）請求することができる。
ライブラリまたはその諸部分を、広告主、「アーティスト」、アクセス・プロバイダ内で形成されるユーザ・グループ、および類似物を潜在的に含む任意の個数の組織または個人によって作成し、または集めることができる。例えば、特定の製造業者が、その製造業者の製品オファリングに関連するライブラリ・エントリだけを投入されたライブラリを作成することができる。販売者は、その販売者の特定の店舗で入手可能な物品に関連するライブラリ・エントリだけからなるライブラリを作成することができる。「有名人」または他者が、彼らが関心を持つライブラリ・エントリからなるライブラリを作成することができる（例えば、ロック・スターが、「お気に入り」ライブラリを作成することができる）。一部のライブラリは、慈善団体によって生成することができ、そのライブラリの使用からアクセス・プロバイダまたは他者によって引き出される収入の一部を、その慈善団体とわかち合うことができる。個人ユーザが、他の先在するライブラリまたは彼ら自身の投稿からのライブラリ・エントリからなる彼ら自身のライブラリを作ることもできる。
これらの様々なタイプのライブラリのいずれをも、すべてのユーザによる使用に公開し、ある種の使用に関してのみ公開し（例えば、見るために公開するが、変更のためには公開しない）、あるいは、許可されたユーザのグループ内でプライベートに保つことができる。ライブラリまたはそのサブセットを作成するために費やされた分析および労力を認めて、特定のライブラリ・エントリへのアクセスおよび／またはその使用を、プレミアム・サービスとして提供し、ユーザが、料金の支払の後またはある種の条件（あるレベルの視聴者人気を生成したメディア・ストリームの作成または配信など）を満足した後に限って所与のライブラリからのライブラリ・エントリにアクセスできるようにすることができる。さらに、ライブラリの作成者は、彼ら自身のライブラリに含めるためにライブラリ・エントリをコピーすることを望む他者に料金を請求することができ（例えば、ロック・スターＡが、彼のブランド付きライブラリに含まれるライブラリ・エントリから引き出されるすべての取引に対して１％の手数料を請求することができる）、あるいは、ライブラリの作成者は、ある成功パラメータを満足できないすべてのライブラリ・エントリ（例えば、ユーザの指定されたパーセンテージまたは人数より少ないユーザによってアクセスされるか使用されるライブラリ・エントリ）（または、それに含まれる補足コンテンツの個々のアイテム）を除去するなど、ある他の制約を課すことができる。
アクセス・プロバイダは、例えばユーザのシステム上で使用されるダウンロード可能なソフトウェア・プログラムの形でまたはネットワークを介してアクセスされるホスティングされるサービス（アクセス・プロバイダまたは第三者によって提供される）として提供することによって、ライブラリ（例えば、アクセス・プロバイダのより包括的なライブラリのサブライブラリ）を作成する際にユーザを援助するツールを提供することができる。例えば、アクセス・プロバイダは、ユーザが特定の背景色、写真、およびそのユーザが望む他の情報を選択することによって「彼の」ライブラリをカスタマイズすることを可能にすることによって、ユーザがより大きいライブラリ内の「ホーム・ページ」を作成することを可能にするツールを提供することができる。
アクセス・プロバイダは、例えばユーザのシステム上で使用される１つまたは複数のソフトウェア・プログラムの形でまたはネットワークを介してアクセスされるホスティングされるサービス（アクセス・プロバイダまたは第三者によって提供される）として提供することによって、ライブラリ・エントリを作成する際にユーザを援助するツールを提供することができる。そのようなツールには、様々なユーザによってセルフサービスの基礎で投稿されるデータの中での一貫性を保証する様々な手段を含めることができる。例えば、そのようなツールは、ユーザによって完成される様々な特定のカテゴリの補足コンテンツ・アイテムのフィールド（例えば、ユーザが特定の名前およびドル額を供給しなければならない、販売者名のフィールドおよび価格のフィールド）を含む「テンプレート」ライブラリ・エントリのメニューまたは他の均一な提示を提供することができる。さらに、そのようなテンプレートを、「ｐｒｏｄｕｃｔ＿ｐｉｃｔｕｒｅ（製品写真）」、「ｒｅｔａｉｌ＿ｐｒｉｃｅ（小売価格）」、および類似物の均一なアイテムなど、補足コンテンツの特定のアイテムに関して利用することができる。この種の一貫性を保つことによって、アクセス・プロバイダは、サービスの全ユーザによって使用でき、それらのユーザの間で共有できるが、それでも個人の創造性を許容する方法およびプロセスを提供することを可能にされる。さらに、そのようなツールは、補足コンテンツの複数のアイテムおよび／またはアクセス・プロバイダと独立のソースによって提供されるデータの間の「ライブ・リンク」をユーザが作成することを可能にすることができる。アプリケーション・プログラミング・インターフェースＡＰＩの共通のセットを使用可能にすることによって、アクセス・プロバイダは、ユーザがライブラリ・エントリ内に補足コンテンツのある種のアイテム（例えば、製品広告アイテム内の小売価格アイテム）を埋め込むことを可能にすることができ、補足コンテンツのそのようなアイテムは、そのようなＡＰＩおよび／または他の入力パラメータを介して対話することを可能にされたユーザのシステムまたは第三者のシステム内のそのようなデータのソースにアクセスできるはずである。また、これらのツールは、全体としてのライブラリのオントロジ内の特定のエントリのカテゴリ（例えば、運動靴）を識別するなど、ライブラリ・エントリを検索することを可能にするための「分類」デターミナのメニューまたは他の均一なプレゼンテーションを提供することができる。
当業者に明白であるとおり、本明細書で説明するライブラリ機能性のすべての態様（例えば、ホスティング、作成、アクセスの提供、更新など）は、そのような情報を１つまたは複数のメディア・ストリーム・アクセス・プロバイダ、ストリーム注釈付けサービス・プロバイダ、個々のユーザ、関心を持つ第三者（例えば、特定のライブラリ・エントリがどのように使用されているかを調査することに関心を持つ広告会社）、および類似物から使用可能にする第三者によって提供することができる。
ライブラリ・エントリおよび／またはライブラリ・エントリを含む補足コンテンツのアイテムを、おそらくは補足コンテンツの投稿者（１人または複数）、他のユーザ、またはアクセス・プロバイダによって「ロック」することができ、その結果、ライブラリ・エントリまたはライブラリ・エントリを構成する補足コンテンツのアイテムを、ユーザまたはユーザの特定のクラスによって直接に見られ、編集され、再定式化され、かつ／または再フォーマットされ得ないものにすることができる（例えば、「新規」ユーザをライブラリ・エントリの編集から除外することができる）。その代わりに、ライブラリ・エントリまたは補足コンテンツのアイテムを、制約を一切伴わずにユーザの望み通りに利用する（例えば、製品のイメージを使用するが価格は使用しない）ためにユーザまたはユーザのサブセットに「開かれた」ままに保つことができる。
各ライブラリ・エントリ（またはその中の補足コンテンツの個々のアイテム）を、オントロジ内に配置し、その結果、情報をより簡単に突き止め、再検討できるようにすることができる。例えば、特定のライブラリ・エントリ内の補足コンテンツのアイテムのうちの１つが、特定の製品の「小売価格」であるときに、補足コンテンツのこのアイテムに、小売価格情報であるものとしてライブラリによってタグを付けるか、他の形で識別することができる。補足コンテンツのアイテムのタグ付けは、オンラインまたはオフラインのタグ付け情報の特定のセット（例えば、タグ「Ｒｅｔ＿Ｐｒｉｃｅ＿Ｃｕｒｒｅｎｔ（現在の小売価格）」に対してコーディングされるものとして小売価格情報を識別する「オントロジ・リスト」）への参照を介して個々の投稿者によって、すべてのライブラリ投稿者が特定のフォームまたはテンプレートを使用して入力することを要求することによって（補足コンテンツの個々のアイテムがシステムによって自動的にタグ付けされ、例えば、フォームの「小売価格」フィールドに入力されるデータが小売価格としてタグ付けされるようにするために）、あるいは、補足コンテンツの様々なアイテムの特性を判定するために生データの分析を利用する自動化されたテクノロジを使用することによって（例えば、システムに、通貨記号「＄」または「£」に続くすべての数字が「小売価格」になるようにラベルを付けるように指示することができる）など、任意の個数の形で行うことができる。
ライブラリ・エントリは、補足コンテンツの他のアイテムのある種の特性またはプロパティを記述するために、ライブラリ・エントリ内の補足コンテンツの他のアイテムのすべてに関連付けられるように指定される補足コンテンツのアイテムからなるものとすることができる。この機能性は、補足コンテンツの１つまたは複数のアイテム内のある種の記述的特性をライブラリ・エントリ内に埋め込むことによって、ライブラリ・エントリ内の補足コンテンツのすべての他のアイテムと対にされるかそれに埋め込まれる補足コンテンツの１つのアイテムをライブラリ・エントリに追加することによって、あるいは、特定のライブラリ・エントリについて別々であるが、ライブラリ全体の中のある種のタイプの補足コンテンツのすべてのアイテムに埋め込まれるかそれと対にされる補足コンテンツのアイテムを追加することによってさえ、使用可能にすることができる。この相補タイプの補足コンテンツは、ユーザによって見られ、かつ／または編集されることを意図されたものであってもなくてもよい。例えば、商業的な製品オファリングに関連するライブラリ・エントリに関して、補足コンテンツの相補アイテムの追加は、ライブラリ・エントリ内の補足コンテンツのすべての個々のアイテムが「商業的」補足コンテンツ（例えば、芸術指向またはコメント指向の補足コンテンツではなく）として識別されるように組み込まれる、補足コンテンツのすべての混成アイテムをもたらすことができる。補足コンテンツの他のそのようなアイテムは、「家庭向け」コンテンツ、「武器関連」コンテンツ、「成人向け」コンテンツ、または類似物を識別することができる。例えば、アクセス・プロバイダは、そのような識別するデータを参照して、補足コンテンツを「ロック」しなければならない（例えば、「成人向けコンテンツ」エントリ内の補足コンテンツのアイテムのすべてが、補足コンテンツのアイテムを成人向けコンテンツに関連するものとして識別するシグニファイヤを埋め込まれ、その結果、ある年齢より若いユーザがそのような補足コンテンツにアクセスできず、見ることができなくなることを保証するために）かどうかを判定することができる。
ライブラリ・エントリが、なんらかの理由で（または理由の特定のカテゴリのみについて）ライブラリから除去された場合、またはその代わりに、ライブラリ・エントリが、アクセス・プロバイダまたはライブラリ・エントリ投稿者によって「保留」にされた場合に、そのライブラリ・エントリに含まれる補足コンテンツのアイテムが、潜在的に視聴者に提示されるメディア・ストリームに関連付けられた後に、補足コンテンツの関連するアイテムに関連付けられたメディア・ストリームを提供したか配信したすべてのユーザに通知を送信することができる。そのような通知は、人が実行するか、自動的に作成する（例えば、自動化された電子メール通知またはウェブ・アナウンスメントを介して）ことができる。そのようなリンクされた実施形態では、「死んだ」ライブラリ・エントリ（すなわち、もはや最新ではないかもはや特定の情報ソースによって提供されない情報を含むライブラリ・エントリ）を、自動的にデフォルト情報（例えば、物品の包括的クラスに関する情報またはライブラリ・エントリがもはや使用可能ではないことを述べるアクセス・プロバイダからのメッセージ）に置換することができ、あるいは、ライブラリから完全に除外することができる。これらのケースのそれぞれで、ユーザまたはユーザの様々なサブカテゴリに、そのような変更または、そのユーザが以前に関心を持っていることを示した（例えば、「このエントリに対して変更が行われたときに通知を受けたい場合には「Ｙｅｓ」をクリックしてください」）特定のライブラリ・エントリに対する更新などの他の変更について、自動的に通知することができる。一実施形態で、ライブラリ・エントリまたはそれに含まれる補足コンテンツのアイテムが除去されるか、他の形で疑わしい物にされたならば、そのライブラリ・エントリまたは補足コンテンツのアイテム（一実施形態で、補足コンテンツの所与のアイテムを組み込んだ補足コンテンツの混成アイテムを含む）のすべての使用は、自動的にライブラリの視聴者から「不可視」にされ（例えば、アイテム２が除去される場合に、アイテム３がアイテム１に続く）、あるいは、「デフォルト」画面に置換されるが、マッピングのうちで補足コンテンツのアイテムをメディア・ストリームに関連付ける部分は、メディア・ストリームの作成者によって承認されるか変更されるまでは、実際には除去されない。コンテンツ作成者が見るディスプレイは、補足コンテンツの関連付けられたアイテムを表示し続けるものとすることができるが、このディスプレイは、補足コンテンツのアイテムがもはや視聴者に不可視であることをグラフィカルに示すようにマークすることができる（例えば、赤い×をオーバーレイする）。その代わりに、コンテンツ作成者に、ある種の条件の下で提示される補足コンテンツの「代替」アイテムを含めるオプションを与えることができる（例えば、日付Ｘまでは補足コンテンツのアイテムＡを提示し、その後、アイテムＢを提示する命令）。
ライブラリに投稿される補足コンテンツのアイテムを、すべてのイメージが同一のデータ・フォーマット（例えば、．ｇｉｆまたは．ｊｐｆ）であることを保証する、ある種のパラメータ（例えば、イメージのサイズまたは最大サイズ・フォント）が満足されることを保証する、または著作権保護のためにウォーターマークもしくは他の要素をすべての写真に埋め込むなど、様々な目的で様々なプロセスによって、自動的にまたは投稿者の要求時のいずれかに、再定式化し、再フォーマットし、または他の形で変更することができる。
一実施形態で、ライブラリ・エントリの投稿者は、ライブラリ・エントリ、カテゴリ、またはライブラリ内の補足コンテンツのある種のアイテムを「公開する」か「ロックする」ことを許可されるものとすることができる（例えば、他の投稿者は、ライブラリ・エントリ内の補足コンテンツの様式的アイテムを変更することだけを許可され、補足コンテンツの製品関連アイテムを変更することを許可されないものとすることができる）。例えば、あるライブラリ・エントリの最初の投稿者は、他の投稿者が補足コンテンツの代替の「スタイル」アイテムを提供することを許可する（例えば、補足コンテンツのある種のアイテムの背景色およびフォントを変更することを許可する）ことによって、ライブラリ・エントリ内の「スタイル」アイテムを「公開する」が、他の投稿者が製品イメージ、小売価格、および実際の広告コピー内の代替アイテムを提供するのを防ぐことによって、これらのカテゴリ内のアイテムを「ロックする」ことができる。この「ロック」、「アンロック」、または他のタイプの制御されたアクセス機能性は、補足コンテンツの各アイテムまたはそれに関連するテンプレート・フィールドに関するボックスに単純にチェック・マークを付けることによって使用可能にすることができる。
一実施形態で、アクセス・プロバイダまたはライブラリ作成者（１人または複数）は、投稿者の「カテゴリ」を確立することを可能にされ、上で説明したアクセス機能性は、これらの投稿者カテゴリに固有にすることができる。例えば、投稿者の「デフォルト」カテゴリは、補足コンテンツの所与のアイテムに関するコメント（例えば、「緑の背景がより有効であるはずである」）を提供するか、代替案を投稿することを許可されるものとすることができるが、ライブラリ・エントリ内の補足コンテンツのどのアイテムをも実際に変更することは許可されないものとすることができる。アクセス・プロバイダによって特定の許可を与えられた投稿者、またはセットされた個数のライブラリ・エントリの投稿などの様々なアクションを介して、ライブラリ・エントリ内の補足コンテンツのアイテムを直接に編集し、かつ／または削除するか、ライブラリ・エントリ全体を編集し、かつ／または削除することさえ可能にする「管理者」アクセスの資格を与えられ得る投稿者など、投稿者のもう１つのカテゴリ。例えば、「公式」ライブラリを確立する特定の広告主は、コメント投稿だけを許可し、他のすべてのアクセスを、その広告主の従業員またはコンサルタントに指定することができる（例えば、従業員だけが、ライブラリ・エントリの投稿または変更を許可される）。そのようなアクセスは、初期ログイン機能を介して許可することができ、あるいは、アクセスを、パスワードまたは類似物などの様々な他の手段を介して許可することができる。この機能性は、潜在的に特定のライブラリ・エントリ、所与のカテゴリ、またはライブラリ全体に関して、罵倒するユーザを「締め出す」のに使用することができる。
一実施形態で、所与のライブラリ・エントリのすべての以前のインスタンス化のレコード（すなわち、「文書ヒストリ」）を格納し、アクセス可能にすることができる。これらの以前のバージョンは、例えば行われた変更、変更が行われたとき、変更を行った人、そのような変更の状況（例えば、変更が、関連する管理者によって永久的変更として承認されたかどうか）などを追跡する改訂ヒストリに割り当てることができる。一実施形態で、改訂ヒストリは、ライブラリ・エントリを以前の状態に戻すことを可能にする。これは、例えば、特定のライブラリ・エントリが蛮行で破損される場合に有用である可能性がある。この特徴は、あるスケジュールに従ってライブラリ・エントリ「リフレッシュメント」をスケジューリングする能力の容易化（例えば、「最近９０日間に変更されていないすべてのライブラリ・エントリを表示する」）、または複数の当事者の間での協調投稿の容易化（例えば、「最近１０日間にユーザＸによって行われたすべての変更を表示する」）を含む他の理由からライブラリ投稿者に有用である可能性もある。
アクセス・プロバイダは、個々のユーザが、あるタイプの変更またはあるカテゴリの変更が行われるときに通知を提供する（例えば、電子メールを介して）「ウォッチ・リスト」をセットすることを可能にすることができる。例えば、所与のライブラリ・エントリの最初の投稿者が、そのライブラリ・エントリ内のすべての変更について通知を受けることを望む場合があるが、補足コンテンツの所与のアイテムの投稿者（例えば、小売価格の投稿者）が、補足コンテンツのその特定のアイテムが変更されるときに限って通知を受けることを望む場合がある。
ライブラリ・エントリのうちで特定の投稿者（例えば、製品情報を投稿した特定の商人、供給業者、または製造業者、あるいは特定の写真の写真家）に関連する部分を、パスワード保護されたシステムを介してその投稿者だけにアクセス可能にすることができ、その結果、その投稿者は、ライブラリ・エントリの関連部分に含まれる補足コンテンツを保守でき、制御できるようになる。
ライブラリおよびライブラリ・エントリの多くの態様を、ある種の優先順位付け特性に基づいてアクセス・プロバイダによって第三者に割り当てることができる。これらの特性は、とりわけ、ライブラリに投稿する権利、ライブラリ・エントリの分類（例えば、補足コンテンツの特定のアイテムが何個のカテゴリの下にリストされるか）、ライブラリのユーザへのライブラリ・エントリのディスプレイの優先順位付け（例えば、ＭＰ３プレイヤに関するどのライブラリ・エントリが、検索単語「ＭＰ３プレイヤ」に関するライブラリ検索結果の最上部に現れるか）、またはどのライブラリ・エントリが特殊な強調を伴ってリストされるか（例えば、他のライブラリ・エントリからより区別できるものにするためにライブラリ・エントリの周囲に色付きの境界を伴う）のうちの少なくとも１つを含む。これらの判定は、料金を請求することによって（投稿ごとの基礎または例えば「パートナー」料金など、投稿者ごとの基礎のいずれかで）、ティアード・コミッションを請求することによって（例えば、より高い手数料がアクセス・プロバイダに支払われることと引き換えにより高いエントリ優先順位付けを与える）、または以前のライブラリ・エントリの大きさおよび／または成功に報酬を与えることによって（例えば、特定の投稿者のライブラリ・エントリが、高額取引を促進することにおけるその投稿者の以前の投稿の集約成功に基づいて「好ましい」状況を与えられる）を含む様々な手段によって行うことができる。
関心を持たれている特定のライブラリ・エントリの有効な位置付けを可能にするためなど、ライブラリ・エントリを、そのライブラリ・エントリに含まれる補足コンテンツのアイテムの本質的コンテンツに直接に関連してもしなくてもよい任意の個数の形で特徴を表すことができる。一例は、本質的コンテンツに関連しないが、その「目玉となる製品」または「小売価格」補足コンテンツ・アイテムによってライブラリ・エントリの特徴を表し、その結果、例えば、特定の製品の複数のライブラリ・エントリを最低の小売価格から最高の小売価格へリストできるようにする、特徴表現とすることができる。補足コンテンツのアイテムの本質的コンテンツに間接的にのみ関連する特性の一例が、特定のマッピングの作成において関連するライブラリ・エントリのすべてもしくは一部を利用することを選択したユーザの人数または有効な広告であることがわかった補足コンテンツを提供することにおけるライブラリ・エントリの「有効性」（例えば、より高いレートの視聴者関心を誘導する補足コンテンツのアイテムを含むライブラリ・エントリを識別すること）である。
ライブラリの少なくとも一部を、様々な第三者の特定のユーザ・コミュニティに提示するために、アクセス・プロバイダによってこれらの第三者から使用可能にすることができる。例えば、複数のライブラリ・エントリを投稿した販売者が、その販売者自身のウェブ・サイトでこれらのライブラリ・エントリを提示し、その結果、その販売者のウェブ・サイトへの訪問者が、アクセス・プロバイダを使用してマッピングを作成するときにこれらのライブラリ・エントリを利用する機会について知らされるようにすることを望む場合がある。アクセス・プロバイダは、これらのライブラリ・エントリを、第三者がこれらのライブラリ・エントリへのＡＰＩを与えられる「ライブ・リンク」システムを介して使用可能にすることができ、あるいは、ライブラリ・エントリを、更新を必要とする「ダウンロード」として提供することができる。アクセス・プロバイダは、エントリの様々な組合せを、ユーザが関心を持つブランド付きライブラリを作成しようとする第三者（例えば、「１０代指向」広告または「優良」広告を集めるサイト）から使用可能にすることもできる。
ライブラリを、任意の個数の形でアクセスされまたは「検索される」ことを可能にすることができる。例えば、関心を持たれているライブラリ・エントリを、キーワードをタイプすることによって、補足コンテンツのアイテムのカテゴリのいずれかの特性のいずれかによる検索によって（例えば、写真を含むすべてのライブラリ・エントリ、１０．００ドルを超える小売価格を含むすべてのライブラリ・エントリ、匹敵するライブラリ・エントリの上位２０％内の視聴者反応を生成したすべてのライブラリ・エントリをリストする）、ライブラリ・エントリ投稿者の特性によって（例えば、オンライン・ショッピング・サイトによって投稿されたものであるが、サイトＸによるすべてのライブラリ・エントリを除外したすべてのライブラリ・エントリ）、または最新の投稿によって、突き止めることができる。検索特性のいずれをも、任意の組合せで利用することができる（例えば、最近１０日以内に店舗Ａによって投稿されたライブラリ・エントリを示す）。
ある種の第三者が、アクセス・プロバイダ・ライブラリに正式に接続はされないが、アクセス・プロバイダを介して検索でき、かつ／またはアクセスできるライブラリを作成することを望む場合がある。このタイプの配置を容易にするために、アクセス・プロバイダは、これらの第三者が彼らのウェブ・サイトに含め、彼らのライブラリをアクセス・プロバイダによって検索できるようにする、ある種の情報を提供することができる。例えば、オンライン分類広告サイトなどのサイトは、そのポスティングのすべてが、メディア・ストリームに注釈を付けるために使用可能になることを望む可能性があるが、そのサイトは、アクセス・プロバイダに彼らのリスティング情報をコピーすることをそのサイトを使用する人々に強制することを望まない場合がある。そうではなく、このサイトは、アクセス・プロバイダによる検索を可能にするのに必要なコードをそのユーザに提供するか、かつ／またはそのポスティング・テンプレートに埋め込むことができる。
一実施形態で、メディア・ストリームのセグメントを識別する所与のセグメント識別子にマッピングされた補足コンテンツ（補足コンテンツは、補足コンテンツの１個とｎ個との間のいずれかの個々のアイテムを含む）が、潜在的にアクセス・プロバイダまたはコンテンツ作成者によって行われるアクションと組み合わされた、自動化されたプロセスによって少なくとも部分的に選択される。例えば、音声認識テクノロジを使用して、メディア・ストリームの言葉要素のトランスクリプトを生成することができ、コンテンツ作成者は、そのトランスクリプトを論理セグメントに分割することができ、その結果、所与の論理セグメントが、適当な句または文（例えば、字幕）を表す補足コンテンツに割り当てられるようになる。その代わりに、イメージ認識テクノロジを使用して、メディア・ストリーム内に現れるすべての商品のスチール・イメージを生成することができ、コンテンツ作成者は、これらのスチール・イメージを利用して、メディア・ストリームをプロダクト・プレースメント補足コンテンツに関連付けることができる（すなわち、自動化されたプロセスが、ビデオ内に現れるブランドｘの財布のイメージを生成し、コンテンツ作成者が、そのビデオのセグメントを識別するセグメント識別子に、そのコンテンツ作成者によって作成されるまたは補足コンテンツ・ライブラリから抜粋される追加広告コピーをマッピングする）。
一実施形態で、自動化されたツールが、任意の個数のソースからの補足コンテンツの１つまたは複数の個々のアイテムを組み立てることによって補足コンテンツ・アイテムの予め作られた「テンプレート」混成アイテムを投入するために、アクセス・プロバイダまたは他者（例えば、ユーザのグループ）によって使用される。これらのテンプレートには、情報カテゴリの特定のレイアウト（例えば、左側にイメージ、中央にＵＲＬハイパーリンク、右側にもう１つのイメージ）、個々の補足コンテンツ・タイプの特定のレイアウト（例えば、「Ｐｒｏｄｕｃｔ＿Ｎａｍｅ（製品名）」とその後の「Ｒｅｔａｉｌ＿Ｐｒｉｃｅ（小売価格）」）、特定のグラフィカル・フォーマット（すなわち、青および赤の画像の様々な陰影）、および類似物など、補足コンテンツの混成アイテムの１つまたは複数の態様または特性の「プレースホルダ」のある種の組合せを含めることができる。
いくつかの実施形態で、コンテンツ作成者は、アイテムのカテゴリ（例えば、「男性、皮、ベルト、青」）を指定し、方法７００に、マッピング（例えば、方法７００による参照によってまたはコンテンツ作成者によって決定される。ここで、最適の選択は、アクセス・プロバイダまたはコンテンツ作成者によって指図される特定の判断基準を参照することによって行われる）の作成のために選択すべき最適のライブラリ・エントリまたはライブラリ・エントリのコレクションを提案させることができる。最適のライブラリ・エントリ（１つまたは複数）の選択の判断基準には、類似するまたは他のメディア・ストリーム・コンテンツに関連付けられたときにビューあたりの視聴者クリック・スルーの最高レートを有する補足コンテンツを含むライブラリ・エントリ、総クリック・スルーの最高回数を有する補足コンテンツを含むライブラリ・エントリ、このメディア・ストリームおよび／または特定の視聴者人口統計の特定のコンテキストで最高の照会手数料を支払うつもりがあるライブラリ・エントリの投稿者、または当該の他の要因のうちの１つまたは複数などの要因を含めることができる。
補足コンテンツのアイテムは、補足コンテンツのアイテムの全体的な「レイアウト」（例えば、左側の製品イメージ、右側の広告コピー）、異なるフォント、グラフィックス、および類似物を介して暗示される補足コンテンツのアイテムの全体的な「スタイル」（例えば、ヒップホップ対カントリーウェスタン・スタイル）、補足コンテンツのアイテム内で目玉にされる特定の製品または製品カテゴリ、「カラー・スキーム」（例えば、テキストおよび背景の赤および黄などの「ホット」カラー対青および緑などの「クール」カラー）、および類似物など、任意の個数の属性によって特徴を表すことができる。一実施形態で、アクセス・プロバイダは、ユーザが補足コンテンツの同一の基本的な混成アイテムの複数の変形形態を見る（例えば、例えば補足コンテンツ属性のうちの１つまたは複数に対する変更に起因して補足コンテンツの各混成アイテムが異なる、混成補足コンテンツ・アイテムのセットを見ることによって）ことを可能にすることによって補足コンテンツ・ライブラリのユーザがマッピング・プロセスを合理化することを可能にするツールを提供する。例えば、ブランドＸのＭＰ３プレイヤに関連するライブラリ・エントリに見られる補足コンテンツのアイテムを使用してマッピングを作成しているユーザは、同一の製品イメージを含むが、複数の異なる解像度、サイズ、または背景色を伴う補足コンテンツの混成アイテムを見ることを、あるいは複数の異なるフォントで提示される製品に関するテキスト情報を伴う補足コンテンツの混成アイテムを見ることを望む場合がある。各変形形態は、潜在的に、他の潜在的な変形形態のすべてと同時に見ることができ（例えば、スクロールするビュー・スクリーンを介して）、あるいは、個別に見ることができる（例えば、「次の変形形態を見るためには「次」を押してください」のようにシーケンシャルに）。
一実施形態で、本発明は、コンテンツ作成者に質問のプロンプトを出し、その後、コンテンツ作成者の反応を質問と突き合わせる代替案を提供することによって、所望の補足コンテンツ変形形態（例えば、ライブラリ・エントリまたはそれに含まれる補足コンテンツの特定のアイテム）の選択を助ける指導付き選択プロセスへのアクセスをコンテンツ作成者に与える。例えば、コンテンツ作成者に、そのコンテンツ作成者が背景の「よりホットな」背景色対「よりクールな」背景色および製品の「写真」イメージ対「グラフィカル」イメージのどちらを好むかを指定するためにプロンプトを出すことができ、その後、この情報を使用して、コンテンツ作成者の検討、さらなる変更、および／または選択のために関連する変形形態を提供する。代替案では、コンテンツ作成者に、「ＡまたはＢを選択してください」オプションを介して選択を高速化する機能性を与えることができ、その結果、選択の個数は、最も望まれる選択にすばやく効率的に切り詰められるようになる。例えば、最初の選択は、背景色に焦点を合わせることができ、最適の色が決定されたならば、Ａ／Ｂ選択プロセスが、最も好まれるイメージの選択の管理に進む。このツールは、コンテンツ作成者が、選択が行われる順序（例えば、背景色選択肢を提示する前に、イメージ・オプションの範囲を通る）を選択することを可能にすることができる。そのような選択ツールは、コンテンツ作成者との以前の対話または匹敵する状況の下の他のユーザとの以前の対話の分析に基づいてコンテンツ作成者のオプションを作成する機械学習技法を利用することができる。例えば、機械学習は、所与の特性を有する補足コンテンツ（例えば、ピーナッツ・バターを目玉にする広告）が、しばしば、ある他の特性を有する補足コンテンツ（例えば、ゼリーを目玉にする広告）に関連して展開されることを識別することができる。
一実施形態で、コンテンツ作成者は、「ドラッグ・アンド・ドロップ」ツール、ボックスにチェック・マークを付けることによって、アイテム番号をタイプすることによって、および類似物の任意の組合せを使用して、関心を持たれている特定のライブラリ・エントリまたは補足コンテンツの特定のアイテムを単純に選択することによって、補足コンテンツをマッピングすることができる。
アクセス・プロバイダは、事前に作られた補足コンテンツ（個々のまたは混成の）をユーザからアクセス・プロバイダに簡単かつ有効に配送し、またはアップロードすることを可能にするためにツールを提供することができる。そのようなツールは、様々な形の情報をユーザによってアクセス・プロバイダに提供することを可能にすることができ、アクセス・プロバイダは、様々なプロセスを使用して、この情報を変換し、その結果、この情報を、追加のカスタマイゼーション（例えば、ユーザによって実行されるか、アクセス・プロバイダによって視聴者に提示できる補足コンテンツのフォーマットおよび属性と一貫する）に利用できるようになる。例えば、アップロードされた補足コンテンツの混成アイテムの．ｊｐｇフォーマット・イメージ・コンポーネントを、．ｇｉｆフォーマットに変換することができ、補足コンテンツの同一の混成アイテム内のテキスト情報に使用される特定のフォントをも、．ｇｉｆフォーマットに変換することができ、両方の．ｇｉｆファイルが、アクセス・プロバイダによって使用されるメディア・ストリーム・プレイヤによって処理できる補足コンテンツの単一の混成アイテムに変換される。この変換プロセスは、ユーザがアップロードされる補足コンテンツの異なるアイテムをすばやく識別できるようにするメニュー・システムによって、またはアップロードされる補足コンテンツのアイテムを分析し、そのアイテムの属性を判定する自動化された検出プロセスによって、援助することができる。識別が完了したならば、補足コンテンツのアイテムは、最終的な形態（下で詳細に述べるように、同期化プロセスまたはマッピング・プロセス中に利用でき、最終的に視聴者に提示される）について補足コンテンツのアイテムを準備する必要に応じて様々なプロセスを受けることができる。
一実施形態で、アクセス・プロバイダは、ユーザ（例えば、コンテンツ作成者および他のユーザ）が、補足コンテンツの彼ら自身のアイテムを作成することを可能にする。そのような機能は、ユーザがそのユーザ自身で作った補足コンテンツのアイテムを投稿することまたは第三者から入手した補足コンテンツのアイテムを投稿することを可能にすることを含む、任意の個数の形で使用可能にすることができる。さらなる実施形態では、ユーザは、全体として単一の統一されたライブラリ・エントリ（例えば、補足コンテンツの十分に完全なアイテムを含むライブラリ・エントリまたはそのコンポーネント）を選択すること、または補足コンテンツの他のアイテムをライブラリから追加することによってアクセス・プロバイダによって提供される補足コンテンツのアイテムをカスタマイズすること（例えば、補足コンテンツの新しい混成アイテムを作成するため）を可能にされる。
一実施形態で、ユーザは、マッピングのために補足コンテンツのカスタマイズされたアイテムを作成するために、潜在的にユーザ自身の投稿と一緒に、様々な形で補足コンテンツ・ライブラリから入手した補足コンテンツのアイテムを組み合わせることを可能にされる。ユーザは、全体としてライブラリ・エントリに含まれる補足コンテンツの混成アイテムを使用することを選ぶ（すなわち、補足コンテンツの「事前に作られた」混成アイテム全体を選択する）ことができ、あるいは、補足コンテンツのカスタマイズされた混成アイテムを組み立てるために、潜在的にそのユーザによって作成された追加材料と共に、ライブラリ・エントリからまたは補足コンテンツの混成アイテムから補足コンテンツの様々な個々のアイテムを選択することができる。例えば、所与のライブラリ・エントリを、ブランドＸのＭＰ３プレイヤに関するものとすることができる。ブランドＸによって供給される「公式」ライブラリ・エントリは、そのＭＰ３プレイヤの特定のモデルの複数のイメージ、そのＭＰ３プレイヤの物理的特性および性能特性に関する情報、そのＭＰ３プレイヤの価格、店頭ウェブ・サイトへのリンク、および潜在的購入者に関係がある可能性がある他の類似する情報を含む可能性がある。ユーザは、このライブラリ・エントリから補足コンテンツの１つまたは複数の個々のアイテムを選択し、それらの個々のアイテムをそのユーザが作成した追加コンテンツ（すなわち、グラフィカル・イメージ、賢い発言、補足コンテンツが関連付けられるメディア・ストリームへの参照など）と組み合わせて、マッピング用の補足コンテンツの最終的な混成アイテムを作成することができる。補足コンテンツの個々のアイテムを、組み合わせて利用することができる。例えば、ユーザは、第三者から入手した補足コンテンツの相対的に包括的なアイテム（例えば、ガレージ・バンドによって提供されるＣＤに関する補足コンテンツのアイテム）をアップロードし、次に、アクセス・プロバイダによって提供されるツールを利用して、そのユーザ自身のコンテンツ（例えば、バンドのロゴのグラフィカル・イメージ）および複数のライブラリ・エントリから選択された補足コンテンツのアイテム（例えば、「コマーシャル」として補足コンテンツの完成した混成アイテムの特徴を表す補足コンテンツのアイテム、および視聴者がＣＤの購入の機会にアクセスすることを可能にする「ボタン」イメージおよびＵＲＬハイパーリンクからなる補足コンテンツのアイテム）によって補足コンテンツの包括的アイテムを補足することができる。
一実施形態で、補足コンテンツの自動的に選択されるアイテムの関連性は、メディア・ストリームが適当な広告の機会に関連するときのそのメディア・ストリームの全般的主題（例えば、地球温暖化ビデオは、「自動車の買い方」材料としてよりも「環境」材料としてよりよく識別することができる）、メディア・ストリーム内に現れる１つまたは複数の物品のアイデンティティ（例えば、特定のハイブリッド自動車）、および／またはメディア・ストリームを見る可能性が高い徴集の人口統計特性（例えば、成人、２５歳以上など）など、最小限の量の情報を提供するようにユーザに求めることによって改善される。この最小限の量の情報を入手するために、ユーザに、様々な形の入力のいずれかを求めることができる。例えば、ユーザに、アクセス・プロバイダによって提供される選択肢のリストから１つまたは複数のボックスに単純にチェック・マークを付けるように求めることができる（ここで、カテゴリ選択を、特定のライブラリ・エントリ・カテゴリにリンクすることができる）。これらの追加入力は、既存の方法より優れた自動化された広告割当をサポートするはずである。というのは、上で説明した最小限の量の人間の入力さえ、完全に自動化されたシステムよりはるかに正確な自動化されたシステムに焦点を合わせるからである。したがって、ユーザの側での最小限の追加の労力を要求することによって、マッピングのために最終的に選択される補足コンテンツの関連性（したがって、ユーザ経験の質および生成される収入）を高めることができる。
この選択プロセスは、例えば、ユーザが、メディア・ストリーム・コンテンツ（例えば、ジャンル）、ターゲット聴衆人口統計、そのユーザ自身の人口統計、またはそのユーザによって定義されるキーワード／コンテンツ・タグについて問い合わされるように、「メニュー駆動」システムまたは「ウィザード」システムに編成することができる。「専門家」ユーザは、より複雑であるがより柔軟またはより効率的な追加機能にアクセスすることを可能にされるものとすることができる。一実施形態で、ユーザに、入力プロセス内の任意の点で停止するオプションを与えることができ、その停止する点までに提供された入力だけが、補足コンテンツ・ターゲティング目的に利用される（自動化されたまたは他のタイプの選択システムによって）。例えば、ユーザに、「季節に関する補足コンテンツ」という全般的カテゴリを含む初期メニューを提示することができる。ユーザは、そのカテゴリに関連するボックスに単純にチェック・マークを付け、そのユーザが追加情報を提供することを望まないことを示すことができる。その代わりに、このユーザに、その後に、「クリスマス関連補足コンテンツ」を含むサブメニューを提示し、次に、「コメディ補足コンテンツ」（例えば、「センチメンタル補足コンテンツ」ではなく）を含む別のサブメニュー、次に「子供用補足コンテンツ」を含む別のサブメニュー、次に「トナカイを伴う補足コンテンツ」を含む別のサブメニュー、次に特定のトナカイのイメージを含む別のサブメニュー、次に特定の背景色を含む別のサブメニューなどを提示することができる。このプロセスのどの点でも、ユーザは、追加入力を提供しないことを選択でき、システムは、使用可能な情報に基づいて補足コンテンツを選択する。
代替案では、ユーザが、メディア・ストリームを見る可能性が高い人口統計分類（例えば、「子供」対「成人」）またはメディア・ストリームの全般的な主題カテゴリ（例えば、「コメディ」対「スポーツ・クリップ−サッカー」）など、分類選択のメニューに入力するか、分類選択のメニューから選択することができ、方法７００は、ユーザに、その聴衆向けの最もよく売れている商品を目玉にした補足コンテンツのアイテムを与えることができる。
この方法は、ユーザによって選択された補足コンテンツの初期アイテム（１つまたは複数）に基づいて、補足コンテンツの追加アイテムを提案することもできる。一実施形態で、この提案は、ユーザの集約にまたがって選択される補足コンテンツのアイテム（例えば、「補足コンテンツのこのアイテムを選択したユーザが、補足コンテンツのこれらの他のアイテムをも選択した」）との比較に基づく。
上で説明した異なる識別オプションまたは分類オプションのそれぞれを、単独でまたは他のオプションとの任意の組合せで使用することができ、上で説明したそのような選択プロセスの出力は、マッピングに使用可能な補足コンテンツの最終的なアイテム（個々のまたは混成の）またはさらなるカスタマイゼーションをサポートすることを意図された補足コンテンツの単なる「出発点」アイテムのいずれかの識別をもたらすことができる。例えば、そのプロセスが特定の製品に関連する補足コンテンツの初期アイテムを識別することができるが、特定の背景色またはフォントを選択するためなど、ある範囲の可能なイメージから製品の特定のイメージを選択することによって、補足コンテンツのアイテムをさらにカスタマイズするようにユーザに促すことができる。
ユーザが補足コンテンツの所与のアイテム内に埋め込むことを望む可能性がある情報の１タイプ（または、潜在的に、補足コンテンツの特定のアイテムからのそのような情報は、全体としてマッピング対応メディア・ストリーム用のデータ・ファイル内に埋め込まれる）は、補足コンテンツに関連するある種の条件に関するデータなど、マッピングによってアクセスされるデータに基づいて補足コンテンツのある種の態様を変更する命令である。一実施形態で、ユーザは、この特定の目的のためにアクセス・プロバイダによって提供される特定の入力によってトリガされるある種の命令を補足コンテンツ内に埋め込むことができる。例えば、第三者ウェブ・サイトは、ウェブ・サイトの訪問者には不可視であるが、そのウェブ・サイト上で見られる補足コンテンツ内の適当な応答を「トリガする」データのセットを表示することができる（例えば、そのようなデータに、補足コンテンツの属性がそのウェブ・サイトのスタイルと一致するようにするためのそのウェブ・サイトの「支配的な色」、１０代を主にターゲットにするウェブ・サイトなど、そのウェブ・サイトにアクセスする「全般的な世代グループ」、または主メディア・ストリームからではなく補足コンテンツから発するサウンド・エフェクトを可聴にする特定の音量を含めることができる）。
もう１つの実施形態で、埋め込まれる命令は、第三者ウェブ・サイトまたはユーザとの直接の対話またはデータの交換なしで、アクセス・プロバイダによって入手される情報によってトリガされる。この情報は、マッピングを作成するためにコンテンツ作成者によって利用されたテンプレート内に埋め込むことができ、ユーザが直接にまたは承知の上でマッピングに含めた情報である必要はない。例えば、マッピングされる補足コンテンツの所与のアイテム内に埋め込まれる命令は、補足コンテンツのアイテムに供給される情報（例えば、おそらくはメディア・ストリーム・プレイヤによって生成される、またはおそらくは方法７００のトランスコーディング・ステージ中に生成される）の自動的アクセスを要求することができ、補足コンテンツの背景色が、その補足コンテンツがマッピングされたセグメント識別子によって識別されるメディア・ストリームの時間セグメントの全般的なカラー・スキームとより一貫するように変更されるようになる（例えば、メディア・ストリームが夜のシーンを表す場合に、アクセス・プロバイダによって展開されたビデオ処理システムは、原色が抑えられていることを検出でき、この情報は、補足コンテンツの背景色が「淡黄色」のデフォルト色ではなく「暗い青」にセットされることをトリガするはずである）。もう１つの例として、アクセス・プロバイダによって展開されたメディア・ストリーム・プレイヤは、そのメディア・ストリーム・プレイヤおよび注釈付きメディア・ストリームが展開されたウェブ・サイトの全般的なカラー・スキーム、主題、または聴衆を判定し、それ相応に補足コンテンツを調整するために、そのウェブ・サイトによって提示されるＨＴＭＬデータを「読み取る」ことができる。
コンテンツ作成者がマッピング内または補足コンテンツの所与のアイテム内に含めることができる情報の１つのアイテムが、補足コンテンツのその所与のアイテムが提示されなければならない視聴者の特定のタイプに関する情報である。この特徴は、例えば、メディア・ストリームの所与の時間セグメントに関連して、ユーザが、あるタイプの視聴者に補足コンテンツの第１アイテムを示し、異なるタイプの視聴者に補足コンテンツの第２アイテムを示すことを好む（例えば、「視聴者が男性の場合にはアイテムＡを示し、視聴者が女性の場合にはアイテムＢを示す」）情況で使用することができる。この機能を容易にするために、コンテンツ作成者は、補足コンテンツのアイテム（潜在的にメディア・ストリームの同一の時間セグメントに関連して提示される補足コンテンツの他のアイテムではなく）をアクティブ化することが意図される視聴者人口統計を識別する「デターミナ情報」（例えば、視聴者に関する人口統計情報に基づいて行われる判定）を補足コンテンツのアイテム内または補足コンテンツのそのアイテムを含むマッピング内に含めることができる。１つまたは複数のデターミナを、アクセス・プロバイダによって提供される潜在的特性のリストからのある組合せをコンテンツ作成者に選択させることによって、補足コンテンツの所与のアイテム内または所与のマッピング内にコンテンツ作成者によって含めることができる（例えば、ユーザは、年齢範囲を挿入し、性別タイプに関するボックスにチェック・マークを付け、最低視聴者収入レベルを確立することなどを可能にされる）。
デターミナのこの「包括的」リストを、特定のウェブ・サイトなどの特定のコンテキスト内の視聴者について既知の（すなわち、生成され、収集され、または推量された）特定の情報に、アクセス・プロバイダによって（ユーザに可視であってもなくてもよい形で）リンクすることができる。包括的デターミナと特定のウェブ・サイトのコンテキスト内のそのようなデターミナの対応物との間のこのリンケージは、多数のウェブ・サイトが特定の視聴者に関するデータを収集するが、通常はそのような分類を分類する均一の形がないので、有用である。したがって、アクセス・プロバイダが、データのそのような分類および関連する包括的デターミナへのリンクの単一の更新されたインベントリを保つことを可能にすることによって、正しいプロセスが、各ウェブ・サイトで使用可能にされる。これは、また、ユーザが、異なるサイトで同一の基本的プロセスをアクティブ化するために複数の異なるコードを提供する必要をなくすか減らす。例えば、ウェブ・サイトＡが、その訪問者（ウェブ・サイトＡで提示されるメディア・ストリームの視聴者を含む）の収入レベル、年齢、および性別へのアクセスを有するが、ウェブ・サイトＢが、訪問者の年齢情報へのアクセスだけを有する場合がある。もう１つの例として、ウェブ・サイトＡが、年齢の範囲（例えば、２５歳から３０歳まで）として訪問者年齢データを収集するが、ウェブ・サイトＢが、特定の年齢（例えば、２８歳）を収集する場合がある。そのようなコンテキストで、アクセス・プロバイダは、補足コンテンツの特定のアイテムが、各ウェブ・サイトで視聴者に関して使用可能なできる限り多くの情報を引き出すように、人口統計デターミナ（ユーザによって提供される）をリンクするはずである。例えば、デターミナは、ウェブ・サイトＡによって提供される広い年齢範囲情報ならびに、ウェブ・サイトＢによって提供される特定の年齢情報を処理すると同時に、ウェブ・サイトＢに関する他のデターミナのすべてを、これらの他のデターミナがウェブ・サイトＡによって使用可能にされていないという事実に起因して破棄することができる。このタイプの機能性を使用可能にすることは、コンテンツ作成者にとって有利である。というのは、コンテンツ作成者が、彼らの注釈付きメディア・ストリームが示される可能性がある各特定のウェブ・サイトの情報を探すことを要求されないからである（アクセス・プロバイダが正しい人口統計デターミナを既にリンクしている限り）。このタイプの機能性を使用可能にすることは、視聴者にとっても有利である。というのは、視聴者が、より関連する補足コンテンツを与えられるからである。最後に、このタイプの機能性を使用可能にすることは、アクセス・プロバイダおよび注釈付きメディア・ストリームが現れるウェブ・サイトにとって有利である。というのは、このタイプの機能性が、優れた視聴経験およびより高いレベルの視聴者対話をもたらし、これが、コンテンツの貨幣化の増加につながると期待されるからである。
上で説明したように、補足コンテンツの所与のアイテムまたはマッピングの所与の部分の特定の属性を、視聴位置、デバイス・タイプ、視聴者人口統計などに関して条件付きにすることができる手法に加えて、属性を、過去の視聴者挙動（例えば、「視聴者が、前に補足コンテンツ・アイテムＡをＸ回を超えて提示されたか？」）、集約視聴者統計、またはランダム選択などの要因を条件とするものにすることもできる。
一実施形態では、上で述べたように、補足コンテンツの単一のアイテムに、異なる属性またはコンポーネント（例えば、補足コンテンツの混成アイテム内で組み合わされる補足コンテンツの複数の個々のアイテム）を含めることができ、特定の視聴者への特定の属性またはコンポーネントの表示が、コンテンツ作成者によって確立されるある種のルールに依存するようにされる（例えば、「価格」属性が、３０歳を超える年齢の視聴者だけに表示されるが、他のすべての視聴者には、「広告コピーの３行」属性が提示される）。そのような「イントラコンテンツ」カスタマイゼーションに加えて、ある種の実施形態では、メディア・ストリームと補足コンテンツの（潜在的に異なる）アイテムとの間の複数のマッピングを作成することができる。そのような複数のマッピングは、メディア・ストリームＳを、例えばソーシャル・ネットワーキング・ウェブ・サイトに埋め込まれる場合の補足コンテンツの第２セットではなく、ブログに埋め込まれる場合に補足コンテンツの第１セットと共に表示することを可能にする。その後、下で説明するように、適当なマッピングＭ１またはＭ２が、注釈付きメディア・ストリームのポスティング位置に従って、視聴者への提供のために選択される。さらに、異なるマッピングを、異なる視聴デバイスでの表示のために提供することができる（例えば、マッピングＭ１は、フルサイズのコンピュータ・モニタ上で見るユーザに表示され、マッピングＭ２は、電話機または携帯情報端末などのポータブル・デバイス上で見るユーザに表示され、マッピングＭ３は、テレビジョン・セット上で見るユーザに表示される）。さらに、異なるマッピングを、特定の視聴者人口統計に関する表示のために提供することができる（例えば、マッピングＭ１は、１０代女性視聴者に表示され、マッピングＭ２は、１０代男性視聴者に表示され、マッピングＭ３は、「デフォルト」マッピングとしてすべての他の人口統計特性を有する視聴者に表示される）。
例えば、ダイヤモンド・ネックレスを目玉にする補足コンテンツの広告アイテムをマッピングしているコンテンツ作成者は、女性に「自分にご褒美！」をテーマにした補足コンテンツのアイテム、男性に「彼女に愛情を示すには」をテーマにした補足コンテンツのアイテムを提示することを望む場合がある。補足コンテンツの関連アイテムの提示を容易にするために、コンテンツ作成者は、マッピングされたメディア・ストリームの特定の時間セグメントに関連して提示されることを意図された補足コンテンツのアイテムの「セット」を指定することができる。補足コンテンツのアイテムのこのセットは、補足コンテンツの複数のアイテムが同一のセグメント識別子（メディア・ストリームの同一のセグメントを識別する）にマッピング済みであるかそれにマッピングされる可能性があることを示す「プレースホルダ」として働く補足コンテンツのもう１つのアイテムに割り当てることができる。そのようなプレースホルダ指定は、直接命令（例えば、補足コンテンツの関連アイテムのそれぞれの１つの「バスケット」への「ドラッグ・アンド・ドロップ」）または間接命令（例えば、補足コンテンツの複数のアイテムを共通のセグメント識別子にマッピングすることによって）によるものとすることができる。コンテンツ作成者は、次に、補足コンテンツのアイテムのどれが特定のコンテキストで提示されるかを規定するルール、命令、および／または判断基準を示すことができる。上で述べたように、これらのルールは、視聴者の特定の特性（例えば、年齢、性別）、主メディア・ストリームが表示されているデバイスの技術的特性／性能特性（例えば、テレビジョン対セル電話機）、または注釈付きメディア・ストリームが表示されているウェブ・サイトの性質（例えば、「子供指向」ウェブ・サイト対「スポーツ指向」ウェブ・サイト）に頼ることができる。
さらに、やはり上で述べたように、補足コンテンツのアイテムの指定を、任意の個数の要因を条件とするものにすることができる。例えば、複数の属性（または、メディア・ストリームの特定のセグメント用の補足コンテンツの複数のアイテム）を、（１）ある視聴者がメディア・ストリームを見た回数、（２）すべての視聴者または視聴者のサブセットによってメディア・ストリームが見られた合計の回数、（３）視聴者がマッピング内の補足コンテンツの前に関連付けられたアイテムをクリックするか他の形で関心を示したか否か、（４）視聴者の平均視聴時間（例えば、視聴者が通常はポストされたメディア・ストリームの最初の３０秒だけを見る場合など）、（５）視聴者が関心を持つ物品のタイプまたは視聴者が最もよく反応する補足コンテンツの「スタイル」（例えば、広告コンテンツ）などの要因に関する視聴者の明示されたまたは学習されたプリファレンス、（６）補足コンテンツのアイテムが最初に提示されたとき以降に経過した時間の実際の長さ（ある日数の間に限って「売り出される」関連付けられた製品に関してなど）、および（７）ランダム選択という補足コンテンツのアイテムの特定の属性のどれを提示すべきかに関する選択と共に提供することができる。
補足コンテンツのアイテムの選択を決定するすべての条件要因は、特定の強調を達成するために（例えば、他の要因が考慮され、処理される前に、ある視聴者に補足コンテンツの同一アイテムを少なくともＸ回提示するなど）、重要性の階層内に配置するか、他の形で「重みを付ける」ことができる。これらの要因およびめいめいの重要な重み付けは、セットされたプラン（潜在的に、コンテンツ作成者によって決定され、あるいはアクセス・プロバイダによって確立される標準によって決定される）に従って、またはランダムに（結果は、補足コンテンツの特定のアイテムに対する視聴者クリック・スルーのレートなど、特定の判断基準に関する視聴者の反応を最適化するのに必要な調整を容易にするために収集され、分析される）のいずれかで変更することができる。重み付けの複数の異なる組合せを、視聴者反応（視聴者がメディア・ストリームに与えるレーティングまたは補足コンテンツの特定のアイテムのクリック・スルー・レートによって測定されるものなど）に対する影響を観察するため、およびその影響情報を使用して最適重み付けおよび／または将来の視聴者に提示される補足コンテンツの最適アイテムを選択するために利用することができる（潜在的に、ユーザによってまたはアクセス・プロバイダによって確立され、あるいは異なる重み付けを適用するようにプログラムされたシステムによって自動的に確立されることさえある）。
一実施形態で、補足コンテンツのアイテムを、補足コンテンツのアイテムが、補足コンテンツの他のアイテムを優先して置換される前に表示されなければならない時間期間によって分類することができる。例えば、補足コンテンツの所与のアイテムを、２月６日米国東部標準時午後６時３０分に放送されるフットボール・ゲームなどのテレビジョン放送されるイベント用の広告とすることができる。「満了」日付を、広告に関して２月６日米国東部標準時午後５時にセットすることができ、その時刻の後には、補足コンテンツの選択された置換アイテムが、視聴者に表示されるようになる（あるいは、潜在的に、広告が完全に除去される）。
アクセス・プロバイダにとってのさらなる利益、コンテンツ作成者にとってのさらなる利益、ならびに広告主および販売者にとってのさらなる利益を、補足コンテンツの特定のアイテムではなく、それに関して補足コンテンツのある範囲の潜在的アイテムから選択された補足コンテンツの特定のアイテムが特定のコンテキストで選択され、視聴者に表示される、補足コンテンツの包括的製品「タイプ」アイテム（例えば、プレースホルダ）の選択を可能にすることによって提供することができる。例えば、包括的プレースホルダには、特定の製品のＵＰＣ（統一商品コード）、ＧＴＩＮ（Ｇｌｏｂａｌ Ｔｒａｄｅ Ｉｔｅｍ Ｎｕｍｂｅｒ）、または製品用の同等の一意識別子だけを含めることができる。次に、広告主および販売者は、補足コンテンツの特定のアイテムをその特定のＵＰＣ、ＧＴＩＮ、または他の一意識別子を含むプレースホルダにマッピングされた（セグメント識別子を介して）メディア・ストリームに関連付けさせるために支払うことができる（直接にまたはオークション法を介して）。例えば、ユーザは、識別子Ｎを有するそのユーザのメディア・ストリームに関連してブランドＸのＭＰ３プレイヤを目玉にすることを選択することができる。特定の時間期間の間の識別子Ｎに関する関連付けを購入するオークションで、販売者は、取引あたり１ドルから４ドルまでの範囲を申し出る（取引は、視聴、クリック、または購入とすることができる）。４ドルを申し出た販売者が、オークションによって選択され、その特定の時間期間の間に、その販売者の補足コンテンツの選択されたアイテム（例えば広告）が、マッピングに含められる。
より複雑な方式では、販売者は、製品のサブセット（例えば、特定の人口統計によって見られたメディア・ストリームの識別子Ｎ）だけについて支払うことができる。この形で、複数の販売者を、特定のメディア・ストリームに潜在的に関連付けることができるが、任意の１つの販売者の広告の表示は、広告主がそのような配置に置く相対価値に合うように最適化される。この最適化プロセスを他の最適化プロセスと組み合わせることができ、その結果、視聴者に表示される補足コンテンツの実際のアイテムは、補足コンテンツのアイテムの以前の視聴者によって生成される相対クリック・スルー・レシオを効果に入れた後に限って、そのような表示に最高の価格を支払うことを申し出た販売者によって決定される。例えば、販売者Ａが、視聴者クリック・スルーあたり１ドルを支払うつもりがあり、販売者Ｂが、視聴者クリック・スルーあたり０．２０ドルだけを支払うつもりがある場合がある。しかし、ビデオの最初の１００００件の視聴の後に、販売者Ｂの補足コンテンツのアイテムによって生成されるクリック・スルー・レートは、販売者Ａの補足コンテンツのアイテムによって生成されるクリック・スルー・レートの５倍を超えて多い。そのような情況では、本発明を、後続視聴者（最初の１００００件の後）だけに販売者Ｂの補足コンテンツのアイテムを提示することによって最適化することができる。というのは、クリックあたりの収入がより低い（しかし、生成される総計収入は、類似する傾向が続く場合により多くなる可能性が高い）からである。もう１つの実施形態では、補足コンテンツの所与のアイテム内の属性を、視聴者に表示される補足コンテンツのアイテムがおおむねまたはまったく変更されないままになるように販売者に割り当てるが、補足コンテンツのアイテムの他の属性を、最高の入札価格に従って変更することができる。例えば、一般に、任意の所与の物品が、複数の異なる販売者またはソースから購入のために使用可能であり（例えば、所与のＤＶＤが、映画制作者のウェブ・サイトから、映画会社から、様々な店から、オンライン販売者から、またはオンライン・オークション・ウェブ・サイトを利用して中古商品をオークションで売る個人からさえ入手可能である場合がある）、物品に関連する補足コンテンツの１つのアイテムだけがある場合があるが、任意の個数の異なる販売者が、物品に関連する特定のクリック・スルー・レーティングに関する実現ソースとして潜在的選択の候補になることに関心を持つ場合がある。
補足コンテンツの所与のアイテムの使用が、ある形の代償（例えば、広告収入またはｅ−ｃｏｍｍｅｒｃｅロイヤルティ）を伴う実施形態では、本発明を、アクセス・プロバイダが代償のより大きい部分を占取することの返礼に、アクセス・プロバイダにマッピングに含まれる補足コンテンツを自動的に選択させるオプションを提供するように構成することができる。これは、メディア・ストリームを貨幣化するのに必要な追加の労力の量を最小にすることを望むコンテンツ作成者にとって、または例えば自動化された選択が彼らが選択するものより優れていると考えるコンテンツ作成者にとって、特に重要である可能性がある。補足コンテンツのこの自動化された割り当ては、完全にランダム化することができる（例えば、補足コンテンツ・ライブラリからランダムに選択された補足コンテンツのアイテムを突き合わせ、補足コンテンツのそのアイテムをｘ秒とｙ秒との間からなるランダムな時間期間の間にメディア・ストリームの視聴者に提示するなど）。
自動化された補足コンテンツ選択で考慮されるすべての要因を、最適化スキーマ内で自動的に利用することができ、その結果、補足コンテンツのアイテムの様々な組合せまたは代替アイテムが、最適の組合せが判定される（例えば、特定の判断基準を参照することによって）まで、提案されるようになる。例えば、測定判断基準には、メディア・ストリームの視聴者によって「クリックされる」補足コンテンツのアイテムの個数、所与のメディア・ストリームが見られる時間の平均長（例えば、少数のメディア・ストリームが最後まで見られ、ある種の色の組合せまたは補足コンテンツ表示頻度が、より長い平均視聴時間を生じる場合がある）、メディア・ストリームの視聴者によって与えられる平均品質「レーティング」、または注釈付きメディア・ストリームによって生成される反応の量（単語またはサブミッションの個数のいずれか）を含めることができる。この情報のすべてを、自動化された最適化システムによって処理することができ、その結果、補足コンテンツのアイテムの様々な組合せが、関連する測定判断基準が最適化されるまで提案されるようになる。
上で説明した最適化プロセスのそれぞれを、所与のメディア・ストリームにリンクすることができ、その結果、新しい補足コンテンツ・マッピングが、メディア・ストリームがアクセスされるたびに生成されるようになる（すなわち、マッピングが、実質的にリアル・タイムで生成される）。代替案では、最適化プロセスを、様々なインターバルで実行されるようにセットすることができ、その結果、例えば、マッピングのｘ個の異なる版が生成されるようになり（ここで、各版は、最適化のために分析される補足コンテンツ変形形態を含む）、メディア・ストリームを見る視聴者要求が、これらのマッピングのうちの１つを生成するようになる。所定の個数の視聴が完了したときに、最適化プロセスは、マッピングのｙ個の異なる版を生成し、このプロセスを繰り返す。この後者の手法は、近リアル・タイム処理を提供する必要をなくすが、同一メディア・ストリームの複数のマッピングを格納することのストレージ・コストを増やす可能性がある。
一実施形態で、ユーザは、補足コンテンツを「広告」（例えば、おそらくは購入の機会を含む）、「コンテンツ相補的」（例えば、メディア・ストリームを補足するグラフィック・イメージ）、「ナビゲーション」（例えば、視聴者がメディア・ストリームの別の部分または別のメディア・ストリームに簡単にナビゲートすることを可能にする、ビデオの形の補足コンテンツ）、または類似物として分類することによるなど、１つまたは複数の特性に従って補足コンテンツを個人的に分類するオプションを与えられる。この分類は、自動的に、補足コンテンツに含まれる情報またはコンポーネントのタイプによるなどのある種の判断基準を参照することによって（例えば、ライブラリ・エントリの「Ｒｅｔａｉｌ＿Ｐｒｉｃｅ」カテゴリに補足コンテンツのアイテムを含めることが、その補足コンテンツが「広告」であることを示す場合がある）、またはアクセス・プロバイダの従業員またはユーザによるなど、手動でのいずれかで実行することができる。
そのような分類は、ユーザ（例えば、コンテンツ作成者）にメディア・ストリームおよびメディア・ストリームへの視聴者のアクセスに対する追加の制御を提供する任意の個数の追加プロセスをも使用可能にすることができる。例えば、ユーザは、視聴者が補足コンテンツの所与のカテゴリの代替補足コンテンツを提供することの許可を提供することができる（例えば、視聴者が、コンテンツ作成者によって作成された広告だけを含み、視聴者反応のＸレベルをまだ作っていない代替案を提案することができる）と同時に、他のすべての分類の補足コンテンツを「ロックする」ことができる（例えば、視聴者は、全体的なマルチメディア経験の一部としてコンテンツ作成者によって作成された「芸術的メッセージ」の代替案を提案することができない）。これは、例えば、芸術的に注釈を付けられたメディア・ストリームの人気が高まるときに、それに関連付けられた補足コンテンツの広告指向アイテムの数が増える潜在的傾向があるにもかかわらず、そのメディア・ストリームのプレゼンテーションを保存することを容易にする。また、例えば、ユーザが、所与のメディア・ストリームに関して、主メディア・ストリームのプレゼンテーションの開始の前に提示される補足コンテンツを共同制作者が提供する能力を阻止すると同時に、視聴者がオリジナルのコンテンツ作成者によって選択された関連するメディア・ストリームに簡単にアクセスすることを可能にする補足コンテンツの作成を明示的に奨励するなど、特定のタイプの補足コンテンツの関連付けを「オープンし」または「ロックする」ことが可能である場合がある。
もう１つの例として、ユーザ（例えば、コンテンツ作成者）は、マッピングされた補足コンテンツの第１アイテムが、時刻ｔ＝０秒から時刻ｔ＝１０秒まで表示される補足コンテンツのアーティスティック（すなわち、非商業的）アイテムであり、補足コンテンツの第２アイテムが、時刻ｔ＝１０秒から時刻ｔ＝２０秒まで表示される広告であり、補足コンテンツの第３アイテムが、時刻ｔ＝２０秒から時刻ｔ＝３０秒まで表示されるナビゲーション・アシスタントである、注釈付きメディア・ストリームを提供することができる。ユーザＡは、許可システムを使用して、補足コンテンツの関連付けられたアイテムから引き出される潜在的収入を最大にするために広告（すなわち、補足コンテンツの第２アイテム）だけをシンジケーションに「オープン」すると同時に、ユーザＡが補足コンテンツの第１アイテムおよび第３アイテムを用いて作成しようとするコア視聴者経験の保存を保証するために他のすべての補足コンテンツ・カテゴリを「ロックする」ことができる。この機能性は、例えば、ユーザが、そのユーザにとって意味のある広告（例えば、メディア・ストリーム内でそのユーザが乗っている特定のスノーボードの広告）を「ロック」することを可能にすると同時に、他者が、メディア・ストリームの他のより一般化された態様に適当な広告（例えば、メディア・ストリーム内で描かれるジャケットに似ていてもそうでなくてもよいスキー・ジャケットの広告）を提供することを可能にするはずである。
ユーザが、補足コンテンツの新しいアイテムを作成した場合に、補足コンテンツのそのアイテムを、アップロードすることができ、あるいは、他者がそのライブラリを見るときに、彼らが特定のライブラリ・エントリから導出されたその中の補足コンテンツの個々のアイテムのすべてまたは一部をも提示され得るようにするためにライブラリ内に含めることを「許可する」ことができる。このユーザは、関連するライブラリ・エントリを訪問する他者が補足コンテンツのアイテムを「そのままで」（すなわち、「ロックされて」）使用することを許可するか、その代わりに、補足コンテンツのアイテムを任意の目的に使用する（別のユーザが補足コンテンツの追加アイテムを変更し、かつ／またはそれと組み合わせるためのテンプレートとしてを含む）ことを許可するなど、様々な条件に従属する補足コンテンツのアイテムを提供することができる。代替案では、ある種の判断基準を満足する補足コンテンツのアイテムを、ライブラリ内に自動的に含めることができる（例えば、ｘ％を超えるクリック・スルー・レートを生成した補足コンテンツのすべてのアイテムがライブラリ内に置かれる）。補足コンテンツのアイテムを自動的に含めるこのプロセスは、補足コンテンツのアイテムがライブラリの「保留」区域に置かれることをもたらし、この「保留」区域では、補足コンテンツのアイテムは、特定のライブラリ・エントリにまだ関連付けられてはいない補足コンテンツのアイテムとして識別される。補足コンテンツのこれらのアイテムは、潜在的には他のユーザまたは管理者による確認を必要とする暫定的基礎で、特定のライブラリ・エントリと共にライブラリ内に格納することができる。補足コンテンツのアイテムが、これに関して識別されるときに、補足コンテンツのそのアイテムの作成者に通知を提供することができる。ユーザが、特定の時間期間内に補足コンテンツのそのアイテムを「自分のものだと言う」ことができない場合には、アクセス・プロバイダは、補足コンテンツのそのアイテムに、補足コンテンツの「アクセス・プロバイダ」アイテム（アクセス・プロバイダが、それに関するすべての生成された収入の「作成者」部分を受け取る）として、補足コンテンツの「コミュニティ」アイテム（収入が要求されないか、その代わりに、収入の作成者部分が、おそらくは、全体としてまたは案分ベースでコミュニティに分配され、チャリティに寄付され、またはある他の目的で、特定のアカウントに置かれる）として、または類似物としてラベルを付けることができる。
一実施形態で、ある種の補足コンテンツ・カテゴリ（例えば、広告を変更することだけを許可されるシンジケート）を「オープン」または「ロック」するのに利用できるこの同一タイプの手法を、補足コンテンツの所与のアイテム内の特定のコンポーネントに適用することができる。例えば、あるユーザが、他者が補足コンテンツのアイテムの代替「スタイル」を提供する能力を「オープンする」（例えば、背景色およびフォントを変更することを許可する）が、他の属性（例えば、製品イメージ、小売価格、および実際の広告コピー）を「ロックする」ことができる。この同一の機能性を、特定のライブラリ・エントリに適用することができる。
一実施形態で、補足コンテンツのアイテムを、アクセス・プロバイダによって提供されるかホスティングされるツールを使用して、個人によって作成し、管理することができる。１つのそのようなツールに、ユーザが、補足コンテンツのアイテムのいくつかの個々のコンポーネント（例えば、フォント、イメージなど）をアップロードし、補足コンテンツ・ライブラリから補足コンテンツのいくつかの個々のコンポーネントを選択し、アップロードされたおよび／または選択された個々のコンポーネントのうちの１つまたは複数を変換し（例えば、色を変更すること、サウンド・エフェクトを追加することなどによって）、カスタマイズされた個々のコンポーネントをメディア・ストリームとのおよびアクセス・プロバイダの技術的必要との互換性のためにフォーマットされる補足コンテンツの混成アイテムにコンパイルすることを可能にするプロシージャのセットを含めることができる。このプロセスは、ユーザまたはユーザの組織の個人的使用のためにユーザから使用可能にされる、アクセス・プロバイダの一部（例えば、プライベート「ワークスペース」）内で行うことができる。代替案では、アクセス・プロバイダは、補足コンテンツの「進行中」アイテムのパブリック・ポスティングを提供することができ、これによって、このツールは、ある種の承認されたグループまたは個人（または一般市民さえ）が、コメントの提供、追加の個々のコンポーネント、補足コンテンツの進行中アイテムの変更、補足コンテンツの代替アイテムの提供などによって補足コンテンツのアイテムの作成に寄与することを可能にする。ユーザが、補足コンテンツの代替アイテムを作成するためにプライベート・ワークスペースを利用し、コミュニティによるコメントおよび変更のために補足コンテンツのその代替アイテムをパブリック・ワークスペースに提供し、その後、最終的な変更のために補足コンテンツのその代替アイテムをそのユーザのプライベート・ワークスペースに戻すかもしれない。一実施形態で、このワークスペース・ツールは、「改訂ヒストリ」機能を使用可能にし、その結果、ユーザおよび／または他者が、補足コンテンツのアイテムの開発の進行状況を追跡し、以前のインスタンス化にアクセスし、いつ誰が特定の変更を行ったかを判定することなどが可能になる。
もう１つのツールは、ユーザ（例えば、コンテンツ作成者）が、補足コンテンツのアイテムのセットを、そこからユーザが注釈付きメディア・ストリームを作成する補足コンテンツのアイテムの「作業ライブラリ」（すなわち、メディア・ストリーム、メディア・ストリーム・プレイヤ・アプリケーション、およびマッピング用の補足コンテンツのアイテムのコレクションの組合せ）として指定することを可能にすることができる。一実施形態で、作業ライブラリは、ワークスペースに似た形で、いつでも変更でき、後日のアクセスのために保存でき、他者と共有することなどができる。
一実施形態で、作業ライブラリは、ユーザが補足コンテンツの複数のアイテムをメディア・ストリームの特定の時間セグメントに関するマッピングに使用可能にしたい（例えば、補足コンテンツの第１アイテムが、女性視聴者に示され、補足コンテンツの第２アイテムが、男性視聴者および性別不明の視聴者に示される）場合に、そのユーザが、補足コンテンツの複数のアイテムを割り当てることのできる「プロキシ」または「プレースホルダ」を利用できるようになる機能性を含む。このツールは、ユーザが、補足コンテンツのアイテムが視聴者に表示される（すなわち、補足コンテンツのアイテムが最終的にメディア・ストリームに関連付けられたセグメント識別子にマッピングされるとき）とそのユーザが予想する順序で補足コンテンツのアイテムを配置し、潜在的に「ドラッグ・アンド・ドロップ」、番号付けシステム、または補足コンテンツのアイテムをシーケンスに割り当てる他の方法を介して、最も適切な順序を判定するために補足コンテンツのアイテムの様々な組合せを簡単に「うまく組み合わせる」ことを可能にすることができる。
一実施形態で、ユーザ（例えば、コンテンツ作成者）は、補足コンテンツのアイテムを提供する際の彼らの関心レベルを判定するために、単純なメニュー選択肢を提示される。例えば、ユーザへの提示のための例示的初期ディスプレイ４０００を示す図４０に示されているように、ユーザに、「あなたのビデオに補足コンテンツを追加したいですか」および／または「他者があなたのビデオに補足コンテンツを追加することを許可したいですか」などの「はい」か「いいえ」で答える質問を提示することができる。「デフォルト」の答えをこれらの質問について提供することができ、その結果、彼らのメディア・ストリームに注釈を付けることに関心を持たないユーザは、最小限の追加ステップだけを行う必要があるようになる。迂回しやすいシステムを提供することは、非常に重要である。というのは、複雑なシステムは、最も熱心なユーザ以外の全員にメディア・ストリームの投稿を思いとどまらせる可能性があるからである。
補足コンテンツのアイテムを作成し、マッピングする過程で、ユーザは、作成された補足コンテンツのアイテムおよびまだ必要である可能性がある補足コンテンツのアイテムを記憶できることから利益を得る可能性がある。これを容易にするために、このシステムは、ユーザに、補足コンテンツの特定のアイテムに関するリストおよび／またはメモを作成する能力を与え、ここで、個々のリスティングおよびメモは、様々なワークスペースまたはワークスペースの諸部分に分離可能である。例えば、あるユーザが、特定のメディア・ストリーム・マッピングのために心に描かれる補足コンテンツの全アイテムのリストを作成し、その後、そのリスト全体を潜在的投稿者のグループに送信する（潜在的に、そのリストに含まれる補足コンテンツの各アイテムの責任をグループの特定のメンバ（１人または複数）に割り当てる）ことを望む場合がある。代替案では、このシステムは、ユーザに、そのユーザが作成するつもりの補足コンテンツのアイテムの「プレースホルダ」を作成する能力を与える。例えば、釣りをテーマにしたビデオに関連付けられるマッピング用の補足コンテンツのアイテムを作成しつつあるユーザは、「タイトル画面」、「ボートの絵」、「池の地図」、「釣り竿の広告」、「ボートを引っ張る魚のアニメーション」、「餌の広告」、「その夜の魚の夕食の写真」、および「終りの画面」などのプレースホルダまたはプロキシを作成することを望む可能性がある。本発明は、その後、ユーザが、補足コンテンツのアイテムを作成し、それらを（例えば、「ドラッグ・アンド・ドロップ」によって、番号付けによってなど）プレースホルダのそれぞれと関係付けることを可能にする。本発明は、ユーザが、コンテンツ作成者の、補足コンテンツの同一アイテムの異なる版を簡単に比較する能力を容易にするために、補足コンテンツの複数のアイテムを同一のプレースホルダに関係付けることをも可能にすることができる。したがって、プレースホルダと補足コンテンツのアイテムとのコレクションは、視聴のための注釈付きメディア・ストリームの最初の「公開」の前または後のいずれかの、補足コンテンツのアイテムとのユーザの対話を容易にする「作業ライブラリ」を形成する。このシステムは、ユーザが、プレースホルダの出現の特定の順序を指定する（例えば、「ドラッグ・アンド・ドロップ」、番号付けシステム、または他の形でプレースホルダをシーケンスに割り当てることを介して）ことをも許容することができる。一実施形態で、このシステムは、コンテンツ作成者が、プレースホルダの追加、削除、変更、名前変更、または並べ変えなど、補足コンテンツの選択されたアイテムおよび／またはプレースホルダに関する様々なアクションを行うことを可能にする。
方法７００は、これによって、ユーザ（例えば、コンテンツ作成者）が、メディア・ストリームに関連付けられたセグメント識別子から補足コンテンツの１つまたは複数のアイテムへのマッピングを作成することを可能にする。一実施形態で、マッピングは、メディア・ストリームの時間セグメントを識別するセグメント識別子と、補足コンテンツの１つまたは複数のアイテムとの間で行われる（例えば、メディア・ストリームの最初の１分を、補足コンテンツの第１アイテムに関連付けることができ、メディア・ストリームの第２の１分を、補足コンテンツの第２アイテムに関連付けることができ、以下同様である）。もう１つの実施形態で、セグメント識別子と補足コンテンツのアイテムとの間のマッピングは、視聴者がメディア・ストリームの「一時停止」、「早送り」、または「停止」を行ったとき、メディア・ストリーム・プレイヤ上の「再生」ボタンが押されて以降に経過した時間の長さ、または視聴者のディスプレイ・デバイスへのメディア・ストリーム・アップロードの完了時などのイベントまたはアクションに関して行われる。例えば、ユーザは、メディア・ストリームが一時停止されたときに、メディア・ストリームが一時停止されたメディア・ストリームの特定のシーンに現れる主題にかかわりなく、視聴者に補足コンテンツの特定のアイテムが提示されるようにするために、マッピングを構成することができる。もう１つの実施形態で、補足コンテンツのアイテムのマッピングは、主メディア・ストリーム内のエンコーディングに含まれるかユーザまたはアクセス・プロバイダによってエンコーディングに追加されるメタデータ（例えば、セグメント識別子、キュー・ポイント、および類似物）に関して行うことができる。
代替案では、本発明は、あるユーザによって作成された作業ライブラリ内の補足コンテンツの全アイテムを参照し、デフォルト配分に従って補足コンテンツのアイテムをセグメント識別子に自動的に配分することができる（例えば、補足コンテンツの各アイテムが、メディア・ストリームの総時間をマッピングされる補足コンテンツのアイテムの個数によって割ったものと等しい時間セグメントに関連付けられる）。一実施形態で、本発明は、ユーザが、デフォルト・マッピングを調整し、その結果、補足コンテンツの各アイテムが、ユーザの望み通りにメディア・ストリームのこれらの時間セグメントまたは他のセグメントに正確に関連付けられる（例えば、「シーン」によってまたはメディア・ストリームと補足コンテンツの所与のアイテムとの間の意味のある関係を作成する同期化において）ようにすることを可能にする。このマッピング調整プロセスは、セグメント識別子の入力によって（例えば、補足コンテンツ・アイテム番号１が、時刻ｔ＝１秒から時刻ｔ＝１７秒までにまたがるセグメントを識別するセグメント識別子にマッピングされる）、またはメディア・ストリームの全長を表すタイム・ラインに沿って「バー」または他のグラフィカル・ユーザ・インターフェース要素を調整することによって（第１バーが、補足コンテンツの第１のアイテム（１つまたは複数）の提示を示し、第１バーと第２バーとの間の空間が、補足コンテンツの第１のアイテム（１つまたは複数）が視聴者に提示される時間を表し、第２バーが、補足コンテンツの第１のアイテム（１つまたは複数）が補足コンテンツの第２のアイテム（１つまたは複数）によって置換されるときを表すように）など、様々な手段によって実行することができる。
代替案では、補足コンテンツのアイテムを、特定のメディア・ストリームと独立のセグメント識別子にマッピングすることができる。例えば、補足コンテンツのアイテムの選択物を、１５秒おきに現れるようにマッピングすることができ、視聴者に提示される補足コンテンツのアイテムの総数は、補足コンテンツのそれらのアイテムが関連付けられるメディア・ストリームの長さだけによって決定される（例えば、マッピングが、補足コンテンツの合計１０個のアイテムからなるが、そのマッピングに関連付けられるメディア・ストリームが、１７秒のみの長さである場合に、補足コンテンツのアイテムのうちの最初の２つだけが視聴者に提示される）。代替案では、メディア・ストリームの長さを超えてマッピングされた補足コンテンツの全アイテムが、メディア・ストリームが終わった後に表示され続けるものとすることができる（すなわち、補足コンテンツのアイテムは、おそらくはメディア・ストリーム表示後についてユーザによってセットされる、より速いペースで、提示され続ける）。
いくつかの実施形態で、方法７００は、マッピング内の補足コンテンツの各アイテムに１からｎまでの番号を付けるツールを提供する。ユーザは、単純にメディア・ストリームを見、その点を識別するセグメント識別子にマッピングされなければならない補足コンテンツのアイテム（１つまたは複数）に関連付けられた番号（１つまたは複数）を押すことによって、補足コンテンツのアイテムをメディア・ストリームに関連付けることができる。メディア・ストリームとの補足コンテンツの選択されたアイテム（１つまたは複数）の関連付けは、補足コンテンツの次のアイテムが選択されたときに終了し、これによって、選択された補足コンテンツとの開始点から終了点までの時間的関連付けが作成される（すなわち、補足コンテンツのより後のアイテムの開始点は、必ず、補足コンテンツの直前のアイテムの終了点を定義する）。
戻って図７を参照すると、ステップ７０８で、方法７００は、注釈付きメディア・ストリームを作るために、補足コンテンツをメディア・ストリームに同期化する。具体的に言うと、上で述べたように、方法７００は、ユーザによって示される通りに、補足コンテンツを適当なセグメント識別子にマッピングする。一実施形態で、方法７００は、メディア・ストリーム内の少なくとも１つのセグメント識別子を補足コンテンツの複数のアイテムにマッピングする。
オプションのステップ７１０（幻影で図示）では、方法７００は、システムによって選択された補足コンテンツをメディア・ストリームに同期化する。例えば、補足コンテンツが、ある形の代償（例えば、広告収入またはｅ−ｃｏｍｍｅｒｃｅロイヤルティ）を伴う場合に、方法７００を、例えば代償のより大きい部分を占取することの返礼に、メディア・ストリーム内のセグメント識別子にマッピングするために特定の物品を自動的に選択するように構成することができる。代替案では、広告スペースをユーザ（すなわち、メディア・ストリームのプロバイダ）から購入し、第三者（例えば、広告主）に転売することができる。この実施形態では、広告スペースを、価格リストまたはオークション・システムを使用して販売することができる。
方法７００は、ステップ７１２で注釈付きメディア・ストリームを保存し（例えば、注釈付けが完了したことのユーザからの表示の際に）、その後、ステップ７１４で終了する。一実施形態で、メディア・ストリームの保存は、メディア・ストリームに関連付けられた、ユーザによって提供されたタグを保存することを含む（例えば、メディア・ストリームを記述するタグ、メディア・ストリームをジャンルに割り当てるタグ、あるいは、長さ、コンテンツ作成者、監督、または類似物などのメディア・ストリームのある種の特性を指定するタグ）。一実施形態で、メディア・ストリームの保存は、メディア・ストリームをエンコードすることを含む。一実施形態で、エンコーディングは、プログラム識別子（すなわち、特定のメディア・ストリームを識別する）とメディア・ストリームの各セグメントに関連付けられるセグメント識別子との両方を入手することを可能にする形で実行される。さらなる実施形態で、保存される注釈付きメディア・ストリームは、「クリック・スルー」の上限など、１つまたは複数の保存されるパラメータに関連付けられる。これは、例えば、販売者が、特殊化された製品の注釈付きメディア・ストリームを作成する場合に有用である可能性がある。例えば、ある販売者が、１０００単位を超える所与の物品を利益を上げて売ることができない場合に、その販売者は、ある回数のクリック・スルーに達したならばフル広告について支払わないことを望む可能性がある。一実施形態で、上限回数のクリック・スルーに達したならば、注釈付けされたコンテンツは、より「必要最小限の」構造に戻る（例えば、製造業者およびアイテム名だけで、購入情報または購入可能化はない）。
注釈付きメディア・ストリームが保存されたならば、その注釈付きメディア・ストリームを、視聴者に使用可能にすることができる（例えば、その注釈付きメディア・ストリームをウェブ・サイト上でパブリッシュすることによって、またはその注釈付きメディア・ストリームをアクセス・プロバイダに供給することによって）。したがって、方法７００は、コンテンツ作成者、広告購入者、または販売者などのユーザが、メディア・ストリームの注釈付けを制御することを可能にする。したがって、方法７００は、ユーザに、注釈付きメディア・ストリームを作成する手段（例えば、コンテンツ作成者の場合に）およびメディア・ストリーム内で使用される物品を提供する手段（例えば、販売者および／または広告購入者の場合に）を提供するポータルとして機能することができる。一実施形態で、方法７００は、ユーザのコンピュータ上のローカル・アプリケーションに従って実行する。もう１つの実施形態で、方法７００は、ウェブベースのアプリケーションに従って実行する。もう１つの実施形態で、方法７００の一部をローカルに実行することができ、方法７００の他の部分は、ネットワーク化されたコンピュータを介してリモートに実行される。
方法７００のさらなる実施形態は、マッピング・タスクのアウトソーシングを可能にする。すなわち、受け取られたメディア・ストリームをアップロードするか提供する当事者を、マッピング・タスク（例えば、補足コンテンツの選択など）を実行するものと同一の当事者ではないものとすることができる。一実施形態で、メディア・ストリームを、保護された（例えば、エンコードされた）形で受け取ることができ、あるいは、受取りの際に保護することができ、その結果、方法７００のさらなるステップ（例えば、補足コンテンツのマッピングなど）を、保護された形でアウトソーシングできるようになる。一実施形態で、この保護は、メディア・ストリームのリモート・ダウンロードを防ぐ（すなわち、メディア・ストリームを見ることだけができる）。もう１つの実施形態で、メディア・ストリームは、後続のマッピング・タスクを実行する個人の誰もが、メディア・ストリームの複数のシーンを見ることができないことを保証するために、別個の「シーン」またはセクションで受け取られる。この実施形態では、所与のシーンに関するマッピング・タスクを実行する個人は、同一メディア・ストリームの他のシーンに関するマッピング・タスクを実行する他の個人に、行われたマッピング判断について知らせるために、他の個人のための「メモ」を残すことができる。
さらなる実施形態では、ログイン／ログアウト・システムが、個人が所与のメディア・ストリームに関するマッピング・タスクを実行することを可能にする。一実施形態で、このログイン／ログアウト・システムは、以前のログイン・セッション中に行われた変更を示す。
一実施形態で、マッピングのための補足コンテンツの選択は、既存デジタル・ビデオ・レコーダ、ビデオ・オンデマンド・サービス、または他のタイプの「キャッシュ」に格納されたまたは既に視聴者によって見られたメディア・ストリームに既に関連付けられている補足コンテンツを変更するために、アクセス・プロバイダがそれらの既存デジタル・ビデオ・レコーダ、ビデオ・オンデマンド・サービス、または他のタイプの「キャッシュ」のレコードにアクセスすることを可能にすることによって最適化される。セグメント識別子を使用することによって、補足コンテンツのどのアイテムが視聴者反応を作らなかったかを判定でき、これらのセグメント識別子に関するマッピングに対して編集を行うことができる。この形で、メディア・ストリームに関連して表示される補足コンテンツが、実際に視聴ごとに変化することができる。
一実施形態で、視聴者に、補足コンテンツに関する彼らのプリファレンスに関する追加情報を提供するように促すことができる。この視聴者情報を、例えば、セット・トップ・ボックスが初めて据え付けられるときに、またはその後のいつにでも視聴者がオンライン・サービス・アカウントにアクセスすることによって、要求することができる。視聴者プリファレンスが補足コンテンツを選択するために十分に正確なデータを提供するかどうかを判定するために、示された視聴者プリファレンスを、その視聴者の実際の挙動と突き合わせることができる。プリファレンスが実質的に挙動と一致する場合に、示された視聴者プリファレンスは、非常に高い価値を有すると考えられる（データ・マイニング予測が、本質的に、ユーザ自身のアクションおよび意識的プリファレンスによって証明されたことになるという点で）。この情報は、特定の物品の実際のメディア・ストリームへのデジタル配置の質を高めるのに（例えば、ブランドＹのビールではなくブランドＸのビール）、特定のタイプの音楽または他のオーディオ・コンポーネントの使用の質を高めるのに（例えば、ヒップホップ）、特定のタイプの広告の使用の質を高めるのに（例えば、「あなたの友人／あなたに似た視聴者」が買っている「もの」ではなくより「情報に富んだ」）、および類似物に使用することができる。
一実施形態で、視聴者挙動を、異なるアクションを介して入手された様々なトークンを「リンクする」ように視聴者に要求することによって案内することができる。例えば、様々な形のビデオ・トークンを利用する「ゲーム」を実施することができる（例えば、所与の物品の値引きを得るために、視聴者は、所与の映画館で３つの特定の映画のそれぞれを見ることと、特定のブランドの自動車を目玉にするテレビジョン番組を見ることと、特定の販売者で特定の物品を購入することとによってトークンを集めなければならない）。一実施形態では、トークンを特定の順序で集めなければならない（例えば上の例では、視聴者は、まずテレビジョン番組を見、その後に映画を見ることを要求される）。一実施形態で、トークン機能性は、個々のメディア・ストリームおよび／またはそれに関連付けられた補足コンテンツが直接に参加はしないが、それでも検索を容易にすることができる、「ごみ拾い競技」として利用される。例えば、補足コンテンツの各アイテムを、オントロジを用いて配置することができる。したがって、ごみ拾い競技は、視聴者が、オントロジのカテゴリＸの物品を目玉にする任意のテレビジョン番組から１つのトークンを入手し、カテゴリＹ物品を含む劇場公開から１つのトークンを入手することを要求することができる。
時々、視聴者の特定のグループが、所与のメディア・ストリームに関するカスタマイズされた補足コンテンツを受け取ることに関心を持つ場合がある。したがって、グループに、そのグループだけがアクセス可能な「プライベート」補足コンテンツを確立する機構を提供することができる。例えば、学校がその学生の全員に特定の作者に関するビデオを送信できる多数の通信教育アプリケーションがある。一実施形態で、この機能を、視聴者反応を追跡する機構（例えば、各学生がビデオ全体を見たことを検証するためにその学生がすべての補足コンテンツをクリック・スルーしたことを検証する機構）と組み合わせることができる。もう１つの例として、個人が、セグメントをランキングする（例えば、５スター中４．５）またはセグメントに関するメモを作る（例えば、「サラ、そのドレスは君によく似合うはずだ」）など、メディア・ストリーム・セグメントに関するカスタマイズされた注釈を作成することができる。
ますます、広告がライブ・メディア・ストリームに挿入されるようになるかもしれない。例えば、野球放送のバッターの背後の区域は、しばしば、２〜３分おきに異なる広告を示すためにデジタル編集される。そのようなメディア・ストリームと共に適当な補足コンテンツを提示するのを容易にするために、時間マッピングを作成することができ、その結果、所与のセグメントが、「生」セグメントに固有であるが特定の視聴者に提示されたものに固有でもある情報を参照するようになる。
図１４は、本発明による、メディア・ストリームに注釈を付ける方法１４００のもう１つの実施形態を示す流れ図である。方法１４００は、例えば、図１のストリーム注釈付けサービス・プロバイダ１１２によってその全体を実施することができる。代替案では、方法１４００を、コンテンツ作成者１０２と共にストリーム注釈付けサービス・プロバイダ１１２によって実施することができる。
方法１４００は、ステップ１４０２で初期化され、ステップ１４０４に進み、ここで、方法１４００は、メディア・ストリームを入手する。上で説明したように、このメディア・ストリームは、ユーザ・デバイス上の配信のための、ビデオ信号、オーディオ信号、またはテキスト信号のうちの少なくとも１つを含む。
ステップ１４０６で、方法１４００は、メディア・ストリームを複数のセグメントに分割し、ここで、セグメントは、セグメント識別子（例えば、一意セグメント識別子）によって識別される。上で説明したように、これらのセグメント識別子は、例えば、セグメント番号またはセグメント番号のセット、生成された番号、タイムコード、または他の識別子を含むことができる。一実施形態で、セグメント識別子は、メディア・ストリーム内に埋め込まれる。
ステップ１４０８で、方法１４００は、セグメント識別子のうちの少なくとも１つを、物品、概念、または概念のクラスを表す少なくとも１つの中間ノードにマッピングする。これが、第１マッピングを作成する。したがって、例えば、第１マッピング（中間ノードへの）は、セグメント識別子によって識別されるメディア・ストリームのセグメントが、中間ノードによって表される物品、概念、または概念のクラスを含み、提案し、暗示し、あるいはある他の形で伝えることを表すことができる。中間ノードは、補足コンテンツの特定のアイテムへの第２マッピングを介して独立にマッピングされる。したがって、中間ノードにマッピングされるセグメント識別子も、補足コンテンツに間接的にマッピングされる（中間ノードを介して）。
マッピングは、ステップ１４１０で格納される。一実施形態で、マッピングは、メディア・ストリームの一意識別子に従ってインデクシングされるストア内に格納される。その後、方法１４００は、ステップ１４１２で終了する。
方法１４００による中間ノードの使用は、多数の利益をもたらす。例えば、中間ノードの使用は、補足コンテンツの再マッピングを非常に効率的にする。補足コンテンツのアイテムを変更するために（例えば、補足コンテンツのアイテムが入手不能になる場合に）、１つのマッピング（すなわち、中間ノードから補足コンテンツのアイテムへの）だけを変更する必要があり、この変更は、補足コンテンツの新しいアイテムを、中間ノードにマッピングされているすべてのセグメント識別子にマッピングする。補足コンテンツが、例えば数百個のメディア・ストリームに数千回現れる情況では、１つのマッピングの変更が、数百個のメディア・ストリームのそれぞれに含まれる数千個のマッピングの変更よりはるかに簡単にスケーリングされる。
さらに、補足コンテンツの特定のアイテムが、メディア・ストリーム内にまたはメディア・ストリームと共に埋め込まれるのではないので、補足コンテンツのアイテムは、メディア・ストリームの撮影またはエンコーディングの開始などのどの特定のイベントの前に識別される必要がない。これは、作成プロセス全体をはるかにより柔軟にすることを可能にする。例えば、補足コンテンツのあるアイテムが、エンコーディングのときに未知である場合であっても、セグメント識別子を中間ノードにマッピングすることができる。補足コンテンツのあるアイテムが、後に識別される場合に、補足コンテンツのそのアイテムを中間ノードにマッピングすることができ、したがって、中間ノードにマッピングされたすべてのセグメント識別子に自動的に（間接的に）マッピングすることができる。
さらに、（間接的に）マッピングされた補足コンテンツを有しないセグメント識別子からのマッピングを簡単に識別することができる。方法１４００で実施される手法は、「ハーフ」マッピング（すなわち、補足コンテンツのアイテムへの中間ノードの第２マッピングなしの、中間ノードへのセグメント識別子の第１マッピング）を可能にするので、補足コンテンツのアイテムにマッピングされていない中間ノードを簡単に検索することができる。これは、「未使用の」または「未販売の」中間ノードの検索を可能にし、補足コンテンツのアイテムの単純な後続の追加を可能にする。
一貫性は、複数のメディア・ストリームに関連付けられた複数のセグメント識別子にまたがって中間ノードを最も効率的に利用するために重要である。例えば、第１メディア・ストリームが、ロマンチックなセグメントを識別するセグメント識別子を中間ノード「ロマンス」にマッピングするためにエンコードされるが、第２メディア・ストリームが、そのようなセグメント識別子を中間ノード「愛」にマッピングするためにエンコードされる場合に、方法１４００の利益の一部が、完全には実現されない可能性がある。したがって、注意深く制御された用語集が、中間ノードへのセグメント識別子の第１マッピングを制約するために優先的に使用される。
制約付きの用語集は、同音異義語に関する問題を生じさせる。例えば、中間ノード「ｇｌａｓｓｅｓ」は、複数の水飲み用コップ（ｄｒｉｎｋｉｎｇ ｇｌａｓｓｅｓ）に関連するのか、それとも眼鏡（ｅｙｅ ｇｌａｓｓｅｓ）に関連するのか？この問題を克服するために、中間ノードは、一実施形態で、あるオントロジのインスタンスおよびクラスであると考えられる。オントロジは、クラス（オブジェクトの抽象グループ、セット、またはコレクション）およびインスタンス（特定の自動車などの具象オブジェクトと数、単語、およびテーマなどの抽象オブジェクトとの両方）である可能な中間ノードのユニバースを提供する。インスタンスは、あるクラスのメンバである（例えば、「ブランドＸの４輪駆動トラック」は、クラス「トラック」のインスタンスである）。一実施形態で、クラスは、グラフに配置され、少なくとも「ｉｓ−ａ」を提供する（すなわち、インスタンスは、クラスのメンバであり（ｉｓ−ａ）、クラスは、スーパークラスのメンバである（ｉｓ−ａ））。そのような「ｉｓ−ａ」関係は、これによって、階層分類法を作成する。オントロジ内の各オブジェクト（クラスまたはインスタンス）は、それに関連付けられた複数の属性を有することができる。例えば、クラス「ｂｕｓｉｎｅｓｓ（会社）」は、すべての会社が位置を有するので、「ｌｏｃａｔｉｏｎ（位置）」という属性を有することができる。
いくつかの実施形態で、時々部分・全体関係とも称する「ｐａｒｔ−ｏｆ」関係が、クラスの間（またはインスタンスとクラスとの間）に設けられ、オブジェクト（またはオブジェクトのクラス）が混成オブジェクトを形成するために一緒にどのように組み合わされるかを表す。例えば、インスタンス「Ｊｅｌｌｙ（ゼリー）」および「Ｐｅａｎｕｔ Ｂｕｔｔｅｒ（ピーナッツ・バター）」は、両方とも、インスタンス「Ｐｅａｎｕｔ Ｂｕｔｔｅｒ ａｎｄ Ｊｅｌｌｙ Ｓａｎｄｗｉｃｈ（ピーナッツ・バターとゼリーのサンドイッチ）」の一部（ｐａｒｔ−ｏｆ）である。オントロジ構造は、「ｉｓ−ａ」関係と「ｐａｒｔ−ｏｆ」関係との両方の下での複数の親ノードを許容し、インスタンスおよびクラスの有向非循環グラフを作成する。
図８は、本発明による、注釈付きメディア・ストリームを視聴者に提供する方法８００の一実施形態を示す流れ図である。方法８００は、例えば、図１のアクセス・プロバイダ１０６によってその全体を実施することができる（例えば、テレビジョン、ＤＶＤプレイヤ、ＤＶＲ、セット・トップ・ボックス、ポータブル・メディア・プレイヤ、携帯情報端末、パーソナル・コンピュータ、携帯電話機、飛行機内または自動車内のエンターテイメント・システム、ビデオ・ゲーム・コンソール、専用デバイス、または類似物などのユーザ・デバイスを介して）。代替案では、方法８００を、ストリーム注釈付けサービス・プロバイダ１１２と共にアクセス・プロバイダ１０６によって実施することができる。
方法８００は、ステップ８０２で初期化され、ステップ８０４に進み、ここで、方法８００は、補足コンテンツのアイテムへの、メディア・ストリームに関連付けられたセグメント識別子のマッピングを受け取る。一実施形態で、補足コンテンツは、上で説明したように、メディア・ストリーム内に現れる１つまたは複数の物品に関連する商業的情報を含む。一実施形態で、マッピングは、リモート・サーバ（例えば、ストリーム注釈付けサービス・プロバイダ１１２）から、例えばインターネットを介して、ケーブル・ネットワークを介して、（例えば、リモート・サーバをケーブル・ヘッドエンドとすることができる場合、または、ヘッドエンドが、リモート・サーバとの通信を仲介することができる場合）、または衛星を介して受け取ることができる。特定の実施形態は、ＯｐｅｎＣａｂｌｅ ａｐｐｌｉｃａｔｉｏｎ ｐｌａｔｆｏｒｍ（ＯＣＡＰ）またはｄｉｇｉｔａｌ ｖｉｄｅｏ ｂｒｏａｄｃａｓｔｉｎｇ（ＤＶＢ）アプリケーションとして、あるいはＭＰＥＧトランスポート・ストリームを伴うプライベート・セクションとしてマッピングを受け取ることができる。さらなる実施形態では、マッピングは、「ディレクタ」（例えば、コンテンツ作成者１０２またはストリーム注釈付けサービス・プロバイダ１１２）から「オン・ザ・フライで」受け取られ、このディレクタは、メディア・ストリームに関連する可能性がある物品を関係付ける補足コンテンツのリストを作成し、メディア・ストリームが配信されるか表示されるときに、メディア・ストリームが関連する物品に関する情報を伝えるときに実質的にリアル・タイムでリストから補足コンテンツの特定のアイテムを「アクティブ化する」。一実施形態で、マッピングは、メディア・ストリーム内に現れる１つまたは複数の物品に関連する１つまたは複数のワールド・ワイド・ウェブ・サイトのＵＲＬをさらに含む。
ステップ８０６で、方法８００は、ディスプレイ・デバイスを介してメディア・ストリームを表示する。一実施形態で、メディア・ストリームの表示は、メディア・ストリームの現在表示されている部分（例えば、現在表示されているセグメント）を識別するセグメント識別子が補足コンテンツにマッピングされているときに、インジケータを提示することを含む。したがって、メディア・ストリームの視聴者は、表示されている１つまたは複数の物品に関する追加情報が使用可能であるときを自動的に知る（例えば、推測するか照会することを必要とするのではなく）。一実施形態で、このインジケータは、メディア・ストリームの現在表示されている部分を識別するセグメント識別子が、視聴者が関心を持つと期待される（例えば、人口統計情報、述べられた視聴者プリファレンス、または以前の視聴者アクティビティに基づいて）情報に関連する補足コンテンツにマッピングされているときに提示される。一実施形態で、このインジケータは、メディア・ストリームの表示にオーバーレイされるアイコンまたはメディア・ストリーム・プレイヤ（例えば、セット・トップ・ボックス、ＤＶＲ、または類似物）上、ディスプレイ・デバイス上、もしくはリモート・コントロール上の（おそらくは点滅する）ライトなど、ビジュアル・インジケータである。さらなる実施形態で、このインジケータは、可聴インジケータまたは他の知覚インジケータ（例えば、振動するリモート・コントロール）とすることができる。さらなる実施形態では、ディスプレイの第１部分にメディア・ストリームを表示し、ディスプレイの第２部分に現在アクセス可能な補足コンテンツに関するデータを表示する「スプリット・スクリーン」ディスプレイを使用することができる。
次に、方法８００は、ステップ８０８に進み、メディア・ストリームの視聴者から第１信号を受け取る。第１信号は、視聴者が、補足コンテンツ内で実施される情報の少なくともサブセットを見ることを望むことを示す。一実施形態で、第１信号は、ボタン（例えば、リモート・コントロール上、キーボード上、マウス上、ライト・ペン上、またはレーザ・ポインタ上の）を押すことを介してまたは話された（例えば、マイクロホンに、携帯電話機に、またはｖｏｉｃｅ−ｏｖｅｒ−ＩＰ送受話器に）コマンドを介して伝えられる。例えば、図２６に、リモート・コントロール２６０２を介して提供されるユーザ信号と相互作用する例示的セット・トップ・ボックス２６００を示す。一実施形態で、方法８００は、マルチモーダル視聴者対話をサポートし、これは、複数の入力モダリティを、視聴者信号を受け取るのに使用できることを意味する。マルチモーダル対話は、例えば、視聴者信号を処理する際にエラーを訂正するのに有用である可能性がある。例えば、視聴者信号を処理する際のエラーは、参照によってその全体が本明細書に組み込まれている米国特許第６７４２０２１号に記載の方法に従って訂正することができる。
一実施形態で、第１信号は、視聴者が補足コンテンツを即座に見ることを望むことを示す。もう１つの実施形態で、第１信号は、視聴者が補足コンテンツを後の時刻に（例えば、メディア・ストリームの終りに）見ることを望むことを示す。さらなる実施形態で、第１信号は、視聴者が、関心のある物品を具体的には識別せずに、補足コンテンツを後の時刻に見るために、メディア・ストリーム内の現在位置を保存することを望むことを示す（例えば、「後々のためにマークする」）。例えば、図３１に、視聴者が後の視聴のために現在のセグメントのセグメント識別子にマッピングされた補足コンテンツを「ブックマークする」ことを望むことを視聴者信号（例えば、リモート・コントロール３１００を介してセット・トップ・ボックス３１０２に受け取られた）が示す、例示的システムを示す。図示されているように、セット・トップ・ボックスは、関連するセグメント識別子および視聴者の視聴者識別子を取り出す。次に、セグメント識別子にマッピングされた補足コンテンツが、データベース３１０４から取り出され、後の視聴のために視聴者識別子に関連付けられたアカウント３１０６に送信される。
したがって、一実施形態で、マッピングまたはその中の補足コンテンツのアイテムを、メディア・ストリームが示されるものと同一のディスプレイ・デバイス上（例えば、メディア・ストリームが再生された後に、補足コンテンツのアイテムが提示される）または異なるディスプレイ・デバイス上（例えば、アクセス・プロバイダまたは第三者に関する視聴者のアカウントに送信される）のいずれかでの後の視聴のために、「保存する」（自動的にまたは視聴者が主導してのいずれかで）ことができる。これは、メディア・ストリームがセル電話機で見られるときなど、メディア・ストリームが、補足コンテンツのアイテムを有効にまたはその最適サイズで表示するには小さすぎる（例えば、広告テキストが平均的視聴者に判読しがたくなる）ディスプレイで見られる場合に、特に有用である可能性がある。テレビジョンなどの別のタイプのディスプレイ・デバイスに送信される場合に、アクセス・プロバイダは、補足コンテンツのアイテムがメディア・ストリームから分離され、後の視聴のために視聴者の電子メール・アカウントに送信されるか、「スプリット・スクリーン」もしくは「ピクチャインピクチャ」として提示されるか、ディスプレイ・デバイスに適切な他の形でなど、別の形で向けられるようにする機能性を提供することができる。
一実施形態で、上で説明した機能性を、補足コンテンツの特定のアイテムだけに適用することができる。例えば、視聴者が、「成人」コンテンツを目玉にする補足コンテンツのすべてのアイテムまたはメディア・ストリームの長さの指定されたパーセンテージより多くを識別する広告をマッピングされたセグメント識別子を含む補足コンテンツのすべてのアイテムの提示をブロックすることを許可されるものとすることができる。この機能性は、視聴者が、その視聴者のプリファレンスに合わせてその視聴者の視聴経験を調整することを可能にするはずである。アクセス・プロバイダは、そのような「ブロックする」機能のすべてを、ある種の要件（ある料金を支払済みであるなど）を満足する視聴者だけに使用可能にすることを選択することができる。アクセス・プロバイダは、アクセス特権が、アカウントを利用するすべての他の視聴者について１人の視聴者によって定義される特定の視聴アカウントの確立を許可することができる（例えば、子供の代わりにアカウントを確立する親、従業員が会社の供給するメディア・ストリームだけを見られるようにするために従業員の代わりにアカウントを確立する会社）。
ステップ８１０で、方法８００は、マッピング（例えば、図２６のマッピング２６０４）に従って、どのセグメント識別子が、第１信号が受け取られた時点に対応するか（すなわち、視聴者が第１信号を送ったときにメディア・ストリームのどのセグメントが表示されつつあったか）を判定する。一実施形態（例えば、セグメント識別子がハッシュ生成された識別子を含む場合）では、この判定は、メディア・ストリームの現在のフレームのハッシュを計算し、計算されたハッシュに関連する時刻を識別し、その時刻の補足コンテンツを取り出すことによって行われる。もう１つの実施形態では、現在のセグメントからのタイムコード・データが使用される。もう１つの実施形態では、この判定は、上で述べたように、組込み時間遅れを考慮に入れる。例えば、第１信号が時刻ｔ０に受け取られるが、視聴者が、時刻ｔ０−ｎにメディア・ストリームに現れる物品に反応している場合がある（すなわち、視聴者の反応時間が、メディア・ストリームの進行より遅い）。
もう１つの実施形態で、実際のセグメントを記述するデータ（例えば、視聴者信号が受け取られたときに表示されつつあった特定のセグメントのスクリーン・キャプチャ・イメージ）が、潜在的に、見られているメディア・ストリームに関する追加情報（埋め込まれたプログラム識別子からまたはアクセス・プロバイダからのいずれか）および／または任意の入手可能なタイミング情報（例えば、このセグメントはメディア・ストリームＹのｘ秒目から導出された）と一緒に、方法８００によって受け取られる。次に、スクリーン・キャプチャ・イメージを処理して（例えば、「ハッシュ化」）、セグメントの一意デジタル・シグネチャ（例えば、平均輝度および色）を判定することができる。次に、この情報を、以前に（ａ）各セグメント識別子内にエンコードされ、（ｂ）各セグメント内でハッシュ化されたメディア・ストリーム情報のデータベースと突き合わせて、一意シグネチャを判定することができる。次に、視聴者からのハッシュを、デジタル・メディア・ストリームから入手可能な（近似タイミング情報によって案内されて）ハッシュと比較する。これは、比較すべきハッシュのセットが、タイムコード情報を与えられれば比較的小さいはずであるという事実に起因して、非常にすばやく発生し得る。この手法の利益は、（ａ）メディア・ストリーム自体には何も含める必要がなく、（ｂ）コンテンツ作成者は何もエンコードする必要がなく（コンテンツ作成者はエンコードのためにメディア・ストリームを提供するだけでよい）、（ｃ）メディア・ストリーム自体は他者によって濫用され得る（例えば、許可されない目的にデータを使用する）データをまったく含まないことである。
クローズド・キャプショニングを提供するのに使用されるクローズド・キャプショニング関連Ｅｘｔｅｎｄｅｄ Ｄａｔａ Ｓｅｒｖｉｃｅ（ＸＤＳ、例えば、米国電子工業会（ＥＩＡ）−７０８）データ・チャネルは、メディア・ストリーム・セグメントのシーケンス内の特定の点で始まる単語の特定のセットを表示することによって動作する。この情報を含む初期セグメント（例えば、単語の特定の組合せが関連付けられる最初のセグメント）を、メディア・ストリーム内の相対的に固定された基準点として利用することができ、これは、編集された可能性があるセグメントに関わりなく真である。一実施形態で、このクローズド・キャプショニング情報は、どの補足コンテンツを提供すべきかを判定するために、下でより詳細に説明する「慣性」位置方法と共に使用される。「「慣性」位置」とは、メディア・ストリーム内の固定点が識別されたならば、「ストップウォッチ」機能を使用して、視聴者がより後の時刻に関心を示す特定のセグメントを判定できるという事実を指す。例えば、句「助けて、スーパーヒーロー」が現れる最初のセグメントからｘ秒後に発生する時点を、補足コンテンツの特定のアイテムにマッピングされた特定のセグメント識別子（または比較的少数のセグメント識別子）と同等と考えることができる。一実施形態では、クローズド・キャプション化されたトランスクリプトを「読み取る」のではなく、音声認識ソフトウェアを使用して、音声を認識することができる。次に、認識された音声をトランスクリプトと突き合わせて、メディア・ストリーム内のどこで慣性位置決めを開始すべきかを判定する。この手法の１つの重要な利益は、視聴者に表示されるメディア・ストリームが、特殊なコーディングを必要としないことである。そうではなく、メディア・ストリーム自体の諸態様が、配置の判定に利用される。一実施形態で、この情報は、より簡単なマッピングを可能にするために、メディア・ストリームの、エンコードされた版と突き合わされる。
一実施形態で、関連するデバイス（例えば、セット・トップ・ボックス）が正確な瞬間にまたは条件もしくは視聴者判断基準の正確なセットの下で発生するセグメント識別子（１つまたは複数）を「読み取る」ために、パラメータがセットされる。一実施形態で、これは、セグメント識別子を送る命令と共に、「プル」命令または信号を関連デバイスに送ることによって実施される。プル命令は、全国の視聴習慣を判定するために全国の「統計的に有意な」サンプルからセグメント識別子をプルすること、特定の人口統計部分集合からセグメント識別子をプルすること（例えば、人口１００００人未満の都市の全視聴者が何を見ているかを判定する）、視聴者の特定の部分集合の視聴習慣を追跡するために、ある時間期間にわたってこれらの視聴者からセグメント識別子をプルすること（よりよい部分カテゴリをデータ・マイニングのために生成できるようにするために、潜在的に視聴者の新しい部分集合を作成するのに視聴習慣を使用する）、以前のＹ週間にメディア・ストリームの所与のソースを見た視聴者からセグメント識別子をプルすること、補足コンテンツの特定のアイテムをクリック・スルーした視聴者からセグメント識別子をプルすること、メディア・ストリームの所与のソースがアクセス・プロバイダを介して実際に使用可能であることを示すプロファイルを有する視聴者からセグメント識別子をプルすること、現在ペイパービューまたはビデオ・オンデマンドを見ている視聴者からセグメント識別子をプルすること、現在インターネットにログ・オンしている視聴者からセグメント識別子をプルすること、または視聴者がメディア・ストリームを見るのをやめたときを判定するために特定のメディア・ストリームを見ているすべての視聴者についてｘ秒おきにセグメント識別子をプルすることのうちのいずれか１つまたは複数を含めて、様々なパラメータに従って送り出すことができる。
一実施形態で、所与のコンテキストでプル（または「ポーリング」）されるセグメント識別子は、セグメント識別子が、一括してではあるが実質的にリアル・タイムではなくアクセス可能になるようにするために格納される。例えば、視聴者が、見ているメディア・ストリームを変更するたびに、チャネル変更の直前に現れたメディア・ストリーム・セグメント（すなわち、視聴者が、メディア・ストリームＺに切り替える前にメディア・ストリームＹのセグメントＸを見ていたこと）を知ることが役に立つ可能性がある。というのは、これが、視聴者に所与のメディア・ストリームを見るのをやめさせた要因を判定するのを助ける可能性があるからである。
次に、方法８００は、ステップ８１２に進み、適当な時刻に（例えば、ユーザが補足コンテンツを即座にまたは後の時刻にのどちらに見ることを望むかに基づいて）、対応するセグメント識別子にマッピングされた補足コンテンツを表示する。一実施形態で（例えば、セグメント識別子が複数のアイテムに関連する補足コンテンツにマッピングされる場合に）、情報は、選択可能な物品のメニューの形で表示される。例えば、図２７に、セグメント識別子にマッピングされた補足コンテンツ２７００が取り出され、ディスプレイ・デバイス２７０２を介して視聴者に表示された後の図２６のシステムを示す。図示されているように、補足コンテンツ２７００は、財布、セーター、およびサングラスの情報を含むメニューとして表示される。
したがって、例えば、第１信号が、セグメント識別子によって識別される１つまたは複数のセグメントが女優を描くときに受け取られた場合に、そのセグメント識別子にマッピングされた補足コンテンツには、その女優のフィルモグラフィおよびその女優が着ていたセーターに関する情報を含めることができる。したがって、その第１信号に応答して表示される補足コンテンツには、その女優のイメージおよびそのセーターのイメージを含めることができ、ここで、これらのイメージのそれぞれは、追加情報を含むワールド・ワイド・ウェブ・ページへのハイパーリンクを含む。一実施形態で、メディア・ストリームの表示は、補足コンテンツが表示されている間に一時停止される。一実施形態で、補足コンテンツは、メディア・ストリームと同一のディスプレイ・デバイスを介して表示される。もう１つの実施形態で、補足コンテンツは、異なるディスプレイ・デバイスを介して表示される（例えば、メディア・ストリームは、テレビジョンまたは携帯電話機を介して表示されつつあり、補足コンテンツは、視聴者のラップトップ・コンピュータ上に表示されるか、視聴者の電子メール・アカウントに送信される）。
もう１つの実施形態で、補足コンテンツが、それに関して補足コンテンツが使用可能であるメディア・ストリーム内に現れる物品のメニューまたはリストとして表示される場合に、表示のモードは、視聴者が、関連付けられたメディア・ストリームを見る必要なしに、マッピングされた補足コンテンツを通って「サーフィンする」ことを可能にすることができる。視聴者が補足コンテンツがマッピングされる単一の物品への関心を示した後の図２６のシステムを示す、図２８に示されているように、視聴者は、さらに調べるためにメニュー内に表示された物品のうちの任意の１つまたは複数を選択することができる。例えば、このケースでは、視聴者は、図２７に示されたセーターに関するさらなる情報を要求することを選択している。
ステップ８１４で、方法８００は、視聴者から後続信号を受け取る。一実施形態で、後続信号は、第１信号が受け取られた形のいずれかで受け取ることができる。次に、方法８００はステップ８１６に進み、後続信号が、視聴者がメディア・ストリームに戻る（すなわち、さらなるアクションなしで、現在表示されている補足コンテンツを終了する）ことを望むことを示すかどうかを判定する。方法８００が、ステップ８１６で、視聴者がメディア・ストリームに戻ることを望むことを後続信号が示すと結論する場合には、方法８００は、ステップ８０６に戻り、メディア・ストリームの表示（例えば、補足コンテンツによって遮られない）を再開する。したがって、方法８００は、補足コンテンツを表示する別の信号が受け取られるまで、かつ、それが受け取られない限り、補足コンテンツの表示を停止する。
その代わりに、方法８００が、ステップ８１６で、視聴者がメディア・ストリームに戻ることを望むことを後続信号が示さないと結論する場合には、方法８００は、ステップ８１８に進み、視聴者が補足コンテンツによって表される１つまたは複数の物品を購入することを望むことを後続信号が示すかどうかを判定する。したがって、方法８００は、即時購入の機会をオンデマンドで提供することができる。一実施形態で、方法８００をホスティングするサービス（例えば、ストリーム注釈付けプロバイダ、アクセス・プロバイダ、またはオンライン・アクセス・プロバイダ）は、表示された補足コンテンツ内に描かれた１つまたは複数のアイテムへの関心を示す信号を視聴者が送信するたびに、ある収入を受け取る。さらなる実施形態では、アクセス・プロバイダは、上で説明したように、収入の一部をメディア・ストリームの作成者（例えば、コンテンツ作成者）および／または共同制作者とわかち合う。
方法８００が、ステップ８１８で、視聴者が表示された補足コンテンツ内に描かれた１つまたは複数のアイテムを購入することを望むことを後続信号が示さないと結論する場合に、方法８００は、ステップ８１２に戻り、補足コンテンツの表示を継続する。その代わりに、方法８００が、ステップ８１８で、視聴者が表示された補足コンテンツ内に描かれた１つまたは複数のアイテムを購入することを望むことを後続信号が示すと結論する場合に、方法８００は、ステップ８２０に進み、所望の取引を完了する。一実施形態で、方法８００をホスティングするサービスは、補足コンテンツを用いて提示された結果として視聴者が１つまたは複数のアイテムを購入するたびに、ある収入を受け取る。さらなる実施形態では、アクセス・プロバイダは、収入の一部をメディア・ストリームの作成者とわかち合う。
取引が完了したならば、方法８００は、ステップ８１４に戻り、どのように進行すべきか（例えば、メディア・ストリームに戻るのか、別の取引を完了するのか）を示す視聴者からの信号を待つ。さらなる実施形態では、追加のオプションまたはアクションを後続信号に関連付けることができる。例えば、後続信号が、追加の補足コンテンツのプッシュをトリガすることができる（任意選択で、人口統計および／または類似するプリファレンスを有する他のユーザによるレビュー、消費者レポートなどの学習されたユーザ・プリファレンスによって駆動されて）。一実施形態で、追加の補足コンテンツは、視聴者がその視聴者の購入ヒストリを見るか方法８００に関するプリファレンスを編集する機会を提供する。
補足コンテンツをセグメント識別子にマッピングし、視聴者によって促されたときに限って補足コンテンツを表示することによって、プロダクト・プレースメントを、視聴者経験を実質的に邪魔しない形で達成することができる。すなわち、プロダクト・プレースメントは、視聴者がある種の積極的行動を行わない限り、実質的に不可視である。したがって、商業的情報の提示の十分な機会を提供しながら、芸術的関心および視聴者の期待に対処することができる。さらに、このユーザ・インターフェースは、従来の技法に関連するインターフェースよりはるかにユーザ・フレンドリである。例えば、補足コンテンツがセグメント識別子にマッピングされ、視聴者が単に適当なときに信号を送ることによって補足コンテンツにアクセスできるので、移動するオブジェクトをクリックすることまたは「高速カット」編集技法に反応することを試みる必要はない。
一実施形態で、マッピングならびに視聴者が関心を示したすべてのセグメントの識別子を、ユーザ・ディスプレイ・デバイスでローカルにキャッシングすることができる。これは、例えば、読み取り専用である可能性があるか、時々ネットワーク・アクセスを欠く可能性がある、ポータブル・ディスプレイ・デバイスおよび／または小フォーム・ファクタ・ディスプレイ・デバイスの使用を可能にする。この実施形態では、マッピングは、ネットワーク接続性が確立されるまで、キャッシュ内に格納される。これは、例えば、ネットワークの「範囲内に戻る」ことによって（この場合には、あるセグメント識別子のうちで以前に送信されなかったすべての部分が送信される）、またはネットワークに接続された別のデバイスにアクセスすることによって（例えば、ホットシンクを介して。この場合に、マッピングが、ユーザ・デバイスからシンク・デバイスに転送され、その後、例えばストリーム注釈付けサービス・プロバイダに送信される）行うことができる。
一実施形態で、セグメント識別子情報は、ストリーム注釈付けサービス・プロバイダに送信される前に、ユーザ・デバイスによって暗号化される（例えば、第三者が伝送を傍受できないようにするために）。したがって、セグメント識別子を暗号化できない可能性がある場合であっても、セグメント識別子の実際の伝送を暗号化することができる。この実施形態では、ストリーム注釈付けプロバイダ、アクセス・プロバイダ、または注釈付けサービスを提供する他の当事者は、これらの伝送を暗号化解除し、要求された補足コンテンツを提供するように構成される。
さらなる実施形態では、「ホットスポッティング」機能性が使用可能にされ、これによって、視聴者は、イメージに関する補足情報にアクセスするために、ディスプレイ・デバイス上に現れる特定のイメージを選択する（例えば、クリックする）ことを可能にされる（例えば、女優が着ているセーターをクリックする）。このタイプの機能性を実施する現在の手法は、計算的に重荷であり、時間集中型であり、費用が高い。そのような情況では、メディア・ストリームの所与のセグメント内の所与の物品のイメージの「境界」を効率的に識別できることが、非常に貴重である可能性がある。
本発明に従って、特にメディア・ストリームのセグメントの分類または説明に関して収集されるデータは、視聴者が関心を持つ可能性がある物品およびこれらの物品をどのようにして最もよく「提示する」かの予測だけではなく、視聴者が関心を持つ可能性がある主題（すなわち、テレビジョン、映画、および類似物のタイプまたはジャンル）の予測をも可能にする。これは、複数の異なるプラットフォームがメディア・ストリームの再検討に利用されるときおよびメディア・ストリームがオンデマンドで使用可能であるときに特に重要である。というのは、収集されたデータを、重要である可能性が高いメディア・ストリーム主題を提供する（または特定の視聴者に強調する）のに利用できるからである。例えば、所与の視聴者が、ローカル野球チームの試合の切符に関する広告への関心をシグナリングした場合に、野球情報を、例えば番組ガイドでこれからの野球の試合を強調することによって、「これがお気に召すと思われます」機能性の一部として野球の試合を記録することによって、および類似物によって、視聴者に注目させることができる。
一実施形態で、所与のメディア・ストリームの様々な「置換」が、生成されたデータまたは収集されたデータに基づいて、メディア・ストリームが始まる前またはメディア・ストリームが視聴者に示されるときのいずれかに、一緒に「混合される」。例えば、視聴者が、「ロマンス関連」として分類される物品に関連する広告に反応する傾向がある場合に、メディア・ストリームの「ロマンチック」版を視聴者に表示することができる。もう１つの例として、メディア・ストリームのビデオ・コンポーネントは変更しないが、特定のシーン（またはクレジットさえ）に再生される音楽を含むオーディオ・コンポーネントを、観察された視聴者プリファレンスに基づいて選択することができる（例えば、オールド・スクール・ラップ、最新のラップ・ヒット、ヒップホップなど）。類似するデータは、オリジナル・メディア・ストリーム内の包括的物品情報を特定の物品情報に置換するのにコンピュータ・グラフィックスを利用する、以前に撮影されたメディア・ストリーム内のプロダクト・プレースメントをターゲティングするのに使用することができる。例えば、収集されたデータは、特定の視聴者について、ブランドＸの腕時計（例えば、ブランドＹの腕時計ではなく）をはめている俳優を表示することが、補足コンテンツに反応するようにその視聴者を誘導する可能性がより高いことを示す場合がある。
言い換えると、上で説明した機能性は、単一のメディア・ストリーム見出しの下で作成される複数の潜在的にオーバーラップするメディア・ストリーム・セグメントの作成をもたらすことができ、特定の視聴者に最適のメディア・ストリーム（例えば、「ベース」メディア・ストリームの特定の版）が、補足コンテンツに対する視聴者の以前の反応を参照することによって判定されるようになる。一実施形態で、視聴者データは、メディア・ストリームが作成される前に一緒に混合されるサブストリームの最適セットを規定する。一実施形態で、サブストリームの混合は、オン・ザ・フライで、潜在的には同一メディア・ストリーム内でより早期に目玉にされた補足コンテンツとの視聴者対話（または対話の欠如）によってトリガされて、発生する。
一実施形態で、データベースには、特定のシーンとして一緒のグループ化されるセグメントの「セット」を識別する情報を含めることができる。次に、視聴者が、特定のシーン中の補足コンテンツへの関心を示す信号を送信するときに、その視聴者に表示されるオプションの１つは、「後の視聴のためにこのシーンを購入する」である。請求される価格は、その視聴者に固有とすることができる。示されている特定のシーンが、検出され、その視聴者のオンライン・アカウント、その視聴者のデジタル・ビデオ・レコーダなどに送られる。
コンテンツ作成者は、視聴者が彼らのクリエイティブ・ビジョン（すなわち、彼らのメディア・ストリーム内で実施される）の連続性を中断することを可能にすることを望まない場合がある。同様に、コンテンツ作成者は、例えばあるテレビジョン番組からｅｃｏｍｍｅｒｃｅウェブ・サイトへの視聴者のジャンプが、視聴率の損失を引き起こす可能性があると心配する可能性がある。特定のメディア・ストリームに関連付けられたマッピングには、この特定のメディア・ストリームに関して、マッピングされた補足コンテンツに、ある種のコンテキスト内でのみアクセスできることを示すコードを含めることができる。これは、視聴者ディスプレイ・デバイスに信号を送ってメディア・ストリームの表示中に「ロックする」（例えば、補足コンテンツをブックマークすることだけを許可する）ことによって、補足コンテンツを視聴者のオンライン・アカウントだけに送信することによって、またはある日付の後になるまで補足コンテンツの提供を許可しないことによって（例えば、公開の早期の週の批判的な「口コミ」聴衆が気を散らされないことを保証するために）実施することができる。
一実施形態で、そこを通って流れるメディア・ストリーム内に埋め込まれたセグメント識別子を読み取ることができる仲介デバイスが、メディア・アクセス・リンク（すなわち、アクセス・プロバイダ）と視聴者ディスプレイ・デバイスとの間に配置される。ユーザが、補足コンテンツを受け取ることへの関心をシグナリングするときに、セグメント識別子が、仲介デバイスによってアクセス・プロバイダに送り返される。仲介デバイスは、視聴者に関する特定の情報（仲介デバイスを設置する際に視聴者が提供する入力から入手することができる）をも送信することができる。次に、アクセス・プロバイダは、関連情報を識別し、仲介デバイスおよび／または視聴者のオンライン・ポータルにフィードバックする。
一実施形態で、仲介デバイスは、セグメント識別子を含む信号を送信する（Ｗｉ−Ｆｉ、ｂｌｕｅｔｏｏｔｈなどを介して）。この信号は、リモート・コントロール・デバイス（例えば、ＴＶリモート、対応セル電話機、または他のデバイス）によって受信される。次に、リモート・コントロール・デバイスは、この信号をアクセス・プロバイダに直接に送信し（Ｗｉ−Ｆｉ、無線などを介して）、上で説明したプロセスをトリガする。
一実施形態で、仲介デバイスは、複数のリモート・コントロール・デバイスのうちの任意の１つまたは複数を使用して操作され、仲介デバイスは、そのリモート・コントロール・デバイスと一致する視聴者ＩＤコードをもアクセス・プロバイダに送信し、その結果、関心をシグナリングする特定の視聴者が識別されるようになる（例えば、母親、父親、および子供のそれぞれが、彼ら自身のリモート・コントロール・デバイスを有する場合がある）。
一実施形態では、単一のリモート・コントロール・デバイスが、複数の視聴者のために使用されるが、そのリモート・コントロール・デバイスが、その瞬間にそのリモート・コントロール・デバイスを使用する特定の視聴者を識別するようにセットされる（例えば、タッチ・スクリーン・メニュー、ボタンなどを介して）。
一実施形態では、各世帯または他の位置が、メディア・ストリームが配送される位置に配置された単一の仲介デバイスを有し（「マスタ」仲介デバイス）、補助レシーバが、その世帯または他の位置内で各ディスプレイ・デバイスと共に配置されて、視聴者の信号を受信し、アクセス・プロバイダに送り返すためにマスタ仲介デバイスにその信号を送り返す（インターネット・プロトコル・テレビジョンＩＰＴＶなどの同一の配送システムを介してまたはセル電話機信号を介するなど、別の配送システムを介してのいずれかで）。
一実施形態で、アクセス・プロバイダは、所与の仲介デバイスに関連付けられた「どの」リモート・コントロール・デバイスが信号を供給したのかだけに頼るのではない。というのは、視聴者が、様々な理由から別の視聴者のリモート・コントロール・デバイスを使用することを選択する場合があるからである。したがって、リモート・コントロール・デバイス識別は、視聴者アイデンティティを判定するための最も支配的要因ではあるが、この情報を、統計的モデルおよび／またはデフォルト・アイデンティティをオーバーライドする視聴者の能力と組み合わせることができる。
一実施形態で、視聴者の要求時に、すべてのクレジット・カード承認および同様に「機密の」入力には、許可されない取引の完了を防ぐために、パスワード入力が先行する。
一実施形態で、音声認識テクノロジ（例えば、音声「指紋」を入手するための音声認識／話者識別の使用）が、仲介デバイスをアクティブ化するために、視聴者の音声と組み合わせて使用される。したがって、リモート・コントロール・デバイスは、当初に、そのリモート・コントロール・デバイスを使用する様々な視聴者の間で区別するようにプログラムされる。
一実施形態で、アクセス・プロバイダは、どの視聴者がメディア・ストリームを一緒に見るように見えるか（例えば、一緒にテレビジョンを見る、世帯の複数の構成員）を判定するために分析を実行することができ、その結果、補足コンテンツ（カスタマイズされる）は、可能性の高い視聴者の「混合」についてターゲティングされるようになる。
一実施形態で、個々の視聴者ではなく、視聴者のありそうなグループが判定され、このグループは、それ自体のターゲティングされた情報を有する。例えば、視聴者のグループが、ヒップホップ音楽を愛する息子とクラシック音楽を愛する父親であると予測される場合に、ユーザのこのグループによって見られるメディア・ストリームに関連付けられる補足コンテンツを、よりニュートラルな人口統計（ヒップホップ人口統計またはクラシック人口統計のどちらでもなく）向けにターゲティングすることができる。
一実施形態で、音声認識テクノロジを使用して、ワンクリック機能を改善することができる。所与のリモート・コントロール・デバイスに関連付けられる視聴者音声の限られたセットを与えられれば、ある音声を、非常に信頼できる形で他の音声から区別することができる。これは、購入を容易にするのに使用することができ、パスワードをタイプするかまたはある他の検証を提供することを必要とするのではなく、各視聴者のプロファイルを、あるタイプのメディア・ストリームを見るためのアクセスなど、ある種のトランザクションだけを許可するようにセットすることができる。
一実施形態で、許可する当事者（例えば、その子供による視聴に関してメディア・ストリームを許可する親）が他の当事者による特定のメディア・ストリームの視聴を許可したという事実が、ある形で記録され、許可する当事者が他の当事者と共にプログラムを見ていることの検証として第三者に提供される。そのような判定は、例えば、学校にサービスとして販売することができる。メディア・ストリームは、許可する当事者が単純にメディア・ストリームを開始し、いなくなることを防ぐために、異なるときに、許可する当事者に音声応答を促すことができる。
一部の視聴者は、広告（またはある種の広告主）に対する嫌悪を有するが、本発明が使用可能にすることのできる他の特徴の多くを高く評価する可能性がある。このために、ある視聴者が、見たくない特定のタイプの補足コンテンツをブロックすることを可能にされるものとすることができる（例えば、動物愛護運動家は、ファスト・フード・チェーンの広告をブロックすることを望む可能性がある）。
一実施形態で、信号に応答して視聴者に補足コンテンツのマッピングされたアイテムを送り返す前に、本発明は、フィルタ（おそらくはその視聴者またはアクセス・プロバイダによって作成された）を介してその補足コンテンツを送り、望まれない情報をすべて除去する。例えば、このフィルタは、特定の物品の広告、特定のタイプの音楽を目玉にする広告、または特定のジャンルの補足コンテンツ（例えば、暴力または成人向けのテーマのコンテンツ）を除去することができる。一実施形態で、この機能性は、ペアレンタル・コントロールの方法として使用することができる。
ビデオ・オンデマンド・サービスを用いる一実施形態では、フィルタリングされるコンテンツのデータベースを使用して、不快なセグメントを「オン・ザ・フライで」メディア・ストリームから実際に除去することができる（例えば、セグメント固有情報の使用および／またはコンテンツ作成者からの入力）。これは、メディア・ストリームの異なる版（例えば、ＰＧ、ＰＧ−１３など）を異なる視聴者に表示することを可能にするはずである。
図９は、本発明による、注釈付きメディア・ストリームを視聴者に提供する方法９００の第２の実施形態を示す流れ図である。方法９００は、例えば、メディア・ストリームの表示に関連するユーザ・デバイスによって実施することができる。具体的に言うと、方法９００は、方法８００とは異なって、「オン・ザ・フライ」注釈付けを可能にする（例えば、事前に決定されたマッピングの援助なしで）。
方法９００は、ステップ９０２で初期化され、ステップ９０４に進み、ここで、方法９００は、ディスプレイ・デバイスを介してメディア・ストリームを表示する。その後、方法９００はステップ９０６に進み、メディア・ストリームの視聴者から第１信号を受け取る。この第１信号は、視聴者が、メディア・ストリーム内に現れる少なくとも１つの物品に関連する補足コンテンツを見ることを望むことを示す。一実施形態で、第１信号は、ボタンを押すことまたは話されたコマンドを介して伝えられる。一実施形態で、方法９００は、方法８００と同様に、マルチモーダル視聴者対話をサポートする。一実施形態で、第１信号は、視聴者が補足コンテンツを即座に見ることを望むことを示す。もう１つの実施形態で、第１信号は、視聴者が補足コンテンツを後の時刻に見ることを望むことを示す。
ステップ９０８で、方法９００は、実質的にリアル・タイムで、第１信号が受け取られた時点またはその前後にメディア・ストリームに現れた１つまたは複数の物品（すなわち、メディア・ストリームのどの部分が、視聴者が第１信号を送ったときに表示されていたか）を識別する。一実施形態で、方法９００は、メディア・ストリームの示された部分に関連するイメージに１つまたは複数の光学文字認識ＯＣＲ技法（例えば、ビデオＯＣＲ、テキスト認識、物体認識、ロゴ認識など）を適用することによって、これらの物品を識別する。この形で、メディア・ストリーム内に現れる（および、視聴者が関心を持つ可能性がある）テキスト、ロゴ、物体、および個人を識別することができる。
次に、方法９００は、ステップ９１０に進み、識別された物品のうちの１つまたは複数に関連する補足コンテンツを取り出す。一実施形態で、この補足コンテンツは、例えばインターネットまたはケーブル・ネットワークを介する接続を介して、ショッピング・ポータルまたは情報ポータル（例えば、インターネット検索エンジンまたはｅ−ｃｏｍｍｅｒｃｅワールド・ワイド・ウェブ・サイト）などのリモート・サーバまたはリモート・データベースから取り出すことができる。例えば、方法９００は、インターネット検索エンジンを使用して、認識されたテキストに関する検索を実行することができる。もう１つの実施形態では、リモート・サーバまたはリモート・データベースは、補足コンテンツをメディア・ストリームのセグメントを識別するセグメント識別子にマッピングする（上で説明したように）マッピングを格納するか、そのマッピングへのアクセスを有する。この場合に、リモート・サーバは、視聴者信号に対応するセグメントを識別する１つまたは複数のセグメント識別子を適当な補足コンテンツと突き合わせる。
ステップ９１２で、方法９００は、適当なときに（例えば、ユーザが補足コンテンツを即座にまたは後にのどちらに見ることを望むかに基づいて）、取り出された補足コンテンツの少なくとも一部を表示する。したがって、例えば、第１信号が、クレジット（例えば、映画の）を描く媒体信号の１つまたは複数のセグメントが表示されたときに受け取られた場合に、方法９００は、そのクレジットに現れる名前の認識に基づいて補足コンテンツを要求し、それに応じて、クレジットのうちの１つまたは複数を、名前を示された個人（１人または複数）に関する追加情報（例えば、映画データベース・エントリ）にリンクされたハイパーリンクに変換することができる。
例えば、図１０は、メディア・ストリームの一部に現れる物品に関する取り出された補足コンテンツを提示する例示的ディスプレイ１０００を示す概略図である。ディスプレイ１０００は、上で説明したようにディスプレイ・デバイスを介して伝えることができる。ディスプレイ１０００は、メニュー・フォーマットで配置され、メディア・ストリームの関連する部分に現れる物品（例えば、衣類、飲み物、コンパクト・ディスク）を描く１つまたは複数のイメージ１００２１〜１００２ｎ（以下では集合的に「イメージ１００２」と称する）を含む。一実施形態で、イメージ１００２は、視聴者が、物品の関連するイメージ１００２を選択することによって、描かれた物品に関する補足コンテンツ（例えば、コンテンツ、価格、購入の機会）を取り出せるように、ハイパーリンクを含む。イメージ１００２の選択は、補足コンテンツを取り出すデバイスに信号を送ることによって行うことができる。
一実施形態で、ディスプレイ１０００は、ある判断基準（例えば、類似する視聴者に関する人気、販売者が支払う料金など）に従って優先順位を付けられる。例えば、視聴者が関心を持つ可能性が最も高い物品であると統計的に判定される物品（例えば、「フレームＸ〜Ｚ中に信号を送る視聴者の７８％がＹブランドのスニーカーにクリック・スルーした」）を描くイメージ１００２を、最も目立つように表示することができる。その代わりに、物品イメージを、その物品を広告するために販売者がどれほど支払うつもりがあるかに従って表示することができる（例えば、販売者が広告のために多く支払うほど、物品イメージがより目立って表示される）。一実施形態で、優先順位上位ｎ個の物品は、イメージとして表示されるが、メニュー内で描かれる残りの物品は、テキスト・ハイパーリンクとして表示されるか、１つまたは複数のサブカテゴリにグループ化される。
一実施形態で、メニュー・ディスプレイ内に描かれる物品は、複数の物品のスコアを比較して物品の相対優先順位を判定できるように、各物品にスコアを与えることによって優先順位を付けられる。一実施形態で、このスコアは、視聴者に関する物品の人気のレベル、所与の視聴者が物品に関心を持つ尤度、およびクリック・スルーごとに物品の販売者によって支払われる料金のうちの少なくとも１つを含む要因の重み付き組合せである。一実施形態で、物品のメニュー内で優先順位を判定するための物品のスコアＳは、
Ｓ＝Ｃｗ１＋Ｖｗ２＋Ｐｗ３
に従って計算され、ここで、Ｃは、物品が視聴者によってメニューから選択されるときに販売者によって支払われるクリック・スルーあたりのコストであり、Ｖは、所与の視聴者の物品へのありそうな関心の統計的尺度（例えば、視聴者の他の観察された関心に基づく）であり、Ｐは、視聴者全般に関する物品の人気の尺度である。ｗ１、ｗ２、およびｗ３は、例えば注釈付きメディア・ストリームおよび関連するサービスのプロバイダ（例えば、ストリーム注釈付けサービス・プロバイダまたはアクセス・プロバイダ）が選択できる、重み付け係数である。
戻って図９を参照すると、ステップ９１４で、方法９００は、視聴者から後続信号を受け取る。一実施形態で、後続信号は、第１信号が受け取られた形のいずれかで受け取ることができる。次に、方法９００はステップ９１６に進み、後続信号が、視聴者がメディア・ストリームに戻る（すなわち、さらなるアクションなしで、現在表示されている補足コンテンツを終了する）ことを望むことを示すかどうかを判定する。方法９００が、ステップ９１６で、視聴者がメディア・ストリームに戻ることを望むことを後続信号が示すと結論する場合には、方法９００は、ステップ９０４に戻り、メディア・ストリームの表示（例えば、補足コンテンツによって遮られない）を再開する。したがって、方法９００は、取り出された情報補足コンテンツを表示する別の信号が受け取られるまで、かつ、それが受け取られない限り、取り出された情報補足コンテンツの表示を停止する。
その代わりに、方法９００が、ステップ９１６で、視聴者がメディア・ストリームに戻ることを望むことを後続信号が示さないと結論する場合には、方法９００は、ステップ９１８に進み、視聴者が補足コンテンツ内に描かれる１つまたは複数の物品を購入することを望むことを後続信号が示すかどうかを判定する。したがって、方法９００は、即時購入の機会をオンデマンドで提供することができる。
方法９００が、ステップ９１８で、視聴者が補足コンテンツ内に描かれる１つまたは複数の物品を購入することを望むことを後続信号が示さないと結論する場合に、方法９００は、ステップ９１２に戻り、補足コンテンツの表示を継続する。その代わりに、方法９００が、ステップ９１８で、視聴者が補足コンテンツ内に描かれた１つまたは複数の物品を購入することを望むことを後続信号が示すと結論する場合に、方法９００は、ステップ９２０に進み、所望の取引を完了する（例えば、インターネットｅ−ｃｏｍｍｅｒｃｅサイトを介して）。取引が完了したならば、方法９００は、ステップ９１４に戻り、どのように進行すべきか（例えば、メディア・ストリームに戻るのか、別の取引を完了するのか）を示す視聴者からの信号を待つ。
さらなる実施形態では、追加のオプションまたはアクションを後続信号に関連付けることができる。例えば、後続信号が、追加の補足コンテンツのプッシュをトリガすることができる（任意選択で、人口統計および／または類似するプリファレンスを有する他のユーザによるレビュー、消費者レポートなどの学習されたユーザ・プリファレンスによって駆動されて）。一実施形態で、追加の補足コンテンツは、視聴者がその視聴者の購入ヒストリを見るか方法９００に関するプリファレンスを編集する機会を提供する。
図１１は、本発明による、注釈付きメディア・ストリームを視聴者に提供する方法１１００の第３の実施形態を示す流れ図である。具体的に言うと、方法１１００は、上で説明した方法８００および９００とは異なって、話された視聴者信号の処理をサポートするように構成される。方法８００および９００と同様に、方法１１００は、注釈付きメディア・ストリームへのアクセスを有するユーザ・デバイス（例えば、テレビジョン、ＤＶＤプレイヤ、ＤＶＲ、セット・トップ・ボックス、ポータブル・メディア・プレイヤ、携帯情報端末、パーソナル・コンピュータ、携帯電話機、飛行機内または自動車内のエンターテイメント・システム、ビデオ・ゲーム・コンソール、または類似物）によって実施することができる。
方法１１００は、ステップ１１０２で初期化され、ステップ１１０４に進み、ここで、方法１１００は、補足コンテンツの１つまたは複数のアイテムへの１つまたは複数のキーワードのマッピングを受け取る。一実施形態で、補足コンテンツは、上で説明したように、メディア・ストリーム内に現れる１つまたは複数の物品に関連する商業的情報に関連付けられる。一実施形態で、マッピングは、例えばインターネットを介して、ケーブル・ネットワークを介して（例えば、リモート・サーバをケーブル・ヘッドエンドとすることができる場合、または、ヘッドエンドが、リモート・サーバとの通信を仲介することができる場合）、または衛星を介してリモート・サーバから受け取ることができる。特定の実施形態は、ＯｐｅｎＣａｂｌｅ ａｐｐｌｉｃａｔｉｏｎ ｐｌａｔｆｏｒｍ（ＯＣＡＰ）またはｄｉｇｉｔａｌ ｖｉｄｅｏ ｂｒｏａｄｃａｓｔｉｎｇ（ＤＶＢ）アプリケーションとして、あるいはＭｏｔｉｏｎ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ（ＭＰＥＧ）トランスポート・ストリーム内のプライベート・セクションとしてマッピングを受け取ることができる。さらなる実施形態では、マッピングは、「ディレクタ」から「オン・ザ・フライで」受け取られ、このディレクタは、メディア・ストリームを実質的にリアル・タイムで見、事前にセットされたリストからの補足コンテンツをキーワードにマッピングする。一実施形態で、マッピングは、メディア・ストリーム内に現れる１つまたは複数の物品に関連する１つまたは複数のワールド・ワイド・ウェブ・サイトのＵＲＬをさらに含む（例えば、後続のルックアップ時間を減らすために）。
ステップ１１０６で、方法１１００は、ディスプレイ・デバイスを介してメディア・ストリームを表示する。一実施形態で、メディア・ストリームの表示は、メディア・ストリームの現在表示されている部分（例えば、現在表示されているセグメント）を識別するセグメント識別子が補足コンテンツの少なくとも１つのアイテムに関連付けられているときに、インジケータを提示することを含む。したがって、メディア・ストリームの視聴者は、表示されている１つまたは複数の物品に関する追加情報が使用可能であるときを自動的に知る（例えば、推測するか照会することを必要とするのではなく）。一実施形態で、このインジケータは、メディア・ストリームの現在表示されている部分が、視聴者が関心を持つと期待される（例えば、人口統計情報、述べられた視聴者プリファレンス、または以前の視聴者アクティビティに基づいて）情報に関連する補足コンテンツの１つまたは複数のアイテムに関連付けられているときに提示される。一実施形態で、このインジケータは、メディア・ストリーム内に表示されるアイコンまたはメディア・ストリーム・プレイヤ（例えば、セット・トップ・ボックス、ＤＶＲ、または類似物）上、ディスプレイ・デバイス上、もしくはリモート・コントロール上の（おそらくは点滅する）ライトなど、ビジュアル・インジケータである。さらなる実施形態で、このインジケータは、可聴インジケータまたは他の知覚インジケータ（例えば、振動するリモート・コントロール）とすることができる。さらなる実施形態では、ディスプレイの第１部分にメディア・ストリームを表示し、ディスプレイの第２部分に現在アクセス可能な補足コンテンツに関するデータを表示する「スプリット・スクリーン」ディスプレイを使用することができる。
次に、方法１１００は、ステップ１１０８に進み、メディア・ストリームの視聴者から第１音声信号を受け取る。第１音声信号は、視聴者が、メディア・ストリーム内に現れる１つまたは複数の物品に関連する補足コンテンツを見ることを望むことを示す。一実施形態で、第１音声信号は、視聴者が補足コンテンツを即座に見ることを望むことを示す（例えば、「自動車を今すぐ表示する」）。もう１つの実施形態では、第１信号は、視聴者が、メディア・ストリームの終りなど、後の時刻に補足コンテンツを見ることを望むことを示す（例えば、「後々のために自動車を保存する」）。さらなる実施形態では、第１音声信号は、視聴者が、関心のあるアイテムを具体的には識別せずに、補足コンテンツを後の時刻に見るために、メディア・ストリーム内の現在位置を保存することを望むことを示す（例えば、「後々のためにマークする」）。
ステップ１１１０で、方法１１００は、第１音声信号を処理して、その中で実施された視聴者コマンドを認識する。一実施形態で、第１音声信号は、１つまたは複数の自動音声認識技法および／または自然言語理解技法に従って処理される。例えば、一実施形態で、第１音声信号は、定義された用語集と共に動作する自動音声認識技法に従って処理される。この実施形態の改善において、定義された用語集は、ステップ１１０４で受け取られるマッピングに含まれるキーワードを含む。特定の実施形態で、定義された用語集は、メディア・ストリームが表示されるときに動的に変更可能であり、用語集が現在「有効」であるキーワードのサブセットを含むようになっている。もう１つの実施形態で、第１音声信号は、メディア・ストリーム自体に関連するものなどの環境雑音を相殺する自動音声認識技法（例えば、参照によってその全体が本明細書に組み込まれている、２００６年９月２８日に出願した米国特許出願第１１／５４１，２８２号に記載の方法など）に従って処理される。もう１つの実施形態で、第１音声信号は、トピック・スポッティングなどの「軽量」自然言語処理技法に従って処理される。
一実施形態で、方法１１００は、マルチモーダル視聴者対話をサポートし、これは、１つまたは複数の追加入力モダリティ（音声に加えて）を、視聴者信号を受け取るのに使用できることを意味する。マルチモーダル対話は、例えば、音声信号を処理する際にエラーを訂正するのに有用である可能性がある。例えば、音声信号を処理する際のエラーは、参照によってその全体が本明細書に組み込まれている米国特許第６７４２０２１号に記載の方法に従って訂正することができる。
ステップ１１１２で、方法１１００は、視聴者コマンドをマッピング内で使用される１つまたは複数のキーワードと突き合わせる。この形で、方法１１００は、補足コンテンツのどのアイテム（１つまたは複数）が視聴者の発するキーワードに対応するかを識別することができる。一実施形態で、視聴者コマンドを既知のキーワードと突き合わせることができない場合に、方法１１００は、その視聴者コマンドを使用して、ショッピング・ポータルまたは情報ポータル（例えば、インターネット検索エンジンまたはｅ−ｃｏｍｍｅｒｃｅワールド・ワイド・ウェブ・サイト）などのデータベースに照会する。この形で、視聴者コマンドを、それでも、関連する補足コンテンツと潜在的に突き合わせることができる。さらなる実施形態では、視聴者コマンドが、照会すべき適当なポータルを選択する自然言語理解技法によって解析される。ある種の実施形態では、データベースを検索するステップは、その両方が参照によってその全体を本明細書に組み込まれている、２００４年８月５日に出願した米国特許出願第１０／９１２，５１７号および２００５年２月２３日に出願した米国特許出願第１１／０６３，３５７号に記載の方法に従って実行される。
次に、方法１１００は、ステップ１１１４に進み、適当な時刻に（例えば、ユーザが補足コンテンツを即座にまたは後の時刻にのどちらに見ることを望むかに基づいて）、対応するキーワードにマッピングされた補足コンテンツを表示する。例えば、発話されたキーワードが、「くるま」または「自動車」である場合に、表示される情報（補足コンテンツ内で実施される）に、メディア・ストリーム内に現れる自動車に関連付けられたメーカーおよび／またはディーラーを含めることができる。一実施形態で、メディア・ストリームの表示は、補足コンテンツが表示されている間に一時停止される。一実施形態で、補足コンテンツは、メディア・ストリームと同一のディスプレイ・デバイスを介して表示される。もう１つの実施形態で、情報は、異なるディスプレイ・デバイスを介して表示される（例えば、メディア・ストリームは、テレビジョンまたは携帯電話機を介して表示されつつあり、補足コンテンツは、視聴者のラップトップ・コンピュータ上に表示されるか、視聴者の電子メール・アカウントに送信される）。
さらなる実施形態で（例えば、キーワードが、曖昧であるか、複数の物品のうちの任意の１つに潜在的に対応する場合）、情報は、ステップ１１１４で、複数の選択可能な物品のメニューの形で表示される。したがって、例えば、キーワード「自動車」が、４つの異なる自動車がメディア・ストリーム内に現れるときに発話される場合に、そのキーワードにマッピングされる補足コンテンツには、４つすべての自動車のイメージを含めることができ、各イメージは、さらに、めいめいの曖昧なキーワード（例えば、「自動車Ａ」、「自動車Ｂ」、「自動車Ｃ」、および「自動車Ｄ」）に関連付けられる。各曖昧なキーワードにマッピングされるメタデータには、めいめいの自動車の製造業者および／またはディーラーのワールド・ワイド・ウェブ・サイトへのリンクを含めることができる。この形で、方法１１００は、曖昧さの除去をサポートする。
もう１つの実施形態で、情報は、それに関して情報が入手可能であるメディア・ストリーム内に現れる物品のメニューまたはリストとして表示される（および、例えば「メニュー」などのキーワードに関連付けることができる）。これは、視聴者が、関連付けられたメディア・ストリームを見る必要なしに、マッピングされた補足コンテンツを通って「サーフィンする」ことを可能にすることができる。
ステップ１１１６で、方法１１００は、視聴者から後続信号を受け取る。一実施形態で、後続信号は、音声信号の形で受け取ることができる。もう１つの実施形態で、後続信号は、キーストロークまたはリモート・コントロールのボタンを押すことを介するなど、異なる形で受け取ることができる。次に、方法１１００はステップ１１１８に進み、後続信号が、視聴者がメディア・ストリームに戻る（すなわち、さらなるアクションなしで、現在表示されている補足コンテンツを終了する）ことを望むことを示すかどうかを判定する。方法１１００が、ステップ１１１８で、視聴者がメディア・ストリームに戻ることを望むことを後続信号が示すと結論する場合には、方法１１００は、ステップ１１０６に戻り、メディア・ストリームの表示（例えば、補足コンテンツによって遮られない）を再開する。したがって、方法１１００は、補足コンテンツを表示する別の信号が受け取られるまで、かつ、それが受け取られない限り、補足コンテンツの表示を停止する。
その代わりに、方法１１００が、ステップ１１１８で、視聴者がメディア・ストリームに戻ることを望むことを後続信号が示さないと結論する場合には、方法１１００は、ステップ１１２０に進み、視聴者が表示された補足コンテンツ内に描かれた１つまたは複数の物品を購入することを望むことを後続信号が示すかどうかを判定する。したがって、方法１１００は、即時購入の機会をオンデマンドで提供することができる。
方法１１００が、ステップ１１２０で、視聴者が表示された補足コンテンツ内に描かれた１つまたは複数の物品を購入することを望むことを後続信号が示さないと結論する場合に、方法１１００は、ステップ１１１４に戻り、補足コンテンツの表示を継続する。その代わりに、方法１１００が、ステップ１１２０で、視聴者が表示された補足コンテンツ内に描かれた１つまたは複数の物品を購入することを望むことを後続信号が示すと結論する場合に、方法１１００は、ステップ１１２２に進み、所望の取引を完了する。取引が完了したならば、方法１１００は、ステップ１１１６に戻り、どのように進行すべきか（例えば、メディア・ストリームに戻るのか、別の取引を完了するのか）を示す視聴者からの信号を待つ。さらなる実施形態では、追加のオプションまたはアクションを後続信号に関連付けることができる。例えば、後続信号が、追加の補足コンテンツのプッシュをトリガすることができる（任意選択で、人口統計および／または類似するプリファレンスを有する他のユーザによるレビュー、消費者レポートなどの学習されたユーザ・プリファレンスによって駆動されて）。一実施形態で、追加の補足コンテンツは、視聴者がその視聴者の購入ヒストリを見るか方法１１００に関するプリファレンスを編集する機会を提供する。
図１２は、本発明による、注釈付きメディア・ストリームを視聴者に提供する方法１２００の第４の実施形態を示す流れ図である。方法１２００は、例えば、メディア・ストリームの表示に関連するユーザ・デバイスによって実施することができる。具体的に言うと、方法１２００は、方法１１００とは異なって、音声サポート付き「オン・ザ・フライ」注釈付け（例えば、事前に決定されたマッピングの援助なしの）を可能にする。
方法１２００は、ステップ１２０２で初期化され、ステップ１２０４に進み、ここで、方法１２００は、ディスプレイ・デバイスを介してメディア・ストリームを表示する。その後、方法１２００はステップ１２０６に進み、メディア・ストリームの視聴者から第１音声信号を受け取る。この第１音声信号は、視聴者が、メディア・ストリーム内に現れる少なくとも１つの物品に関する補足コンテンツを見ることを望むことを示す。一実施形態で、第１音声信号は、視聴者が補足コンテンツを即座に見ることを望むことを示す。もう１つの実施形態で、第１音声信号は、視聴者が補足コンテンツを後の時刻に見ることを望むことを示す。
ステップ１２０８で、方法１２００は、第１音声信号の中で実施された視聴者コマンドを認識するために、第１音声信号を実質的にリアル・タイムで処理する。一実施形態で、第１音声信号は、１つまたは複数の自動音声認識技法および／または自然言語理解技法に従って処理される。例えば、一実施形態で、第１音声信号は、定義された用語集と共に動作する自動音声認識技法に従って処理される。もう１つの実施形態で、第１音声信号は、メディア・ストリーム自体に関連するものなどの環境雑音を相殺する自動音声認識技法（例えば、参照によってその全体が本明細書に組み込まれている、２００６年９月２８日に出願した米国特許出願第１１／５４１，２８２号に記載の方法など）に従って処理される。もう１つの実施形態で、第１音声信号は、トピック・スポッティングなどの「軽量」自然言語処理技法に従って処理される。
一実施形態で、方法１２００は、方法１１００に似て、マルチモーダル視聴者対話をサポートし、これは、１つまたは複数の追加入力モダリティ（音声に加えて）を、視聴者信号を受け取るのに使用できることを意味する。マルチモーダル対話は、例えば、音声信号を処理する際にエラーを訂正するのに有用である可能性がある。例えば、音声信号を処理する際のエラーは、参照によってその全体が本明細書に組み込まれている米国特許第６７４２０２１号に記載の方法に従って訂正することができる。
次に、方法１２００は、ステップ１２１０に進み、例えばインターネットまたはケーブル・ネットワークを介する接続を介して、認識された視聴者コマンドに従ってリモート・サーバに照会する。例えば、方法１２００は、ショッピング・ポータルまたは情報ポータル（例えば、インターネット検索エンジンまたはｅ−ｃｏｍｍｅｒｃｅワールド・ワイド・ウェブ・サイト）などのデータベースを使用して、視聴者コマンド内の認識された単語に関する検索を実行することができる。一実施形態で、ステップ１２１０に従う照会は、認識された単語に基づいて適当な照会ポータル（例えば、検索エンジンまたはｅ−ｃｏｍｍｅｒｃｅワールド・ワイド・ウェブ・サイト）を選択することを含む。もう１つの実施形態では、リモート・データベースは、補足コンテンツをキーワードにマッピングする（上で説明したように）マッピングを格納するか、そのマッピングへのアクセスを有する。この場合に、リモート・サーバは、認識された視聴者コマンド内の１つまたは複数の単語を補足コンテンツと突き合わせる。ある種の実施形態では、検索のステップは、その両方が参照によってその全体を本明細書に組み込まれている、２００４年８月５日に出願した米国特許出願第１０／９１２，５１７号および２００５年２月２３日に出願した米国特許出願第１１／０６３，３５７号に記載の方法に従って実行される。
ステップ１２１２で、方法１２００は、適当なときに（例えば、ユーザが補足コンテンツを即座にまたは後にのどちらに見ることを望むかに基づいて）、照会結果の少なくとも一部を表示する。したがって、例えば、第１音声信号が、クレジット（例えば、映画の）を描く媒体信号の１つまたは複数のセグメントが表示されたときに受け取られ、俳優の名前が、音声認識処理ステップ（すなわち、ステップ１２０８）で認識された場合に、方法１２００は、その俳優に関する補足コンテンツ（例えば、映画データベース・エントリ）を表示することができる。
ステップ１２１４で、方法１２００は、視聴者から後続信号を受け取る。一実施形態で、後続信号は、音声信号である。もう１つの実施形態で、後続信号は、キーストロークまたはボタン押下げなどの非音声信号である。次に、方法１２００はステップ１２１６に進み、後続信号が、視聴者がメディア・ストリームに戻る（すなわち、さらなるアクションなしで、現在表示されている補足コンテンツを終了する）ことを望むことを示すかどうかを判定する。方法１２００が、ステップ１２１６で、視聴者がメディア・ストリームに戻ることを望むことを後続信号が示すと結論する場合には、方法１２００は、ステップ１２０４に戻り、メディア・ストリームの表示（例えば、補足コンテンツによって遮られない）を再開する。したがって、方法１２００は、補足コンテンツを表示する別の信号が受け取られるまで、かつ、それが受け取られない限り、補足コンテンツの表示を停止する。
その代わりに、方法１２００が、ステップ１２１６で、視聴者がメディア・ストリームに戻ることを望むことを後続信号が示さないと結論する場合には、方法１２００は、ステップ１２１８に進み、視聴者が表示された補足コンテンツ内に描かれる１つまたは複数の物品を購入することを望むことを後続信号が示すかどうかを判定する。したがって、方法１２００は、即時購入の機会をオンデマンドで提供することができる。
方法１２００が、ステップ１２１８で、視聴者が表示された補足コンテンツ内に描かれる１つまたは複数の物品を購入することを望むことを後続信号が示さないと結論する場合に、方法１２００は、ステップ１２１２に戻り、照会結果の表示を継続する。その代わりに、方法１２００が、ステップ１２１８で、視聴者が表示された補足コンテンツ内に描かれた１つまたは複数の物品を購入することを望むことを後続信号が示すと結論する場合に、方法１２００は、ステップ１２２０に進み、所望の取引を完了する（例えば、取り出されたインターネットｅ−ｃｏｍｍｅｒｃｅサイトを介して）。取引が完了したならば、方法１２００は、ステップ１２１４に戻り、どのように進行すべきか（例えば、メディア・ストリームに戻るのか、別の取引を完了するのか）を示す視聴者からの信号を待つ。さらなる実施形態では、追加のオプションまたはアクションを後続信号に関連付けることができる。例えば、後続信号が、追加の補足コンテンツのプッシュをトリガすることができる（任意選択で、人口統計および／または類似するプリファレンスを有する他のユーザによるレビュー、消費者レポートなどの学習されたユーザ・プリファレンスによって駆動されて）。一実施形態で、追加情報は、視聴者がその視聴者の購入ヒストリを見るか方法１２００に関するプリファレンスを編集する機会を提供する。
当業者は、本発明の方法が、広告の分野に限定されないことを了解するであろう。例えば、メディア・ストリーム・セグメント識別子を、本発明に従ってプルして、ある正確な瞬間にまたは正確な条件もしくは視聴者判断基準の下で発生するある種のパラメータを追跡することができる。例えば、本発明の方法を、所与の母集団の視聴習慣を判定するために「統計的に有意な」サンプル（例えば、全国の、人口統計固有の、または部分集団固有の）を識別するように適合させることができる。その代わりに、本発明の方法を、視聴者があるテレビジョン番組から「他に切り替える」ときを判定する（例えば、ｘ秒おきにセグメント識別子をプルすることによって）ように適合させることができる。一実施形態では、所与の時間期間にわたって発生するセグメント識別子が、ユーザ・デバイス（例えば、セット・トップ・ボックス）内に格納される。もう１つの実施形態では、ユーザ・デバイスが、所与の時刻にまたは所与のレートでセグメント識別子をポーリングするようにプログラムされる。ユーザ・デバイスは、その後、これらのセグメント識別子をさらなる分析のために第三者（例えば、ストリーム注釈付けサービス・プロバイダまたはアクセス・プロバイダ）に送信することができる。
さらなる実施形態で、補足コンテンツのうちでセグメント識別子にマッピングされる（かつ、例えばストリーム注釈付けサービス・プロバイダまたはアクセス・プロバイダによって格納される）部分は、ミニ・アプリケーションまたは命令セットをトリガするソフトウェアを含む。例えば、あるセグメント識別子に応答して送信されるトリガは、視聴者がゲーム番組の好みの競争者に投票するよう求められる投票ミニ・アプリケーションをアクティブ化するように視聴者セット・トップ・ボックスに指示することができる。このソフトウェアは、自動的に（例えば、フレームｘが表示されるときに）または視聴者信号の際に（例えば、視聴者がフレームｘ〜ｚの間に信号を送るときに）アクティブ化されるものとすることができる。
上で述べたように、本発明の実施形態は、視聴者アクティビティをログ記録する（例えば、データ・マイニングのために）ように拡張することができる。例えば、メディア・ストリーム内で描かれる物品に関する情報の視聴者要求を、要求された補足コンテンツを提示した結果として行われる視聴者購入と同様に追跡することができる。このデータは、所与のメディア・ストリームに関して使用可能にされる補足コンテンツをカスタマイズするのを援助することができる。例えば、使用可能にされる補足コンテンツを、視聴者の年齢、位置、以前の購入習慣、視聴習慣、および類似物に従ってカスタマイズすることができる。さらに、このデータは、所与の製品またはサービスに関連する補足コンテンツをいつ、どこに、どのように配置すべきかに関する料金構造を決定するのを援助することができる。
図１５は、本発明による、注釈付きメディア・ストリームを視聴者に提供する方法１５００の第５の実施形態を示す流れ図である。方法１５００は、例えば、図１のアクセス・プロバイダ１０６によってその全体を実施することができる（例えば、テレビジョン、ＤＶＤプレイヤ、ＤＶＲ、セット・トップ・ボックス、ポータブル・メディア・プレイヤ、携帯情報端末、パーソナル・コンピュータ、携帯電話機、飛行機内または自動車内のエンターテイメント・システム、ビデオ・ゲーム・コンソール、専用デバイス、または注釈付きメディア・ストリームへのアクセスを有する類似物などのユーザ・デバイスを介して）。代替案では、方法１５００を、ストリーム注釈付けサービス・プロバイダ１１２と共にアクセス・プロバイダ１０６によって実施することができる。具体的に言うと、方法１５００は、メディア・ストリームのセグメントを識別するセグメント識別子が中間ノードにマッピングされ、中間ノードが補足コンテンツのアイテムにマッピングされる（例えば、上で説明したように）注釈付きメディア・ストリームを提供することを意図されたものである。
方法１５００は、ステップ１５０２で初期化され、ステップ１５０４に進み、ここで、方法１５００は、メディア・ストリームを受け取る。メディア・ストリームのセグメントを識別するセグメント識別子が中間ノードにマッピングされる実施形態では、メディア・ストリームは、そのメディア・ストリームの個々のフレームが属するセグメントを記述するメタデータをも含む。一実施形態で、このメタデータは、メディア・ストリーム内に含まれるのではなく、例えばインターネットを介して、ケーブル・ネットワークを介して（例えば、リモート・サーバをケーブル・ヘッドエンドとすることができる場合、または、ヘッドエンドが、リモート・サーバとの通信を仲介することができる場合）、または衛星を介してリモート・サーバから受け取ることができる。特定の実施形態は、ＯｐｅｎＣａｂｌｅ ａｐｐｌｉｃａｔｉｏｎ ｐｌａｔｆｏｒｍ（ＯＣＡＰ）またはｄｉｇｉｔａｌ ｖｉｄｅｏ ｂｒｏａｄｃａｓｔｉｎｇ（ＤＶＢ）アプリケーションとして、あるいはＭＰＥＧトランスポート・ストリーム内のプライベート・セクションとしてマッピングを受け取ることができる。
ステップ１５０６で、方法１５００は、ディスプレイ・デバイスを介してメディア・ストリームを表示する。次に、方法１５００は、ステップ１５０８に進み、メディア・ストリームの視聴者から第１信号を受け取る。第１信号は、視聴者が、メディア・ストリーム内の現在位置に関連付けることができる（すなわち、対応するセグメント識別子にマッピングされた）すべての補足コンテンツを見ることを望むことを示す。第１信号は、ボタン（例えば、リモート・コントロール上、キーボード上、マウス上、ライト・ペン上、またはレーザ・ポインタ上の）を押すことを介してまたは話された（例えば、マイクロホンに、携帯電話機に、またはｖｏｉｃｅ−ｏｖｅｒ−ＩＰ送受話器に）コマンドを介して伝えることができる。一実施形態で、方法１５００は、マルチモーダル視聴者対話をサポートし、これは、複数の入力モダリティを、視聴者信号を受け取るのに使用できることを意味する。マルチモーダル対話は、例えば、視聴者信号を処理する際にエラーを訂正するのに有用である可能性がある。例えば、視聴者信号を処理する際のエラーは、参照によってその全体が本明細書に組み込まれている米国特許第６７４２０２１号に記載の方法に従って訂正することができる。一実施形態で、第１信号は、視聴者が補足コンテンツを即座に見ることを望むことを示す。もう１つの実施形態で、第１信号は、視聴者が補足コンテンツを後の時刻に（例えば、メディア・ストリームの終りに）見ることを望むことを示す。さらなる実施形態で、第１信号は、視聴者が、関心のある物品を具体的には識別せずに、補足コンテンツを後の時刻に見るために、メディア・ストリーム内の現在位置を保存することを望むことを示す（例えば、「後々のためにマークする」）。
ステップ１５１０で、方法１５００は、メタデータに従って、どのセグメント識別子が、第１信号が受け取られた時点に対応するか（すなわち、メディア・ストリームのどの部分が、視聴者が第１信号を送ったときに表示されていたか）を判定する。一実施形態（例えば、セグメント識別子がハッシュ生成された識別子を含む場合）では、この判定は、現在のフレームのハッシュを計算し、計算されたハッシュに関連するセグメントを識別することによって行われる。時間オフセット（メディア・ストリームの始めからまたはある内部境界からのいずれか）が、セグメントのインデックスとして使用される実施形態では、メタデータを供給する必要はなく、ディスプレイ・デバイスまたは関連するハードウェアの内部クロックを利用して、メディア・ストリームの上映時間を計算することができる。もう１つの実施形態では、タイムコード・データまたは現在のフレーム内に既に存在する他の内部情報を使用して、現在のセグメントおよび対応するセグメント識別子を判定する。
ステップ１５１１で、方法１５００は、マッピングに従って、どの補足コンテンツが現在のセグメント識別子からマッピングされているかを判定する。ステップ１５１１は、ユーザのデバイスによって直接に実行することができ、あるいは、ユーザのデバイスによる要求時にリモート・コンピュータによって実行することができる。まず、現在のセグメント識別子からマッピングされている中間ノードを入手する（例えば、第１マッピングを介して）。次に、一実施形態で、入手された中間ノードからマッピングされている（例えば、第２マッピングを介して）補足コンテンツのアイテムを、ステップ１５１２での表示のために取り出す。
方法１５００は、次に、ステップ１５１２に進み、適当なときに（例えば、ユーザが補足コンテンツを即座にまたは後にのどちらに見ることを望むかに基づいて）、取り出された補足コンテンツを表示する。一実施形態で（例えば、補足コンテンツの複数の取り出されたアイテムがある場合）、補足コンテンツは、選択可能な物品のメニューの形で表示される。したがって、例えば、第１信号が、ある女優を描くメディア・ストリームの１つまたは複数のフレームが表示されているときに受け取られた場合に、これらのフレームから（間接的に）マッピングされた補足コンテンツには、その女優のフィルモグラフィおよびその女優が着ているセーターに関する情報を含めることができる。したがって、その第１信号に応答して表示される補足コンテンツには、その女優のイメージおよびそのセーターのイメージを含めることができ、ここで、これらのイメージのそれぞれには、追加情報を含むワールド・ワイド・ウェブ・ページおよび商品またはサービスを購入する機会へのハイパーリンクを関連付けることができる。一実施形態で、メディア・ストリームの表示は、取り出された補足コンテンツが表示されている間に一時停止される。一実施形態で、取り出された補足コンテンツは、メディア・ストリームと同一のディスプレイ・デバイスを介して表示される。もう１つの実施形態で、取り出された補足コンテンツは、異なるディスプレイ・デバイスを介して表示される（例えば、メディア・ストリームは、テレビジョンまたは携帯電話機を介して表示されつつあり、取り出された補足コンテンツは、視聴者のラップトップ・コンピュータ上に表示されるか、視聴者の電子メール・アカウントに送信される）。
ステップ１５１４で、方法１５００は、視聴者から後続信号を受け取る。一実施形態で、後続信号は、第１信号が受け取られた形のいずれかで受け取ることができる。次に、方法１５００はステップ１５１６に進み、後続信号が、視聴者がメディア・ストリームに戻る（すなわち、さらなるアクションなしで、現在表示されている補足コンテンツを終了する）ことを望むことを示すかどうかを判定する。方法１５００が、ステップ１５１６で、視聴者がメディア・ストリームに戻ることを望むことを後続信号が示すと結論する場合には、方法１５００は、ステップ１５０６に戻り、メディア・ストリームの表示（例えば、補足コンテンツによって遮られない）を再開する。したがって、方法１５００は、補足コンテンツを表示する別の信号が受け取られるまで、かつ、それが受け取られない限り、補足コンテンツの表示を停止する。
その代わりに、方法１５００が、ステップ１５１６で、視聴者がメディア・ストリームに戻ることを望むことを後続信号が示さないと結論する場合には、方法１５００は、ステップ１５１８に進み、視聴者が表示された補足コンテンツ内に描かれた１つまたは複数の物品を購入することを望むことを後続信号が示すかどうかを判定する。したがって、方法１５００は、即時購入の機会をオンデマンドで提供することができる。
方法１５００が、ステップ１５１８で、視聴者が表示された補足コンテンツ内に描かれた１つまたは複数の物品を購入することを望むことを後続信号が示さないと結論する場合に、方法１５００は、ステップ１５１２に戻り、補足コンテンツの表示を継続する。その代わりに、方法１５００が、ステップ１５１８で、視聴者が表示された補足コンテンツ内に描かれた１つまたは複数の物品を購入することを望むことを後続信号が示すと結論する場合に、方法１５００は、ステップ１５２０に進み、所望の取引を完了する。取引が完了したならば、方法１５００は、ステップ１５１４に戻り、どのように進行すべきか（例えば、メディア・ストリームに戻るのか、別の取引を完了するのか）を示す視聴者からの信号を待つ。さらなる実施形態では、追加のオプションまたはアクションを後続信号に関連付けることができる。例えば、後続信号が、追加の補足コンテンツのプッシュをトリガすることができる（任意選択で、人口統計および／または類似するプリファレンスを有する他のユーザによるレビュー、消費者レポートなどの学習されたユーザ・プリファレンスによって駆動されて）。一実施形態で、追加の補足コンテンツは、視聴者がその視聴者の購入ヒストリを見るか方法１５００に関するプリファレンスを編集する機会を提供する。
方法１５００は、メディア・ストリームの表示が完了するまで、処理を継続し、ユーザからの信号を待つ。
前に注記したように、従来技術の手法の主要な不利益は、メディア・ストリーム内のプロダクト・プレースメントに関連する情報（例えば、補足コンテンツ）が固定される傾向があることである。人口統計、性別、および類似物などの判断基準に基づいて、メディア・ストリーム内で描かれる物品に関する差別化された情報をそのメディア・ストリームの視聴者に提供する単純な形はない。さらに、特定の情報が特定のビデオ・セグメントに関連付けられていない場合に、情報のどのアイテムが最も関連し、説得力がある可能性があるかを計算する形はない。これらの重要な不利益は、中間ノードのオントロジにまたがって計算することによって、本手法で克服される。
例えば、特定のセグメント識別子が、オントロジ・インスタンス「ブランドＸの苺ゼリー」を表す中間ノードへ第１マッピングを介してマッピングされ、この中間ノードから第２マッピングを介してマッピングされた補足コンテンツのアイテムがない状況を検討されたい。しかし、オントロジ概念「ゼリー」を表す中間ノードにマッピングされた補足コンテンツのアイテム「食料雑貨店Ａのクーポン」はある。この例のオントロジが、「ｉｓ−ａ」関係を含み、インスタンス「ブランドＸの苺ゼリー」がクラス「ゼリー」のメンバであると理解されるようになっている場合に、方法１５００は、このオントロジに関して、中間ノード「ブランドＸの苺ゼリー」へのマッピングが提示されるときに、補足コンテンツ「食料雑貨店Ａのクーポン」を返すことが適当であると計算することができる。
したがって、一般に、ある種の実施形態で、方法１５００が、セグメント識別子が第１マッピングを介して中間ノードＮにマッピングされ、その中間ノードＮがいかなる物品への第２マッピングも有しない（または、おそらく、後で述べるように、制約の下で望ましくない第２マッピングを有する）と判定するときに、補足コンテンツのアイテムを、実際に、アイテムを突き止めるためにオントロジを「ウォークする」ことによって検索することができる。インスタンスからクラスへ、およびクラスからスーパークラスへとオントロジを「上に」ウォークすることによって、「ゼリー」の以前の例と同様に、より一般的な概念にマッピングされた補足コンテンツのアイテムを突き止めることができる。ここで、特定のインスタンス・ノードからそれを含むクラスに進むことによって、クーポンが突き止められ、そのクーポンをユーザに返すことができる。したがって、オントロジ内で維持されるインスタンスとクラスとの間の関係は、ユーザに返すべきアイテムの計算を可能にする。
上の例とは逆に、方法１５００は、クラスからサブクラスへ、およびクラスからインスタンスへとオントロジを「下に」ウォークして、オントロジのより特定の部分を表す中間ノードからマッピングされた補足コンテンツのアイテムを提供することもできる。例えば、あるセグメント識別子が、第１マッピングを介してオントロジ・クラス「ペンキ」を表す、色属性に「緑」をセットされた中間ノードにマッピングされ、このクラスの、補足コンテンツの関連付けられたアイテムを有する「ブランドＸの黄緑色のペンキ」を表すインスタンスが存在すると仮定する。オントロジをより特定のアイテムへウォークすることによって、この方法は、補足コンテンツのこのアイテムを突き止め、取り出すことができる。さらに、類似する形でインスタンスまたはクラスの姉妹（すなわち、共通の直接のスーパークラスを共有するインスタンスおよびクラス）に「ウォーク」し、上、下、および姉妹のウォークを様々な組合せで組み合わせることもできる。マッピングされたノードから姉妹ノードへどれほど遠くまでこの方法がウォークすることを許可されるかを制御するために、制約が、優先的に提供される。例えば、特定のオントロジ内でサブクラスを２つ上にウォークすることは、この方法が補足コンテンツの特定のアイテムを取り出した理由をユーザが理解することがむずかしすぎることを意味するので、離れすぎている場合がある。正確な制約は、特定の実施形態で使用される特定のオントロジに関する判断の実行に従って確立される。
「ｉｓ−ａ」関係に加えて「ｐａｒｔ−ｏｆ」関係が提供されるオントロジでは、返すべき補足コンテンツのアイテムの検索に、部分から全体を突き合わせることを含めることもできる。例えば、それぞれオントロジ概念「さくさくピーナッツ・バター」および「苺ゼリー」を表す２つの中間ノードにマッピングされたセグメント識別子Ｓを検討されたい。この例のオントロジは、「ｉｓ−ａ」関係を提供し、「さくさくピーナッツ・バター」がクラス「ピーナッツ・バター」の一部であることと、「苺ゼリー」がクラス「ゼリー」の一部であることとがわかるようになっている。さらに、この例のオントロジは、クラス「ピーナッツ・バター」および「ゼリー」が、クラス「ピーナッツ・バターとゼリーのサンドイッチ」の２つの部分になるように、「ｐａｒｔ−ｏｆ」関係を提供する。補足コンテンツのアイテムの検索において、前に説明したようにオントロジをスーパークラスへウォークするときに、クラス関係が「ｐａｒｔ−ｏｆ」関係である場合に、スーパークラスを訪問する選択を、複数の形で行うことができる。まず、各部分サブクラスからの少なくとも１つのアイテムが存在する場合に限って、スーパークラスをウォークすることができる（例えば、「ゼリー」および「ピーナッツ・バター」のそれぞれの少なくとも１つのメンバが、現在のセグメント識別子からマッピングされている場合に限って、「ピーナッツ・バターとゼリーのサンドイッチ」にリンクされたアイテムを返す）。代替案では、部分のいずれかが現在のセグメント識別子からマッピングされている場合に、スーパークラスにウォークすることができる。
これまでに述べた実施形態では、中間ノードから補足コンテンツのアイテムへのマッピングが、すべての情況で適用可能であることを暗黙のうちに仮定してきた。しかし、いくつかの実施形態で、アイテムの間の選択物からの特定のアイテムを提示する能力が望ましい（例えば、１０代にアイテムＡを提供し、より若い子供に代替アイテムＢを提供するために）。そのような選択は、１つの中間ノードを補足コンテンツの多数のアイテムにマッピングし、マッピングに対する制約を設けることによって達成することができる。例えば、補足情報の３つのアイテムＰ１、Ｐ２、およびＰ３にマッピングされる中間ノードＮを検討されたい。各そのようなマッピングは、関連付けられた制約Ｃ１、Ｃ２、およびＣ３を有する。第１の手法では、制約は、ブール条件として解釈され、制約されたマッピングの意味が、「ＩＦ Ｃ１ ＴＨＥＮ Ｐ１」などになる。この制約は、相互に排他的である必要はなく、補足コンテンツの複数のアイテムを、条件の任意の特定のセットについて返すことが可能になっている。さらに、制約が、網羅的である必要はなく、条件の特定のセットの下で、真に評価される制約がなく、補足コンテンツのアイテムが返されない場合がある。「デフォルト」制約を供給することもでき、補足コンテンツの他のアイテムが条件の下で返されない場合には、デフォルト・アイテムが返される。制約は、ブール演算子、数値比較子、および文字列比較子を含むことができ、複数の部分項を有することができる。
制約は、人口統計、デバイス・タイプ、および類似物を含む、メディア・ストリームを見る視聴者に関する知識を記述する変数を含むことが企図されている。例えば、制約には、「ｖｉｅｗｅｒ’ｓ ａｇｅ（視聴者の年齢）＞３０」、「ｖｉｅｗｅｒ’ｓ ｉｎｃｏｍｅ（視聴者の収入）＞＄１００，０００」、「ｖｉｅｗｅｒ’ｓ ｚｉｐ ｃｏｄｅ（視聴者の郵便番号）＝９４０２５」、「ｖｉｅｗｅｒ’ｓ ｌａｎｇｕａｇｅ（視聴者の言語）＝Ｅｓｐａｎｏｌ（スペイン語）」、「ｖｉｅｗｅｒ’ｓ ｄｅｖｉｃｅ（視聴者のデバイス）＝ＤＶＲ ｏｒ ｃｅｌｌｕｌａｒ ｔｅｌｅｐｈｏｎｅ（セル電話機）」を含めることができる。制約には、オントロジ内の特定のインスタンスまたはクラスに関連する属性を含めることもできる。
さらなる実施形態では、制約を確率的とすることができる。これは、視聴者に関する情報が、既知ではないが、学習手法によって視聴者挙動から推論済みである状況を可能にする。学習は、視聴者の視聴習慣、クリック・スルーおよび購入習慣、ならびに類似物に適用することができる。例えば、確率的制約を、「（Ｐｒｏｂａｂｉｌｉｔｙ ｔｈａｔ ｔｈｅ ｖｉｅｗｅｒ＞３０ ｙｅａｒｓ ｏｌｄ）＞７５％」（（視聴者＞３０歳である確率）＞７５％”）とすることができる。
ＩＦ Ｘ ＴＨＥＮ Ｙフォーマットの「ハード」制約に加えてまたはその代わりに、条件が重みを提供する「ソフト」制約を使用することができる。返されるアイテム（１つまたは複数）は、最低の（または最高の）総重み（１つまたは複数）を有するアイテムである。例えば、補足コンテンツの２つのアイテムＩ１およびＩ２にマッピングされた中間ノードＮを検討されたい。ノードＮからアイテムＩ１へのマッピングは、３つのソフト制約「ｖｉｅｗｅｒ’ｓ ａｇｅ＞３０、ｗｅｉｇｈｔ（重み）＝１；」、「ｖｉｅｗｅｒ’ｓ ｉｎｃｏｍｅ＜＄６０，０００、ｗｅｉｇｈｔ＝４；」、および「ｖｉｅｗｅｒ’ｓ ｓｔａｔｅ（視聴者の州）＝Ａｒｉｚｏｎａ、ｗｅｉｇｈｔ＝−３」を有する。ノードＮからアイテムＩ２へのマッピングも、３つのソフト制約「ｖｉｅｗｅｒ’ｓ ａｇｅ＞５０、ｗｅｉｇｈｔ＝１；」、「ｖｉｅｗｅｒ’ｓ ｉｎｃｏｍｅ＞＄１００，０００、ｗｅｉｇｈｔ＝−２；」、「ｔｉｍｅ ｏｆ ｄａｙ（時刻）＞１２：０１ ａｍ ＡＮＤ ｔｉｍｅ ｏｆ ｄａｙ＜５：００ａｍ、ｗｅｉｇｈｔ＝−３」を有する。この２つのアイテムの間で選択するために、方法１５００は、各制約の重みの合計を計算する。視聴者が、４０歳であり、アリゾナ州におり、毎年７５０００ドルを稼ぐことの知識の下で、アイテムＩ１へのマッピングの重みは、−２になるはずである。アイテムＩ２へのマッピングの重みは、１１ａｍには０になるはずである。３：００ａｍには、アイテムＩ２へのマッピングの重みは、−９になるはずである。したがって、１１：００ａｍには、アイテムＩ１が、最低の重みを有し、取り出される。３：００ａｍには、アイテムＩ２が最低の重みを有し、アイテムＩ１の代わりに取り出される。
図２９に、補足コンテンツのディスプレイでの視聴者駆動制約の使用を示す。例えば、メディア・ストリームの視聴者が、その視聴者のディスプレイ・デバイス２９０４上に現在描かれているメディア・ストリームのセグメント識別子に関連する補足コンテンツを見ることに関心を持っていることを示す信号を送信する（例えば、リモート・コントロール２９００を介してセット・トップ・ボックス２９０２に）ことができる。この信号に従って、セット・トップ・ボックス２９０２は、メディア・ストリームの現在表示されているセグメントを識別するセグメント識別子と視聴者を識別する視聴者識別子との両方を読み取ることができる。図示されているように、視聴者識別子は、データベース２９０８内で、この視聴者が「高い」レベルの収入を有することを示す情報にマッピングされている。
図３０に、補足コンテンツを選択するための視聴者駆動制約の使用の結果を示す。図２９の例を継続し、セグメント識別子が、財布、セーター、およびサングラスに関連する補足コンテンツにマッピングされたと仮定する。さらに、セーターが、補足コンテンツの複数の異なるアイテム３０００１〜３０００ｎ（以下では集合的に「アイテム３０００」と称する）に関連付けられ（例えば、オントロジ内の包括的な「セーター」ノードを介して）、第１アイテム３０００１は、低収入視聴者に表示すべきセーターに関連し、第２アイテム３０００２は、中収入視聴者に表示すべきセーターに関連し、第３アイテム３０００ｎは、高収入視聴者に表示すべきセーターに関連すると仮定する。視聴者の視聴者識別子は、その視聴者を高収入視聴者として識別したので、視聴者がセーターに関するさらなる情報を要求するときには、補足コンテンツの第３アイテム３０００ｎ（高収入視聴者に表示すべきセーターに関連する）が、取り出され、表示される。
マッピングされた中間ノードの間の相互関係を記述するオントロジを維持する、図１４および１５を参照して本明細書で説明した手法は、高度なデータ・マイニングを実行する際に有利に使用することができる。素朴なデータ・マイニング手法では、補足コンテンツの特定のアイテムへの関心を表した（例えば、「クリック・スルー」することまたは商取引を完了することによって）視聴者の人数を計算することができる。しかし、そのような手法は、本フレームワーク内で入手できる大量の情報を欠いている。例えば、特定のタイプの物品を表すオントロジ・クラスに含まれるすべてのサブクラスおよびインスタンス内で示された関心を集計することによって、そのタイプの物品において示された関心を判定することができる。
さらに、相関を計算することができる。オントロジが、可視物品の意味でメディア・ストリームのセグメントによって伝えられる情報を記述するだけではなく、セグメントに関連する概念にも関する中間ノードへのマッピングを可能にするクラスおよびインスタンスを含むことが望ましい。例えば、概念には、セグメントの「ムード」（例えば、アクション、カー・チェイス、ロマンス）、バックグラウンド・ミュージック、メディア・ストリームのジャンル（例えば、ドラマ、ホラー、ユーモア）、および類似物を含めることができる。そのような概念が使用される実施形態では、データ・マイニング・プロセスが、物品、物品のタイプ、および概念と視聴者の人口統計とを相関させることができる。例えば、「カー・チェイス」および「アクション」というムード概念の間でクラス「スポーツ・カー」において示された関心を別々に集計することによって、視聴者が、包括的アクション・シーン内よりもチェイス・シーン中にしばしばスポーツ・カーへの関心を明示したかどうかを判定することができる。この情報を提供することによって、補足コンテンツのマッピングされたアイテムが広告を含む場合に、広告主は、彼らの製品がどのタイプのシーンで最も注目を集めるかを判定し、彼らの広告予算を適当に、特定の視聴者と人口統計的に類似する視聴者との両方にターゲティングすることができる。さらに、映画制作者および広告主は、このマイニングされた情報を使用して、特定のプロダクト・プレースメントの機会について請求しなければならない価格をよりよく判定することができる。
本発明のさらなる実施形態では、補足コンテンツのマッピングまたは提供を、メディア・ストリームを作成するか提供するものと同一の個人または実体によって実行することができる。そのような実施形態は、インターネットなどのネットワークを介するメディア・ストリームの配信（例えば、ユーザによってアップロードされたメディア・ストリームをホスティングするサービスを介する）に特によく適する。そのようなサービスに関連する本発明の諸態様の実施は、サービスが確固とした収入源を生成することを可能にし、この収入源は、サービスが、大量のマルチメディア・コンテンツに対処するのに必要な帯域幅およびストレージを提供することを可能にする。さらに、本発明は、コンテンツ作成者が、アクセス・プロバイダによって実現される収入を共有することによって、彼らが作成したコンテンツを貨幣化することを可能にする。
図１６は、例えば、本発明による、補足コンテンツをメディア・ストリームに関連付ける方法１６００の一実施形態を示す流れ図である。方法１６００は、例えば、アクセス・プロバイダのユーザ（例えば、コンテンツ作成者またはアップローダ）によって実施することができる。方法１６００は、ステップ１６０２で初期化され、ステップ１６０４に進み、ここで、メディア・ストリーム（例えば、ビデオ）が作成され（任意選択で、編集ステップおよび他の制作ステップを含む）、ＭＰＥＧなどのデジタル・フォーマットでコンピューティング・デバイス（例えば、パーソナル・コンピュータ、携帯電話機、携帯情報端末、または類似物）にロードされる。例えば、図３２に、コンピューティング・デバイスにロードされた例示的メディア・ストリーム３２００を示す。例示的メディア・ストリーム３２００は、スノーボーディング・ビデオを含む。
ステップ１６０６で、補足コンテンツをメディア・ストリームにマッピングする。補足コンテンツは、テキスト、ビデオ材料、マルチメディア・プレゼンテーション、写真、ウェブ・リンク（ＵＲＬ）、および広告コピーを含む任意の形の追加コンテンツとすることができる。一実施形態で、補足コンテンツは、上で説明したように、例えばアクセス・プロバイダによって提供されるコンテンツのライブラリから選択される。もう１つの実施形態では、ユーザが、そのユーザ自身の補足コンテンツを提供する。例えば、図３３に、図３２に示されたメディア・ストリーム３２００にマッピングできる補足コンテンツの例示的アイテム３３００を示す。具体的に言うと、補足コンテンツのアイテム３３００は、スノーボード・パンツの特定のブランドに関する広告／購入の機会である。
一実施形態で、補足コンテンツは、メディア・ストリームの時間セグメントに関してマッピングされる（例えば、メディア・ストリームの最初の１分を識別するセグメント識別子を、補足コンテンツの最初のアイテムにマッピングすることができ、メディア・ストリームの第２の１分を識別するセグメント識別子を、補足コンテンツの第２の異なるアイテムにマッピングすることができる）。例えば、図３４に、メディア・ストリーム３２００が、補足コンテンツのマッピングを容易にするために時間セグメント３４００１〜３４００ｎ（以下では集合的に「セグメント３４００」と称する）に論理的に分割されている、図３２の例示的メディア・ストリーム３２００を示す。もう１つの実施形態で、補足コンテンツのマッピングは、メディア・ストリーム・コーディング内に含まれるメタデータ（例えば、セグメント識別子、キュー・ポイント、および類似物）に関して行うことができる。
下でさらに詳細に説明するように、セグメント識別子にマッピングされる補足コンテンツは、メディア・ストリームと同時に表示され（例えば、同一ディスプレイの別々のフレーム内で）、または「保存され」、いくつかの実施形態ではメディア・ストリームを見るのに使用されるプラットフォームに加えてまたはその代わりに異なるプラットフォーム上で、後に表示されるいずれかになる。補足コンテンツがメディア・ストリームと同時に表示される場合に、補足コンテンツのアイテムは、メディア・ストリームの視聴者がアイテムを見る機会を有するようにするために、十分な時間期間の間、スクリーン上に現れる必要がある。補足コンテンツのアイテムは、それをクリックし、おそらくは関連するウェブ・ページへのブラウザを開くことによってそのアイテムに関連するさらなる情報を受け取る機能を提供することができる。そのような追加情報は、商業的機会をも含めることができる（例えば、補足コンテンツのクリックされたアイテム内で広告された製品の購入を可能にするために）。追加情報は、ｅ−ｃｏｍｍｅｒｃｅウェブ・サイトもしくはウェブ・エンサイクロペディアなどの先在する情報、または特にこの目的で作成された情報（例えば、おそらくは物品の特定のセット、例えばユーザ自身によって作られた物品をショーケースに展示するために作成されたカスタムｅ−ｃｏｍｍｅｒｃｅ店舗）のいずれかとすることができる。図３５に、補足コンテンツのアイテム３５００がメディア・ストリーム３２００の少なくとも１つのセグメントと同時に表示されるように、補足コンテンツのアイテム３５００がマッピングされる、図３２の例示的メディア・ストリーム３２００を示す。
ステップ１６０６は、これによって、ユーザが、メディア・ストリームのセグメントを識別するセグメント識別子から補足コンテンツの１つまたは複数のアイテムへのマッピングを作製することを可能にする。ある種の実施形態で、ユーザは、セグメント識別子と補足コンテンツの（潜在的に異なる）アイテムとの間の複数のマッピングを作成することができる。例えば、ユーザは、特定のメディア・ストリームＳが、ウェブ・サイトＷ１での表示用のマッピングＭ１およびウェブ・サイトＷ２での表示用のマッピングＭ２を有するように、メディア・ストリームがホスティングされるウェブ・サイトに従って異なるマッピングを作成することができる。そのような複数のマッピングは、メディア・ストリームＳを、例えばウェブ・サイト上ではなくブログ内に埋め込まれる場合に代替補足コンテンツと共に表示することを可能にする。その後、方法１７００のステップ１７０８に関して、適当なマッピングＭ１またはＭ２が、メディア・ストリームのポスティング位置に従って視聴者への提供のために選択される。さらに、異なるマッピングを、異なるディスプレイ・デバイスでの表示のために提供することができる（例えば、マッピングＭ１は、コンピュータ上で見るユーザに表示され、マッピングＭ２は、電話機または携帯情報端末などのポータブル・デバイス上で見るユーザに表示され、マッピングＭ３は、テレビジョン・セット上で見るユーザに表示される）。
上で説明したように、人口統計およびデバイス・タイプを条件とするマッピングに加えて、マッピングは、ユーザ挙動、集約視聴者統計、またはランダム選択を条件とするものにすることもできる。例えば、複数のマッピング（または、特定のセグメント識別子にマッピングされる補足コンテンツの複数のアイテム）を設けることができ、ここで、どれを提示すべきかに関する選択は、（１）視聴者がメディア・ストリームを見た回数、（２）メディア・ストリームが見られた合計の回数、（３）視聴者がマッピング内の補足コンテンツの以前に関連付けられたアイテムをクリックするか他の形でそのアイテムへの関心を示した否か、（４）視聴者の平均視聴時間（一般的に、視聴者がクリップの最初の３０秒だけを見るか？）、（５）視聴者の明示されたまたは学習されたプリファレンス、および（６）ランダム選択のうちの少なくとも１つに依存する。
さらなる実施形態で、ユーザは、補足コンテンツの複数のアイテムがメディア・ストリームと同時に表示されることを望む場合がある。ステップ１６０６は、（１）セグメント識別子と補足コンテンツのアイテムとの間の複数のマッピングの作成（後続マッピングを、最初のマッピングを作成したユーザ／コンテンツ作成者とは異なるユーザによって作成できる場合）、および／または（２）補足コンテンツの複数のアイテム（例えば、補足コンテンツの１つの主アイテムおよび補足コンテンツの１つまたは複数の副アイテムを含む）への単一のセグメント識別子のマッピングを可能にすることによって、この機能性を使用可能にする。補足コンテンツの副アイテムは、例えば第２のユーザがオリジナル・ユーザ（例えば、コンテンツ作成者）による最初のマッピング内で行われた関連付けに対するコメントへの追加マッピングを作成できる場合に、補足コンテンツの主アイテムに対するコメントを可能にすることができる。補足コンテンツの副アイテムは、異なるユーザが異なるマッピングまたは関連付けの異なるセットを作成し、同一のメディア・ストリーム主題に対する異なる観点を提供することをも可能にすることができる。
そのような実施形態では、ステップ１６０６による補足コンテンツのマッピングは、マッピングされた補足コンテンツ内にルールを埋め込むことを含む。これらのルールは、補足コンテンツの後続表示（すなわち、メディア・ストリームの視聴中の）を、指定された判断基準（例えば、視聴者人口統計、時刻、または類似物）に従って最適化することを可能にする。一実施形態で、ルールは、補足コンテンツのアイテムに関してどの特定の情報を表示すべきかを規定する（例えば、「Ｉｆ Ｘ＝ＴＲＵＥ，ｄｉｓｐｌａｙ ｔｈｅ ｐｒｉｃｅ ｏｆ ｔｈｅ ｄｅｐｉｃｔｅｄ ｐｒｏｄｕｃｔ ｒａｔｈｅｒ ｔｈａｎ ｔｈｅ ｎａｍｅ（Ｘ＝真の場合に、名前ではなく描かれた製品の価格を表示する）」）。もう１つの実施形態では、ルールは、補足コンテンツの複数の潜在的なアイテムのうちで表示すべきものを規定する（例えば、「Ｉｆ Ｘ＝ＴＲＵＥ，ｄｉｓｐｌａｙ ｉｔｅｍ Ａ；ｏｔｈｅｒｗｉｓｅ，ｄｉｓｐｌａｙ ｉｔｅｍ Ｂ（Ｘ＝真の場合に、アイテムＡを表示し；そうでない場合に、アイテムＢを表示する）」）。
方法１６００のある種の実施形態は、さらに、ユーザが補足コンテンツの個々のアイテム（例えば、広告）を、一緒に表示されるアイテムのより大きいセットに配置することを可能にする。次に、ユーザは、補足コンテンツの各個々のアイテムをマッピングするのではなく、このセットを適当なセグメント識別子に有利にマッピングすることができる（例えば、眼鏡および１セットのイヤリングは、それらが身に着けられたときのお互いへの物理的近接を考えると、メディア・ストリームの同一セグメントの多くで描かれる可能性が高い）。
一実施形態で、補足コンテンツは、上で説明したように、補足コンテンツのアイテムのライブラリ（例えば、アクセス・プロバイダおよび／または他のユーザによって提供される）から選択される。ライブラリからのアイテムの選択は、「ドラッグ・アンド・ドロップ」ツール、ボックスにチェック・マークを付けることによって、物品番号をタイプすることによって、および類似物の任意の組合せを使用して実行することができる。いくつかの実施形態で、ユーザは、物品のカテゴリ（例えば、「男物、皮ベルト、青」）を指定し、方法１６００に、例えば指定されたカテゴリの最も人気のある物品、広告主が最高の照会手数料を支払う物品、または関心を持たれている他の判断基準に従って補足コンテンツの特定のアイテムを提案させることができる。
補足コンテンツ（例えば、事前に承認された広告情報）の特定のライブラリには、物品のイメージ、物品に関する情報、物品に関する短い「コマーシャル」、物品を即座に購入するためのリンクのうちの１つまたは複数など、所与の物品に関する様々な情報を含めることができる。この情報は、既存のオンライン・マーチャンダイザおよびオンライン・アグリゲータとの「アフィリエイト」プログラムから入手でき、このライブラリには、さらに、カスタム広告を含めることができる。このライブラリ内に補足コンテンツのアイテムを含めることは、アクセス・プロバイダによって各広告主と折衝される「仲立手数料」の対象とすることができる。例えば、ある販売者のアフィリエイトは、顧客がその販売者のアフィリエイトのサイトによってその販売者のサイトに向けられたときに、顧客に売られたすべての物品の購入価格のｘ％もの額を受け取ることができる。
本発明の実施形態は、第三者（全ユーザまたはユーザの許可されたグループ）が、所与のメディア・ストリームのセグメントを識別するセグメント識別子に補足コンテンツをマッピングし、シンジケーション様システムを提供することを可能にする。シンジケートの下に置かれたメディア・ストリームからの収入は、メディア・ストリームのオリジネータ（すなわち、コンテンツ作成者）と補足コンテンツをマッピングしたシンジケートとの間で分割することができる。この形で、メディア・ストリームの価値が高められる。というのは、価値を実現する仕事が、複数の異なる人の間で分配されるからである（例えば、コンテンツ作成者は、マッピングの作成に関心を持たない可能性があるが、他者は、それに非常に関心を持ちながら適切なメディア・ストリーム・コンテンツを欠いている）。
一実施形態で、第三者シンジケートは、例えばメディア・ストリーム・コンテンツの貨幣化における彼らの成功に従って、または他の要因に従って、レーティングを与えられる。視聴者反応を監視することによって、統計を生成して、特定のシンジケートがこの「タイプ」のメディア・ストリームに関する彼らの関連付けマッピングへの高い視聴者関心を生成することを示すことができる。この文脈でのメディア・ストリーム「タイプ」は、例えば、コンテンツ・タグ（例えば、エルビス）、または初めて発行されるときのメディア・ストリームを見る人の人口統計（例えば、主に１０代女性によって見られるビデオ・クリップ）に基づくものとすることができる。したがって、市場は、メディア・ストリーム作成者／アップローダをシンジケートと結び付けることを可能にされる。本発明の実施形態は、さらに、メディア・ストリーム作成者が、例えばシンジケートによって提供されるマッピングが十分な結果を生成しない場合にそのマッピングが公の利用可能性から除去されるようになる、ある最小パフォーマンス・メトリックスをセットすることによって、その作成者のメディア・ストリームのシンジケーションを制御することを可能にする。一実施形態で、パフォーマンス・メトリックスは、絶対しきい値（例えば、「最初の１００００回の視聴で少なくとも１０００個の視聴者反応を生成しなければならない」）、または複数のシンジケート・マッピングに関するメディア・ストリームの相対メトリックス（例えば、「上位３つのシンジケート・マッピングだけが、４８時間後に維持される」）を含む。新しいシンジケート・マッピングを、ランダムな基礎またはパーセンテージの基礎（例えば、視聴の９０％が現在最高のパフォーマンスのマッピングを受け取り、１０％が新しいシンジケート・マッピングを受け取る）のいずれかで相対メトリックスにおいて競争する試験期間の間に追加することができ、ある時間期間の後に、様々なシンジケート・マッピングのパフォーマンスが比較され、勝者が、新しい最高パフォーマンスのマッピングになる。
一実施形態で、アクセス・プロバイダは、個々のシンジケートがシンジケーション・チームを形成し、そのシンジケーション・チームで一緒に働くことを可能にすることによって、有益な分業を容易にする。そのようなチームの１つの利益は、チーム事前承認プロセスの形の「事前スクリーニング」を提供することによって、補足コンテンツの最も説得力のあるアイテムを判定する標準的な視聴者駆動最適化プロセスにてこ入れするようにチームを構成できることである。例えば、チームの、補足コンテンツのアイテムを提供することを望む各メンバに、補足コンテンツのアイテムを再検討のためにチームにサブミットするよう要求することができる。この承認プロセスでは、様々なチーム・メンバが、補足コンテンツのサブミットされたアイテムを変更することによって（潜在的に本明細書で前に説明した共有ワークスペースを介して）、または補足コンテンツの代替アイテムを提案することにさえよって、コメントを提供することができる（例えば、書かれたコメントを介してまたはｖｏｉｃｅ ｏｖｅｒ ｉｎｔｅｒｎｅｔ ｐｒｏｔｏｃｏｌすなわちＶｏＩＰを介するなど、言葉によって）。チームは、補足コンテンツのサブミットされたアイテムをチームの代わりにサブミットできる前に、補足コンテンツのそのアイテムがチーム・メンバの間での受け入れの、あるしきい値に達することを要求することができる。例えば、チームは、補足コンテンツのアイテムが、チーム・メンバからあるパーセンテージの「Ｙｅｓ」票を受けることを要求することができる（潜在的に、投票総数が少なくともチーム・メンバの最小パーセンテージであることを要求するなど、追加の判断基準を伴う）。そのようなルールは、再検討の十分な機会を保証するために、補足コンテンツのアイテムがあるセットされた時間期間にわたってチームに提示された後に限って、投票が締め切られることを要求することができる。このタイプのプロセスは、補足コンテンツのより高品質のアイテムがサブミットされることを保証するのを助け、また、提供される補足コンテンツのアイテムの個数を制限する傾向があり、これによって、「圧倒的な」自動化された最適化プロセスを避けるのを助ける。アクセス・プロバイダは、特定のタイプの挙動を奨励するために様々な種類のアクセス・ポイント「マルチプライヤ」を提供することもできる（例えば、補足コンテンツのアイテムを所与のメディア・ストリームにマッピングする最初のユーザまたは共同制作者になること、補足コンテンツのアイテムに最適化プロセスに「勝たせる」ことなどについて「２倍のポイント」）。
アクセス・プロバイダは、あるいはメディア・ストリームの作成者さえもが、シンジケート・サブミッションに関するある種の要件または制限を課すことを可能にされるものとすることができる。例えば、コンテンツ作成者は、シンジケーション・チームがある種のガイドライン（例えば、最小投票要件）に従うか、ある種の特性を有する（例えば、１０人を超えるメンバからなるチーム、ただし、少なくともＸのアクセス・ポイントを保持するチームは、メディア・ストリームがあるレベルの人気に達したならば、補足コンテンツのアイテムをキューにサブミットすることを許可される）ことを要求することができる。一実施形態で、シンジケートは、標準サブミッション・ルールの免除を得ることと引き換えに料金を支払うことに合意することによって（または例えば、生成された収入からより少ないパーセンテージ手数料を受け取ることに合意することによって）そのような制限を「バイ・アラウンド」することを許可されるものとすることができる。
チーム形成を容易にするために、アクセス・プロバイダは、チームを形成できる様々なタイプのチーム構造の選択を提供することができる。例えば、あるチーム構造は、完全な多数決原理によって支配され、すべての判断（例えば、補足コンテンツの特定のアイテムを投稿するか否か、手数料をどのように分配するかなど）が、コミュニティ投票に通じる。チーム構造のもう１つの例は、すべての判断を行う役員会または単一の個人によって率いられる構造によって制御されるものとすることができ、ほとんどのメンバは、検討のために補足コンテンツのアイテムをサブミットするのみで、投票を許可されないものとすることができる。様々な構造を組み合わせることができる（例えば、手数料手順を変更する判断が多数決原理によって行われなければならないことを除いて、すべての判断を行うようにセットされた役員会）。
図３９に、本発明による例示的なシンジケーション・チームの動力学を示す。具体的に言うと、図３９は、シンジケーション・チーム・データを伝える例示的ディスプレイ３９００を示す。例えば、ディスプレイ３９００には、分析中のメディア・ストリーム（またはそのセグメント）を表示する第１区域３９０２およびメディア・ストリームの現在表示されている（すなわち、ディスプレイ３９００の第１区域３９０２に現在表示されている）セグメントに関連付けられた補足コンテンツのアイテムを表示する第２区域３９０４を含めることができる。さらに、ディスプレイ３９００は、チーム・メンバがメディア・ストリームの現在表示されているセグメントとの関連付け用の補足コンテンツの代替アイテムを提案できる提案区域３９０６および提案区域３９０６内の提案にコメントするためのコメント区域３９０８を含む。
図示されているように、提案区域３９０６内の各提案は、補足コンテンツの提案されるアイテム（例えば、「Ｉｔ’ｓ ｔｈｅ ｐａｎｔｓ（これがそのパンツだ）」対「Ｇｏｔｔａ ｗｅａｒ ｓｈａｄｅｓ！（ゴーグルしなきゃ！）」）と、補足コンテンツの提案されるアイテムの選択について投票したチーム・メンバの数を追跡する投票カウンタとを含む。上で説明したように、最多数の票を集めた補足コンテンツの提案されるアイテムが、通常、マッピングのために選択される。
さらに、ディスプレイ３９００には、シンジケーション・チームのメンバごとに１つの、複数のアバタ３９１０または他のアイコンもしくは識別子を含めることができる。
アクセス・プロバイダが、チーム形成を奨励することを望む可能性がある。というのは、様々なチーム・メンバの展望および知識をプールすること（例えば、過半数の票によって補足コンテンツのアイテムを選択することによる）ならびに／あるいはある種のタイプのメディア・ストリームおよび／または補足コンテンツのアイテム（例えば、サッカーに関するビデオまたはファッション性の高い広告に関連する補足コンテンツのアイテム）に特化することが、最終的に、より説得力のあるマッピングを作る可能性があるからである。チームを形成するようにシンジケートに奨励するために、アクセス・プロバイダは、チームによってサブミットされた補足コンテンツのアイテムに、より高いパーセンテージの手数料を支払うことができる。さらに、アクセス・プロバイダは、チームが、最も人気のあるメディア・ストリームへのより高速のアクセスを得るために、チーム・メンバが稼いだ「アクセス・ポイント」（上で説明した）を統合することを可能にすることができる。ポイント統合手法では、アクセス・プロバイダが、メディア・ストリームの各カテゴリに関してより高いアクセス・ポイントしきい値をチームに課す可能性が高いが、このしきい値は、個々のシンジケートがチームを形成するのを思いとどまらせるほどには高くならないはずである。例えば、アクセス・プロバイダは、サービスによって現在ホスティングされている上位１００個の最も人気のあるメディア・ストリームの補足コンテンツのアイテムをサブミットする権利を得るために、個々のシンジケートが少なくともＸ個のアクセス「ポイント」を保持することを要求される可能性があり、５人以下のチームが、少なくとも３Ｘポイントを有しなければならず、６〜２０人のチームが１０Ｘポイントを有しなければならず、２０人を超えるチームが少なくとも２０Ｘポイントを有しなければならないことを要求することができる。
一実施形態で、アクセス・プロバイダまたは第三者は、様々なユーザおよびチームが「アクセス・ポイント」を購入し、販売し、オークションにかけ、物々交換し、または他の形で他者と交換することのできる「市場」を作成する。例えば、比較的少数のメディア・ストリームを提供したコンテンツ作成者は、追加のメディア・ストリームまたは補足コンテンツのアイテムを提供する計画がない場合に、使いみちのないアクセス・ポイントを得る可能性がある。このコンテンツ作成者は、自分のアクセス・ポイントを、次のレベルのメディア・ストリーム・アクセスに達することを望むシンジケートのチームなどの他のユーザに売るか、オークションにかけることができる。オークションのホストは、そのような取引について料金を請求することができる。アクセス・プロバイダは、個々のユーザがアクセス・ポイントを保持することを奨励し、うまくいけばこれらのユーザがコミュニティに能動的に参加することを奨励するために、交換レートを課すこともできる。例えば、アクセス・プロバイダは、チームがコミュニティ全体を支配する可能性をより低くするために、あるユーザによって別の個人ユーザに売られたアクセス・ポイントが、取引によって半分に減らされる（すなわち、１０個のアクセス・ポイントが、転送時に５個のアクセス・ポイントになる）ことを要求することができ、潜在的に、チームに転送されるポイントに異なる交換レート（例えば、１０個のアクセス・ポイントが２個のアクセス・ポイントになる）を課すことができる。
メディア・ストリームが、シンジケーションのためにオープンされたならば、コンテンツ作成者または他者は、シンジケートによって提供される補足コンテンツのある種のアイテムを削除し、または阻止することを許可されるものとすることができる。これは、メディア・ストリームをシンジケートにオープンすることがコンテンツ作成者のメディア・ストリームに対するすべての制御を失わせるならば、より少数のコンテンツ作成者が、メディア・ストリームをシンジケートにオープンすることを望むと考えると、重要な特徴である。しかし、コンテンツ作成者が、シンジケートによって提案される補足コンテンツのアイテムに関してより安い手数料を受け取る（すなわち、コンテンツ作成者が主メディア・ストリームをシンジケートにオープンすることの金銭的誘因ならびにシンジケートが補足コンテンツのアイテムを提供することの誘因がある可能性が高い）と仮定すると、アクセス・プロバイダは、コンテンツ作成者がメディア・ストリームをシンジケーションにオープンしたならば、そのコンテンツ作成者が、その後、補足コンテンツのシンジケートの下に置かれたアイテムから受け取るものより高い手終了を受け取らなくなることを要求することができる。そうではなく、コンテンツ作成者は、シンジケートによって提案された補足コンテンツのどのアイテムが成功であったかを観察し、その後、より低い手数料が支払われる補足コンテンツのアイテムを、共同制作者との手数料の共有を伴わない事実上同一の補足コンテンツに置換することの誘因を有するはずである。
いくつかの実施形態で、ステップ１６０６は、補足コンテンツへの許可されるマッピングに関する制約（例えば、補足コンテンツの特定のアイテムを表示できる最短時間および最長時間、または商用対非商用の補足コンテンツ・マッピングの最小個数および最大個数）を伴って構成される。いくつかの実施形態で、同期化を制約することができ（おそらくはユーザの同意の下に）、Ｍ秒のギャップがユーザによって行われる同期化の間に存在しなければならなくなる。間に入るＭ秒は、アクセス・プロバイダによって自動的に選択される補足コンテンツによって自動的に埋められるものとすることができ、これらの間に入るアイテムからの収入は、潜在的に、ユーザと共有される。
ステップ１６０８で、ユーザは、メディア・ストリームおよび少なくとも１つのマッピング（そのメディア・ストリームを補足コンテンツに関連付ける）をアクセス・プロバイダにアップロードする。一実施形態で、ステップ１６０８は、ユーザが、そのユーザがコンテンツ作成者であり、アップロードされるメディア・ストリームの著作権の所有者でもあることを確認する声明に署名することを要求することを含む。一実施形態で、ユーザは、ある種のキーワードを用いてメディア・ストリームを記述する「タグ」を提供するオプション、メディア・ストリームをジャンル（例えば、コメディ）、長さ、作成者のタイプ（例えば、プロフェッショナル）による１つまたは複数のカテゴリに割り当てるオプション、および類似するオプションをも与えられる。
ステップ１６０８のいくつかの実施形態は、コンテンツ作成者が、彼らのメディア・ストリームを表示するメディア・プレイヤのルック・アンド・フィールを定義することを可能にする。例えば、自然関連ビデオの作成者は、木目の再生ボタン、一時停止ボタン、および早送りボタンを特徴とする緑色の葉状のメディア・プレイヤ・モチーフを選択する可能性がある。ヒップホップ指向の作成者は、よりコンテンポラリな「ブリンブリン」プレイヤを選ぶ可能性がある。
その後、方法１６００は、ステップ１６１０で終了する。
方法１６００のいくつかの実施形態では、ユーザ／コンテンツ作成者のコンピューティング・デバイス上のローカル・アプリケーションが、方法１６００を実施するのに使用される。他の実施形態では、ウェブベースのアプリケーションが、方法１６００を実施するのに使用される。そのようなウェブベースの実施形態では、ステップ１６０８を２つの部分で実行することができ、ここで、メディア・ストリームのアップロードは、関連付けステップ１６０６の前に行われ、関連付けのアップロードは、別々のステップとしてステップ１６０８に続く。さらなる実施形態では、方法１６００の一部が、ローカルに実行され、他の部分が、ネットワーク化されたコンピューティング・デバイス上でリモートに実行される。
方法１６００の実施形態は、海賊行為によって盗まれたコンテンツ（すなわち、著作権所有者以外の個人によってアップロードされた著作権付きコンテンツ）のアップロードを減らす機構を組み込まれる。例えば、アクセス・プロバイダが、所与のメディア・ストリームがある種の法律または規制に違反している可能性があることを通知される（例えば、著作権所有者によって）ときに、アクセス・プロバイダは、この状況から導出されるある種のプロセスを自動化することが必要または有用であることに気付く可能性がある。一実施形態で、アクセス・プロバイダが、あるメディア・ストリームをそのオファリングから除去する必要があることに気付く場合に、その除去を、そのメディア・ストリームを提供したユーザがそのアクセス・プロバイダによって提供されるサービスを使用することを一時的に禁止すること、そのメディア・ストリームを提供したユーザをアカウント管理者に報告すること、ならびに、そのメディア・ストリームを提供したユーザおよびすべての共同制作者とそれに寄与した者（例えば、補足コンテンツのマッピングの作成を支援することによって、または補足コンテンツを実際に提供することによって）とに除去について通知することのうちの１つまたは複数を含む、複数の関連するアクションをトリガすることができる。さらに、そのメディア・ストリームによって生成された財務情報（例えば、除去の点までの貨幣化）の要約を、生成し、様々な利害関係者に配送することができ、アクセス・プロバイダが現在保持する、そのメディア・ストリームを提供したユーザに支払うべきすべての資金を、保留にすることができる。
一実施形態で、方法１６００に従ってメディア・ストリームに関連付けられる補足コンテンツは、そのメディア・ストリームをエクスポートできるプラットフォーム（１つまたは複数）にかかわりなく、そのメディア・ストリームに関連付けられたすべての貨幣化（例えば、クリック・スルー）がコンテンツ作成者に帰属するように、メディア・ストリームと共に埋め込まれる。例えば、図４６に、ソーシャル・ネットワーキング・ウェブ・サイト４６０２、ウェブ・ログ（「ブログ」）４６０４、およびポータブル・メディア・プレイヤ４６０８を含む様々なプラットフォームにまたがる最初の注釈付きメディア・ストリーム４６００の使用を示す。図示されているように、最初のメディア・ストリーム４６００がエクスポートされるプラットフォーム４６０２、４６０４、または４６０６にかかわりなく、それに関連付けられたすべての補足コンテンツが、関連付けられたままになる。
図１７は、補足コンテンツへの少なくとも１つのマッピングを伴うメディア・ストリームへのアクセスを提供するサービスを提供する方法１７００の一実施形態を示す流れ図である。方法１７００は、例えば、ユーザ／コンテンツ作成者によってアップロードされたメディア・コンテンツをホスティングするウェブ・サイトによって実施することができる。方法１７００は、ステップ１７０２で開始され、ステップ１７０４に進み、ここで、メディア・ストリームおよびそのメディア・ストリームを補足コンテンツに関連付ける１つまたは複数のマッピングが、サービス・プロバイダによって受け取られる。
いくつかの実施形態で、メディア・ストリームがアップロードされるときに、方法１７００は、プログラム識別子（例えば、その特定のメディア・ストリームを識別する）とそのメディア・ストリームの各セグメントに関連付けられたセグメント識別子との両方を入手することを可能にされる。次に、方法１７００は、シーン変化、「ムード」変化、ショット変化など、セグメント識別子に関連付けられた様々な形のメタデータをユーザ／コンテンツ作成者からさらに受け取ることができ、これらの入力を、ユーザまたはアクセス・プロバイダによる後の使用のために格納することを可能にされるものとすることができる。
任意選択のステップ１７０６（幻影で図示）では、必要な場合に、メディア・ストリームをソース・フォーマットからホスティング・サービスの好ましいフォーマットにトランスコーディングする。例えば、ホスティング・サービスは、すべてのメディア・ストリームをＦｌａｓｈフォーマット（米国カリフォルニア州サン・ノゼのＡｄｏｂｅ，Ｉｎｃ．社によって供給されるビデオ・フォーマット）で格納することを好む場合があり、この場合に、方法１７００は、ステップ１７０４で、アップロードされたＭＰＥＧビデオをＦｌａｓｈフォーマットにトランスコーディングする。
ステップ１７０８で、方法１７００は、メディア・ストリームを視聴者に使用可能にし、メディア・ストリーム、関連付けマッピング（１つまたは複数）、補足コンテンツ、および視聴プログラムを、オンデマンドで視聴者に送信する。一実施形態で、これは、メディア・ストリームの再生、一時停止、シーク、および停止と、オーディオ・トラックのボリュームの調整と、マッピングに従う関連付けられた補足コンテンツの表示とのための単純なユーザ・インターフェースを提供する単一のアプリケーション（例えば、Ｆｌａｓｈアプリケーション）内で実施されるメディア・ストリームおよび他の材料をウェブ・サイトにポストすることによって達成される。
ある種の実施形態で、アクセス・プロバイダは、他のサイトのオペレータが特定のメディア・ストリームにリンクすることおよびそのメディア・ストリームを他のサイトに含めることを許可することができる。一実施形態で、これは、メディア・ストリームが、マッピングされた補足コンテンツを表示する機構と一緒にリンクされるのみになるように構成され、第三者ウェブ・サイトでのメディア・ストリームの視聴が、マッピングされた補足コンテンツの表示を含むことが保証される。一実施形態で、この実施形態の収入モデルは、視聴者購入または他の収入を生成するクリック・スルー・アクティビティに関する第三者ホストとオリジナル・アクセス・プロバイダとの間の収入の折衝された共有を含む。
補足コンテンツへの複数のマッピングが、特定のメディア・ストリームについて使用可能である（例えば、メディア・ストリームが、他者がマッピングを作成するためにシンジケートの下に置かれた）場合に、多数のマッピングが作成済みである可能性があるが、通常は、１つのマッピングだけが、一時にメディア・ストリームと共に表示される。以前に述べたように、いくつかの実施形態は、視聴者デバイス・タイプ、人口統計などに従って特定のマッピングにタグ付けすることができる。そのような実施形態で、マッピングまたは使用可能なマッピングのサブセットは、そのような判断基準に基づいて、視聴者のデバイスによって提供されるデータに従って（例えば、ＨＴＴＰ要求ヘッダの一部として、ＩＰアドレスから地理的アドレスへのマッピング、および類似物）、または視聴者によってセットされたマッピングのタイプのプリファレンスによって、選択される。これが単一のマッピングをもたらさない場合には、方法１７００は、ダウン選択の基礎で提示すべきマッピングを選択することができる。例えば、所与のメディア・ストリームが、シンジケートの下に置かれ、５つの異なるマッピングが作成されると仮定する。これらの５つのマッピングを、最初のＮ人の視聴者に等しく示すことができ、最も人気の低い（より少ないクリックを集めるまたはより少ない収入を生成する）マッピングは、最も人気のあるマッピングだけが示されるまで、各後続のＮ回の視聴でダウン選択される。視聴者選択を監視することによって、方法１７００は、さらに、マッピング自体が人口統計ターゲティング情報を含まなかった場合であっても、特定の人口統計に示すためのよりよいマッピングを判定することができる。例えば、ユーザ反応が、所与のマッピングが１０代に人気があることを暗示する場合があり、この場合に、方法１７００は、そのマッピングを１０代に提供するが、異なるマッピングを３０代に示すことができる。
ステップ１７１０で、信号を、特定のメディア・ストリームおよびマッピングを見ている、関連付けられた補足コンテンツのアイテム（例えば、広告）を選択する（例えば、クリックする）視聴者から受け取る。
ステップ１７１２で、方法１７００は、その視聴者に補足コンテンツ（例えば、関連付けられた補足コンテンツ内に描かれた物品の購入の達成を提供するように構成されたウェブ・ページ）を提供する。
上で説明したように、ある種の実施形態で、補足コンテンツの提供が、視聴者が購入を行うかアクセス・プロバイダへの収入を引き出す他のアクティビティ（例えば、クリック・スルー・アクティビティ）を実行することをもたらすときに、アクセス・プロバイダは、それが受け取る収入の一部を、そのマッピングが収入を起こしたメディア・ストリームをポストしたユーザ／コンテンツ作成者に手数料として渡す。ポストしたユーザに支払われる手数料は、完了された特定の販売から計算されるパーセンテージとすることができる。
ある種の実施形態で、アクセス・プロバイダは、特定のメディア・ストリームから生じるクリック・スルーの回数を単純に追跡し、その回数を、所与の時間期間中にそのアクセス・プロバイダによってホスティングされるすべてのメディア・ストリームにまたがって生成されたクリック・スルーの総数によって割り、その特定のメディア・ストリームに帰すべきクリック・スルーのパーセンテージを得る。次に、その期間の間にそのアクセス・プロバイダによる分配に使用可能である手数料のプール全体を、この計算されたパーセンテージ・シェアに従って、ポストするユーザ／コンテンツ作成者に割り当てることができる。アクセス・プロバイダは、特定のアクティビティを奨励するために、階級付きのまたは階層的な形の手数料を提供することを選択することができる。例えば、アクセス・プロバイダは、少なくとも所定のしきい値回数のクリックを引き付けた３つ以上のメディア・ストリームを所定の期間中に提供したポストするユーザ／コンテンツ作成者に、より高い手数料を支払うことができる。また、ポストするユーザ／コンテンツ作成者に現金の手数料を支払うことの代替案として、アクセス・プロバイダは、そのアクセス・プロバイダまたは第三者によって提供される様々な商品またはサービスと引き換えることができる、ある形の「クレジット」または「クーポン」を提供することができる。
ある種の実施形態で、アクセス・プロバイダが、単純に視聴者に提示される広告関連補足コンテンツの量を増やすことによって貨幣化を増やすことができるという素朴な信念に対抗するために、ユーザが補足コンテンツの非商業的アイテムを含めることの誘因を提供することを望む場合がある。これは、補足コンテンツの商業的アイテムに対するより高い比率の非商業的アイテムが、視聴者満足を高め、かつ／またはより多くの全体的貨幣化につながるからである可能性がある。例えば、アクセス・プロバイダは、ユーザが、特別な「ブランド付き」ページ、「ペイパービュー」ビデオを目玉にするページ、および類似物など、アクセス・プロバイダ・サイトの他の部分に視聴者を潜在的に向ける補足コンテンツのアイテムを展開することを望む場合がある。そのような展開を奨励するために、アクセス・プロバイダは、補足コンテンツのそのようなナビゲーション指向のアイテムが視聴者によって見られるか、クリックされるかのいずれかになるたびに、ユーザに料金を支払うことを選択することができる。同様に、アクセス・プロバイダは、「コストパーアクション」すなわちＣＰＡモデルと称することができるものにおいて、そのようなリンクに応答する視聴者の後続挙動に支払をリンクすることができる（例えば、ペイパービュー・ビデオを見ることを選択する各視聴者に関してのみユーザに手数料を支払う）。
アクセス・プロバイダは、コンテンツ作成者がイントラメディア・ストリーム・コンテンツ・タグ付け（すなわち、視聴者検索を改善するための所与のメディア・ストリーム内のコンテンツの様々なカテゴリの識別）を提供するための誘因を提供することを望む場合もある。この挙動を誘導するために、アクセス・プロバイダは、イントラメディア・ストリーム・タグ付けまたは他の形のタグ付けが、視聴者が実際にメディア・ストリームを突き止めることおよび／または見ることをもたらすたびに、料金または手数料を提供することができる。例えば、コンテンツ作成者が、「エッフェル塔」のイントラメディア・ストリーム・コンテンツ・タグを含め、検索を行う視聴者が、このコンテンツ・タグに関係するサムネイルを提示され、かつ／またはこの視聴者が、関連付けられたメディア・ストリームをクリックし、見る場合に、そのコンテンツ作成者は、そのコンテンツ作成者のタグ付けが可能にした様々な態様のうちのいずれか１つまたはすべてについて小額の手数料または他の代償を受け取ることができる。
アクセス・プロバイダが収入をわかち合うことを選択できるすべての事例において、支払を計算し、報告し、支払い、類似物を行うときに関するある種のしきい値レベルをセットすることが有用である場合がある。例えば、大量の非常に少ない金額を扱うことの管理コストおよび重荷を考えれば、アクセス・プロバイダは、補足コンテンツの所与のアイテムがＸ人を超える視聴者によって見られる、あるいは所与のユーザが少なくとも１０ドルを受け取る資格を与えられるなど、あるしきい値に達するまで、すべてのそのような情報を表示するが、支払いを行うのを控えると決断することができる。アクセス・プロバイダは、他者が詐欺のクリック・スルーを提供することによって支払いシステムを操作する能力を制限するために、そのようなしきい値を課すこともできる。例えば、アクセス・プロバイダは、補足コンテンツのアイテムとの最初のＹ人の視聴者の対話について、比較的安いＸ％の手数料を支払い、多数の人がそのような改竄の企てに参加しなければ非常に困難であるはずの対話のしきい値を表す次のＺ人の視聴者の対話について２０Ｘ％を支払うと決断することができる。そのようなティアード・コミッション・システムは、ユーザが補足コンテンツの非常に説得力のあるアイテムを作成するための追加の誘因を提供するはずである。しかし、上で述べたように、アクセス・プロバイダは、より人気のあるメディア・ストリームにより低い手数料を提供することが、より人気の低いメディア・ストリーム用の補足コンテンツのアイテムを提供することに対するより大きいシンジケート強調を奨励することに関して有益である可能性があると判定する場合がある。
一実施形態で、アクセス・プロバイダは、補足コンテンツのアイテムを作成する際に別のユーザによって利用された、および／または収入を生成した、補足コンテンツ・ライブラリ内のライブラリ・エントリまたはそのコンポーネントをポストしたユーザに手数料を提供することができる。これは、ライブラリへの投稿を奨励するはずである。あるしきい値をこの文脈で実施することもでき、その結果、投稿は、非常に高いレベルの収入を生成する場合に限って報酬を与えられるようになる。アクセス・プロバイダは、ユーザがライブラリにアクセスするのを思いとどまらせることは望まない可能性があるが、それと同時に、アクセス・プロバイダは、非常に説得力のある投稿を行うようにユーザを誘導することを望む可能性がある。
特定のコンテキストで「コスト・パー・インプレッション」（ＣＰＭ）モデルを選択することを望む広告主（すなわち、見られたが必ずしもクリックされない広告についてアクセス・プロバイダに支払う広告主）に、メディア・ストリームのより早期のセグメントにマッピングされた補足コンテンツのアイテムが、そのメディア・ストリームのより後のセグメントにマッピングされた補足コンテンツのアイテムより高い価格を付けられる、ティアード・プライシング・モデルを提供することができる。このモデルは、視聴者が、メディア・ストリームのより早期の秒または分に関連する補足コンテンツのアイテムの反応する可能性がより高い可能性があるという事実および／または多くの視聴者がメディア・ストリーム全体を見るのではない（したがって、補足コンテンツのより後にマッピングされたアイテムを実際には絶対に見ない可能性がある）という事実を考慮したものである。
上で述べたように、収入共有モデルのすべてが、補足コンテンツの関連アイテムを提供する人の「チーム」にまたがって収入をわかち合うことを可能にされるものとすることができる。この形で、このプロセスの一態様（例えば、目玉にすべき製品の選択）に特化したユーザは、彼らの投稿を、別の態様（例えば、力のあるグラフィックスの作成）に特化したユーザに結合することができ、その結果、全体的な最終製品は、視聴者にとってより説得力のあるものになり、したがって、より多くの収入を生成するようになる。例えば、単一のメディア・ストリームにマッピングされた補足コンテンツの単一のアイテムに関して、Ｘというある集計手数料パーセンテージが、アクセス・プロバイダによって収入の機会への貢献者のすべてに支払われる場合がある。したがって、手数料Ｘの一部を、とりわけ、メディア・ストリームのアップロード、イントラメディア・ストリーム・コンテンツ・タグ付け、補足コンテンツのアイテム内に現れたある種のコンテンツ（例えば、補足コンテンツの混成アイテム内の特定のグラフィカル・イメージ）の投稿、補足コンテンツの特定のアイテムの提供、およびメディア・ストリームを見るように視聴者を向けるリンクのホスティングという収入生成プロセスの諸態様に寄与した個人またはグループに渡すことができる。そのような文脈で、メディア・ストリームを提供した個人またはグループは、潜在的に、そのようなメディア・ストリームに関連するほとんどまたはすべてのアクティビティに関して手数料を受け取るが、補足コンテンツの特定のアイテムを提供した個人またはグループは、補足コンテンツのそのアイテムから引き出された収入に関してのみ手数料を受け取る。これらの事例のすべてにおいて、収入は、アクセス・プロバイダ・サービスによって「チーム」アカウントに支払われるものとすることができる。
上で説明した収入追跡および支払いシステムを容易にするために、アカウント・プロバイダは、所与のアイテム（例えば、注釈付きメディア・ストリーム、補足コンテンツのアイテム、ライブラリ・エントリ）内に、そのようなアイテムの投稿者を識別する識別子を埋め込むことができる。したがって、所与の注釈付きメディア・ストリームに、潜在的に多数の投稿者の識別子を含めることができる。各投稿者識別子を、支払いを容易にするために、投稿者の社会保険番号、支払いの所望の機構、および類似物など、識別される投稿者に関する情報のファイルにリンクすることができる。
上で説明したように、アクセス・プロバイダは、個人の様々なチームまたはグループが、注釈付きメディア・ストリームの様々な態様のいずれかの作成に参加することを可能にすることができる。チームの形成を奨励するために、アクセス・プロバイダは、各チームが、そのチームに生じる収入を様々なチーム・メンバの間でどのようにわかち合うかを穏当に判定するための機構を提供することができる。例えば、アクセス・プロバイダは、すべてのメンバがすべての収入を均等にわかち合うかどうか、または収入のある部分をチームの主要メンバ（例えば、補足コンテンツの特定のアイテム、メディア・ストリーム、もしくは類似物を投稿したメンバ、または年長、パフォーマンス、もしくは類似物のある種のしきい値に達したメンバ）に割り当て、残りを全体としてチームの中で分割するために提供するかどうかを判断することを可能にすることができる。
一実施形態で、方法１７００は、ステップ１７１０で受け取られた補足コンテンツのアイテムへの関心を示す信号およびステップ１７１２で提供されるすべての追加情報に応答するユーザの挙動（例えば、商取引の完了）を含む、視聴者の反応を追跡する。追跡されたデータを集約して、各メディア・ストリーム、各マッピング、および補足情報の各アイテムに関する統計を提供して、このシステムのユーザが人気のあるメディア・ストリームおよび成功したマッピングを判定することを可能にすることができる。この反応追跡情報は、１つまたは複数の判断基準（例えば、シンジケートが、成功のヒストリの後に限って「プロフェッショナル・レベル」統計へのアクセスを得る）に基づいて、１つまたは複数の利害関係者（例えば、コンテンツ作成者またはその物品がメディア・ストリーム内で描かれるすべての販売者）に提供することができる。マルチティア報告体制を実施し、追加データが、支払いまたはあるパフォーマンス・レベル（例えば、クリックまたは取引の量）の達成のいずれかを必要とするようにすることができる。逆に、ビデオ・プレイヤ自体での補足コンテンツの所与のマッピングまたは関連する個人に対する視聴者反応の表示を可能にすることが有用である可能性がある（おそらくは、アップローダのオプションでまたはプレイヤの「プロフェッショナル」モードとして）。これは、視聴者に、彼らの「対等者」が関心を持つものに関する情報を与え、これによって、成功のマッピングをどのようにして生成するかに関するフィードバックを提供するはずである。
その後、方法１７００は、ステップ１７１４で終了する。
本発明の利益の１つは、上で説明したように、以前には無関係の個人を、共通の経験への寄与（すなわち、所与のメディア・ストリームの創造的価値の改善）の期待および／または金を稼ぐことの期待によって一緒にすることができることである。アクセス・プロバイダは、より高品質の経験が、より多くの視聴者を引き付け、より関連する補足コンテンツが、特定のメディア・ストリーム（および／またはそれにマッピングされた補足コンテンツ）への視聴者反応を高めるという事実に起因して、より説得力のある視聴者経験を作成することによって、財政的に利益を得る。そのようなコンテンツの作成者を後援するために、アクセス・プロバイダは、価値を付加するすべての個人に直接の金銭的誘因を提供することを望む可能性がある。
さらに、補足コンテンツは、視聴者からの明示的な関与または指示を一切必要とせずに、メディア・ストリームの視聴者に提供される。しかし、この補足コンテンツは、補足コンテンツを見ることに関心を持たない視聴者によって簡単に無視され得、したがって、補足コンテンツのマッピングは、視聴経験への不当な侵入をまったく生じない。しかし、視聴者対話が、所与の視聴者に提供される補足コンテンツをその視聴者のプリファレンスに合わせて調整することを可能にすることによって、視聴者経験の質を高めることができることに留意されたい。例えば、視聴者は、その視聴者が最も関心を持つ補足コンテンツのタイプ（例えば、ファッション、レシピ、音楽、映画の筋、ディレクターズ・カット・ビデオ、または類似物）を選択するか示すことができ、あるいは、そのような選択は、学習され得る。
図１８は、マッピングされた補足コンテンツと共にメディア・ストリームを視聴者に表示する方法１８００の一実施形態を示す流れ図である。方法１８００は、例えば、メディア・ストリームをホスティングし、オンデマンドで表示するサービス（例えば、ウェブ・サイト）によって実施することができる。
方法１８００は、ステップ１８０２で初期化され、ステップ１８０４に進み、ここで、メディア・ストリームを視聴者に表示する（例えば、視聴者の要求時に）。いくつかの実施形態で、方法１８００は、視聴者が特定のアイテムを含むメディア・ストリームを検索することを可能にする。例えば、視聴者は、キーワード検索を使用して、キーワード「Ｂｒａｄｙ Ｂｕｎｃｈ」の広告を目玉にしたすべてのメディア・ストリームを見つけることができる。一実施形態で、方法１８００は、アクセス・プロバイダを提供するリモート・コンピュータに、視聴者のディスプレイ・デバイスのタイプおよび機能（例えば、スクリーン解像度、計算能力、ネットワーク帯域幅、または類似物）に関する情報を供給する。視聴者の人口統計または地理に関するさらなる情報を供給することができる（例えば、視聴者の位置）。特定のタイプのマッピングに関する視聴者が選択したプリファレンスに基づいて、さらなる情報を供給することができる（例えば、視聴者が、「ユーモア」補足コンテンツを好むこと、または値引きクーポンを含む補足コンテンツを好むこと）。
ある種の実施形態で、メディア・ストリームが、フルスクリーン・モードまたは小さいスクリーンで見られるときに、表示は、視聴者が、後に見るためにメディア・ストリームにマッピングされた補足コンテンツに関する情報をウェブ・サイトに送ること、または視聴者がそこからメディア・ストリームを選択した画面に情報を単純に送り返すことを選択する（例えば、ボタンを押すことによって）ことを可能にする。
ステップ１８０６で、メディア・ストリームにマッピングされた補足コンテンツを視聴者に表示する。一実施形態で、補足情報は、オーバーレイまたは他の侵入的インターフェース・デバイスとしてではなく、再生中のメディア・ストリームに隣接するフレームまたはディスプレイ位置で視聴者に表示される（視聴者が表示されるメディア・ストリームと補足コンテンツとの両方を同時に見られるように）。例示的ディスプレイ・デバイス１９００が、それぞれ補足コンテンツを表示する様々なフォーマットを示す図１９Ａ〜１９Ｄに描かれている。ディスプレイ・デバイス１９００は、メディア・ストリームを表示する主表示区域またはペイン１９０２を含み、このメディア・ストリームは、図１９Ａ〜１９Ｄの例示的ケースでは、学校のダンス・パーティのビデオである。少なくとも１つの補足ペイン１９０４１〜１９０４ｎ（以下では集合的に「補足ペイン１９０４」と称する）が、ビデオに関連付けられた補足コンテンツの同期化された表示のために設けられ、この補足コンテンツは、図１９Ａ〜１９Ｄの例示的ケースでは、現在は、おそらくはビデオの現在時刻に学校のダンス・パーティで現在再生されている音楽の、音楽ＣＤの広告である。メディア・ストリーム・コントロール１９０６が、メディア・ストリームの再生、一時停止、およびシークという標準操作のために設けられ、表示されたメディア・ストリーム内の現在の時間位置が、メディア・ストリームの全長と一緒にカウンタ１９０８内に示される。
図１９に示されているように、補足コンテンツの表示は、関連付け情報に従って、メディア・ストリームの表示と同期化される。例えば、補足コンテンツの第１アイテムが、時刻ｔ＝１０から時刻ｔ＝４０までにまたがるセグメントを識別するセグメント識別子にマッピングされ、補足コンテンツの第２アイテムが、時刻ｔ＝２０から時刻ｔ＝３０までにまたがるセグメントを識別するセグメント識別子にマッピングされると仮定する。時刻ｔ＝１０には、補足コンテンツの第１アイテムが、視聴者に表示される。時刻ｔ＝２０には、補足コンテンツの第１アイテムと第２アイテムとの両方が表示される。時刻ｔ＝３０には、補足コンテンツの第１アイテムだけが表示され、時刻ｔ＝４０には、補足コンテンツの第１アイテムも第２アイテムも表示されない。補足コンテンツの表示をアクティブ化するために、特定の視聴者介入は不要である（すなわち、補足コンテンツは、視聴者によるメディア・ストリームの一時停止、シーク、および停止を考慮に入れて、ポストするユーザ／コンテンツ作成者によって確立された同期化に従って自動的に表示される）。ある種の実施形態で、補足コンテンツの複数のセットを同時に表示することができ（例えば、追加の補足ペインを追加することによって）、すべての表示される補足コンテンツが、メディア・ストリームに同様に同期化される。
メディア・ストリーム・プレイヤが、別のコンテンツ・ペイン（例えば、ウェブ・ページ、ブログ、または類似物）内で実施される場合に、含むペインに表示される他のコンテンツを、メディア・ストリームまたは関連付けられた補足コンテンツに従って選択することができる。例えば、含むペインに表示されるバナー広告を、メディア・ストリームに関連付けられたキーワードに基づいて、メディア・ストリームのターゲット人口統計に基づいて、メディア・ストリームにマッピングされた補足コンテンツに基づいて、ライブラリの階層内の補足コンテンツのアイテムの位置に基づいて、または特定の視聴者についてどのマッピングを使用すべきかを判定するためにシステムによって収集された視聴者情（例えば、人口統計、地理情報、デバイス情報、または補足コンテンツとの以前の対話）に基づいて選択することができる。例えば、図４５に、メディア・ストリーム４５０４に関連付けられた補足コンテンツ４５０２内のキーワードが、関連するバナー広告４５０６を生成するのに使用される、例示的ディスプレイ４５００を示す。
一実施形態で、あるメディア・ストリームが視聴のためにアクセスされるたびに、方法１８００は、様々な関連データ（例えば、そのメディア・ストリームのマッピング（１つまたは複数）がプレースホルダを含むかどうか、補足コンテンツの様々な代替アイテム内に埋め込むことができるデターミナ、視聴者がそこからそのメディア・ストリームにアクセスしているウェブ・サイトによって提供される人口統計情報など）を収集し、そのメディア・ストリームを表示する前またはそのメディア・ストリームの表示と共にほぼリアル・タイムでのいずれかで、表示すべき補足コンテンツの特定のアイテムを判定することができる。このデータが収集されたならば、方法１８００は、そのメディア・ストリームをストリーミングし、次に、補足コンテンツのマッピングされたアイテムを単一のストリームまたはアプリケーションに同時にストリーミングすることができる。代替案では、方法１８００は、補足コンテンツの異なる可能な組合せのすべて（例えば、プレースホルダにリンクされた補足コンテンツのすべての可能な組合せ）を自動的に判定し、組合せごとに別々のデータ・ストリームを作成することができる。そのように作成された各別々のデータ・ストリームを、メディア・ストリームと組み合わせるか、メディア・ストリームとは別々に維持することができる。この実施形態では、視聴者がメディア・ストリームにアクセスするときに、方法１８００は、視聴者に提示される補足コンテンツ・マッピングの版（または、組み合わされたマッピングおよびメディア・ストリームの版）を判定する。
一実施形態で、マッピングは、メディア・ストリームからのデータとの直接接続またはそのデータへのアクセスをまったく伴わずに、視聴者に提示されるメディア・ストリームから完全に独立である。例えば、メディア・ストリームを、第１アクセス・プロバイダによって提供することができ、マッピングを提供する第２アクセス・プロバイダは、そのマッピングを、マッピングを要求するすべての第三者から使用可能にすることができる（例えば、第２アクセス・プロバイダがマッピングを選択するのに利用するメディア・ストリームの「識別子」を提供することによって）。メディア・ストリームとの同時性を保証するために、メディア・ストリームおよびマッピングが２つの別々のプレイヤ・デバイスを介して視聴者に提示されるかもしれない（例えば、「早送り」および「一時停止」などのコマンドが視聴者によってメディア・ストリーム・プレイヤに与えられるときに、同一のコマンドが補足コンテンツを再生するプレイヤに鏡映されるように、メディア・ストリームを再生しているプレイヤにリンクされた、補足コンテンツを再生しているプレイヤを用いて）この機能性は、補足コンテンツがメディア・ストリームと同期していることを可能にするが、メディア・ストリームをホスティングするサービスとは別のサービスによって補足コンテンツをホスティングすることを可能にする。これは、メディア・ストリーミングをホスティングするための帯域幅コストまたは他の要件が、マッピングをホスティングするための要件と異なる可能性があり、したがって、この２つの機能を分離することに利益がある可能性があるので、有利である可能性がある。
ある種の実施形態で、アクセス・プロバイダは、他のウェブ・サイトのオペレータが、特定のメディア・ストリームにリンクし、そのメディア・ストリームを彼らの他のウェブ・サイトに含めることを許可することができる。一実施形態で、これは、メディア・ストリームが、補足コンテンツの関連付けられたアイテムを表示する機構と一緒にリンクされるのみになり、第三者ウェブ・サイトでのメディア・ストリームの視聴が、補足コンテンツのアイテムの表示を含むことが保証されるように構成される。そのようなコンテキストで、補足コンテンツとのすべての視聴者対話（例えば、視聴者が補足コンテンツの所与のアイテムをクリックすること）を、アクセス・プロバイダに戻して転送することができる。代替案では、視聴者対話は、潜在的に対話のレコードがアクセス・プロバイダと共有されるようにするために、第三者ウェブ・サイト上で可能にされる。この実施形態に関連する収入モデルは、視聴者購入または他の収入を生成するクリック・スルー・アクティビティに関する第三者ホストと主アクセス・プロバイダとの間の収入の折衝された共有を含むものとすることができる。
補足コンテンツのアイテムが、メディア・ストリームにマッピングされたならば、方法１８００は、そのメディア・ストリーム内で提示される特定のライブラリ・エントリおよび／またはそのコンポーネント（ならびに、そのライブラリ・エントリが現れるメディア・ストリームの時間セグメント）のログ・リスティングを作成することができる。そのメディア・ストリームが視聴者によってアクティブ化されるときに、方法１８００は、これによって、その視聴者によって「クリック」された補足コンテンツのアイテムだけではなく、その視聴者に提示された補足コンテンツのアイテムのすべてを記録することができる。これは、視聴者が情報の提示に関して特定のアクションを行う（追加情報にアクセスするために補足コンテンツのアイテムをクリックするなど）状況を容易にすることに加えて、情報の提示に関して広告主または他の当事者に請求する際にアクセス・プロバイダを助ける。
戻って図１８を参照すると、ステップ１８０８で、方法１８００は、関連付けられた補足コンテンツの特定のアイテムへの関心を示す信号を視聴者から受け取る。この信号は、要求の達成のためにアクセス・プロバイダ（または他の第三者）に渡され、ステップ１８１０で、シグナリングされた要求に関するさらなる情報が、ユーザに表示される（前に方法１７００のステップ１７１０および１７１２に関してアクセス・プロバイダの観点から説明したように）。
その後、方法１８００は、ステップ１８１４で終了する。
したがって、本明細書で説明される方法は、単純なメディア・ストリーム・アクセス・プロバイダを、追加のユーザ創造性を可能にし、視聴者側に誘導されるアクティビティについて、ポストするユーザ／コンテンツ作成者に報酬を与えるメディア・ストリーム・アクセス・プロバイダに変換するために実施することができる。アクセス・プロバイダおよび広告主または補足コンテンツの他のプロバイダは、そのようなシステムから収入を引き出すこともできる。
しばしば、特定のメディア・ストリームが、「寿命」を有するが、「生き返る」こともできる場合がある。例えば、かわいい小犬のビデオは、非常に説得力があると同時に非常に忘れられやすい（かつ／または繰返し視聴をサポートする）。したがって、アクセス・プロバイダのオペレータは、自動的にまたはポストするユーザの要求時に、セットされた時間期間の間だけメディア・ストリームを「棚に置き」、事前に決定される（すなわち、メディア・ストリームは自動的に公開される）かポストするユーザによるアクションのときのいずれかの後日に、サイトに再ポストすることができる。アクセス・プロバイダは、特定のメディア・ストリームの「視聴パターン」を監視し、ポストするユーザに、彼らがある期間の間メディア・ストリームを除去することを望むことを暗示する自動電子メールを送出することもできる。アクセス・プロバイダは、そのようなメディア・ストリームを、ある形の検索を利用して視聴者からそれでも使用可能にする（例えば、小犬のクリップが、特定のキーワード検索に応答して現れる）が、ある種の他の検索方法論に応答しては現れない（例えば、「最もよく見られている」リストには現れない）ものになることを可能にすることができる。これは、アクセス・プロバイダが、同一のメディア・ストリームをリストの最上部に現れさせることによって「古く」見えるのを避けるのに役立つ。これを行う１つの形は、「最もよく見られた」を「最も最近に見られた」の概念と組み合わせたアルゴリズムを使用することである。この手法は、例えば、「より新しい」がより少なく見られているＮＢＡファイナルのビデオを優先して、６月にワールド・シリーズ関連ビデオを最もよく見られたカテゴリから除去することをもたらす（短い期間中に幅広く見られた場合であっても）。
いくつかの実施形態で、アクセス・プロバイダは、広告主または補足コンテンツの他のプロバイダが、特定の関連付けに満足しない場合に、彼らの補足コンテンツのアイテムを「プルする」（すなわち、そのプレゼンテーションを除去するか阻止する）ことを可能にすることができる。例えば、自動車製造業者は、彼らのＳＵＶ広告が地球温暖化に関するビデオに関連付けられることを許可したがらない可能性がある。これを可能にするために、補足コンテンツの特定のアイテムが関連付けられたすべてのメディア・ストリームを判定する検索機能を提供することができ、関連付けを除去する能力は、正当な権利を有するプロバイダだけがこの能力を有するようにするために、セキュリティ対応プロセス（例えば、パスワード・システム）に従属する。例えば、図４１に、補足コンテンツの所与のアイテムに関連付けられたメディア・ストリームの検索を可能にするために広告主に提示できる例示的ディスプレイ４１００を示す。図４２に、図４１のディスプレイ４１００によって使用可能にされるものなどの検索の結果が提示される例示的ディスプレイ４２００を示す。図４３に、広告主が、所与のメディア・ストリームとの補足コンテンツのアイテムの関連付けを阻止することを可能にされる、例示的ディスプレイ４３００を示す。
補足コンテンツのライブラリを使用する実施形態では、ライブラリの一部を、特定のタイプのメディア・ストリームとの関連付けについてのみ適当としてマークすることができる。このマーキングは、性質において助言とすることができ、あるいは、マークされたコンテンツとの関連付けが許可されなくなるようにシステムによって強制することができる。コンテンツを、特定の視聴者人口統計を用いてマークすることもできる（例えば、特定の年齢範囲向けのまたは特定の年齢範囲に不適切なコンテンツが、そのような人口統計に提供されるマッピングのみに使用可能または使用不能になるように）。さらに、メディア・ストリームおよびそれに関連付けられた補足コンテンツの提示中に、視聴者による最初のフラグ立てのときまたはある絶対個数もしくはパーセンテージ数の視聴者が関連付けにフラグを立てるときのいずれかに、人間の再検討のために視聴者が潜在的に不適当なまたは望ましくない関連付けにフラグを立てる方法を提供することができる。
ある種の実施形態で、補足コンテンツへの複数のマッピングが使用可能である場合に、回転法を使用して、視聴者に提示されるマッピングを選択することができる。例えば、メディア・ストリーム３６０２のセグメントに関連付けられたセグメント識別子への潜在的マッピングに関する類似する補足コンテンツの３つのアイテム３６００１〜３６００３（以下では集合的に「アイテム３６００」と称する）を示す図３６を参照すると、３つの異なるマッピングＭ１、Ｍ２、およびＭ３が、特定のメディア・ストリームについて使用可能である場合に、メディア・ストリームの第１の視聴者がマッピングＭ１を受け取り、メディア・ストリームの第２の視聴者がマッピングＭ２を受け取り、メディア・ストリームの第３の視聴者がマッピングＭ３を受け取り、それぞれが、これによって、受け取られるマッピングＭ１、Ｍ２、またはＭ３に従って、異なる同期化時刻に補足コンテンツの潜在的に異なるアイテムを受け取るように、マッピングを回転することができる。このメディア・ストリームの第４の視聴者は、マッピングＭ１を受け取り、以下同様である。提供されるマッピングを狭め、各マッピングのＮ回の視聴の後に、最高の視聴者関心（例えば、補足コンテンツのアイテムのクリックの回数、結果として完了した商取引の回数または価値などによって測定される）を生じるマッピングが、このメディア・ストリームに関連する後続の提供に関する唯一のマッピングとして選択されるようにすることができる。例えば、図３６に示された回転される補足コンテンツの各めいめいのアイテムのクリック・スルー・カウンタ３７００１〜３７００３（以下では集合的に「クリック・スルー・カウンタ３７００」と称する）を示す図３７を参照すると、アイテム３６００２が、３つのアイテム３６００の中で、３８３回のクリック・スルーのうちで最多のクリック・スルーを生成した。したがって、アイテム３６００２が、メディア・ストリーム３６０２の関連セグメントと共に表示するために選択される。
回転される補足コンテンツの異なるめいめいのアイテム３８０２１〜３８０２３（以下では集合的に「アイテム・カウンタ３８０２」と称する）のクリック・スルー・カウンタ３８００１〜３８００３（以下では集合的に「クリック・スルー・カウンタ３８００」と称する）を示す図３８に示されているように、共同制作者がメディア・ストリーム３６０２への潜在的なマッピングのために補足コンテンツの様々なアイテムを提案する、類似するプロセスを実施することができる。この例示的な図では、第１の共同制作者は、スキー・ゴーグルに関連するアイテム３８０２１を提案しており、第２の共同制作者は、スキー帽に関連するアイテム３８０２２を提案しており、第３の共同制作者は、スキー・パンツに関連するアイテム３８０２３を提案している。ある回数の回転の後に最高のクリック・スルー・レートを受け取る補足コンテンツのアイテム３８０２（このケースでは、第３のアイテム３８０２３）が、最終的なマッピングのために選択される。
代替案では、最低の視聴者関心を有するマッピングを、回転から除去することができ、残ったマッピングは、回転および除去の後続ラウンドの後に１つのマッピングだけが残るまで、回転される。回転および除去／選択は、メディア・ストリームの全視聴者について、または特定の人口統計だけについて実行することができる（例えば、男性視聴者用の１つのマッピングと、女性視聴者用の複数の使用可能なマッピングの中から選択するための回転手法）。
複数のマッピングが、それぞれが補足コンテンツの異なるセットにマッピングされる特定のメディア・ストリームについて提供される場合に、ユーザが、メディア・ストリームの特定のセグメントに関する特定の関連付けの成功を比較することを望む場合がある。関連付けが、各マッピングにおいて同一の時刻に正確には同期されない場合に、比較動作は、正確な同期の欠如を調和させるために、補足コンテンツの特定のアイテムの提示の前後の、ある時間ウィンドウ内のユーザ関心を追跡することができる。
伝統的なメディア・ストリーム・アクセス・プロバイダは、視聴者に、潜在的に興味深く面白いコンテンツへの鍵を提供するために、「最もよく見られた」、「最高レーティングの」、「最も多くコメントされた」、および類似物に関するメディア・ストリームのランキングを提供する。特定のメディア・ストリームに関連付けられた補足コンテンツへの視聴者関心に関するデータが入手可能である本発明の実施形態では、そのデータを使用して、メディア・ストリームのランキング・システムを提供することができる。「最も多くクリックされた」、「最も商業的に成功した」、および類似物などのランキングを提供することができ、新しいメディア・ストリーム・プロバイダ／コンテンツ作成者に、関連付けの成功したセットを構成するものに関するフィードバックおよびヒントが提供される。いくつかの実施形態で、そのようなランキングは、より微細な粒度を有する形（例えば、特定の人口統計に関する最も成功した商業的関連付け）で提供される。
本明細書で説明するように、メディア・ストリームの所与の視聴者に表示すべき（おそらくは所与のコンテキストで）補足コンテンツの特定のアイテムの選択に関して、この選択を行うために、任意の個数の要因を参照することができる。例えば、この選択は、潜在的に「典型的」視聴者のプロファイルまたは視聴者のグループのプロファイルに集約された、視聴者のグループ（例えば、所与の地理的区域内の全視聴者）に関する情報に基づくものとすることができる。この手法は、各個々の視聴者に示すべき最適の補足コンテンツを判定するという計算的に重荷になる手法を必要とせずに、関連する補足コンテンツの提示を可能にするはずである。他の例には、視聴コンテキスト（例えば、時刻、位置）または他の媒体もしくはコンテキストでの視聴者の挙動（例えば、インターネット検索、視聴者のクレジット・カードレポートで表されるアクティビティを参照することを介して判定される小売店購入）に関する情報を参照することによって補足コンテンツの選択を決定することが含まれる。他の例には、メディア・ストリームの所与のセグメントの是遺体的なムードまたはトーン（例えば、センチメンタル、愛国的、ロマンチック、憂鬱な、希望が持てる、偏執的な）、セグメント内の特定の俳優または女優（すなわち、視聴者Ｘは、特に俳優Ｂと共にシーンに現れるときに、女優Ａを見ることを好む）、音楽のタイプ（例えば、カントリー、クラシック、ロック、ヒップホップ）、アクションのタイプ（例えば、暴力、スポーツ、ダンス、キス、食べる）、プロダクト・プレースメントの優勢（例えば、視聴者Ｘは、「微妙な」プロダクト・プレースメントを一度もクリックしなかった）、視聴者関心がシグナリングされたセグメントの前のセグメントの特性（例えば、視聴者Ｘは、後悔のムードが続く暴力のセグメントによく反応する）、時刻（例えば、視聴者Ｘは、通常、この時刻にテレビを見ず、したがって、視聴者Ｘは、病気である可能性がある）、および第三者によって提供されるデータを参照した後に選択される補足コンテンツ（例えば、特定の視聴者郵便番号に関する気象データ）が含まれる。上にリストした様々な要因を、視聴者によるインターネットの使用から入手された従来のクリックストリーム・データ、人口統計データ（すなわち、郵便番号、ＧＰＳ座標）、同一世帯の他の視聴者に関するデータ、および類似物と対にすることができる。
補足コンテンツの選択を助ける自動化されたシステムに関して、そのシステムが、経時的により正確になるにつれて、そのシステムの統計モデルなどが、所与の視聴者にとって最も重要である可能性がある補足コンテンツのアイテムを絶対に完全には予測しなくなり続けるかもしれない。一実施形態で、ある視聴者にとって重要であると「予測される」補足コンテンツのアイテムのセットされた個数またはパーセンテージ（すなわち、おそらくは１％）について、このシステムは、ランダムに決定されるかほぼ確実にその視聴者にとって重要ではないと判定されるかのいずれかである補足コンテンツのアイテムを選択する。多数の視聴者経験を与えられれば、これらの「偶然の」オファリングのうちの少数が、視聴者によって選択される（すなわち、セレンディピティ）。一実施形態で、このシステムは、このセレンディピティに注目し、次に、補足コンテンツのその同一のアイテムを、類似する関心を有するすべての他の視聴者に供給し、この形で、以前には識別されなかった「ニッチ」関心をアンロックすることができる。
一実施形態で、メディア・ストリームが表示されているときに必ず、視聴者ディスプレイ・デバイス（またはそれに接続された仲介デバイス）は、セグメントおよび／またはコンテンツ作成者もしくはアクセス・プロバイダによって提供される他の情報を参照することによって、メディア・ストリーム内で（あるいは、一緒に結合されているメディア・ストリームのセットにまたがって）周期的に先読みする。次に、視聴者がそのメディア・ストリームを通って早送りするときに必ず、それに関連付けられたすべての標準補足コンテンツが、その補足コンテンツの、高速ではるかによりよく読み取られる（例えば、長い時間期間に画面上にあるより大きいロゴを使用する）異なる版に置換される。これは、広告主にとって問題になり得る、視聴者が標準コマーシャル・フィードを通って早送りするという問題と戦う。一実施形態で、補足コンテンツを過ぎて早送りすることの視聴者のヒストリが、再検討される。視聴者が、頻繁に補足コンテンツを通って早送りする傾向がある場合に、その視聴者に送られる補足コンテンツのすべてを、望まれる通りに置換することができる。
一実施形態で、広告用の配信される信号（例えば、テレビジョン・コマーシャル）は、実際には第１ストリームおよび第２ストリームで送信される。広告が、普通に再生されることを可能にされる場合には、標準的な第１ストリームが再生される。広告が早送りされる場合には、置換の第２ストリームが再生される。言い換えると、早送り命令は、単純に、第１ストリームと第２ストリームと間での両方向のカット・バックをトリガする。
一実施形態で、視聴者は、早送りが自動的に開始されるが、自動的に停止はされなくなるようにするためにデフォルト・セッティングをセットすることを可能にされる。したがって、視聴者は、早送りを停止するために注意を払わなければならない。プリセット・デフォルトは、置換コンテンツをキャッシングし、使用可能にすることをより簡単にするはずである。
一実施形態で、早送りが発生する実際の時間期間は、視聴者が、早送りするときによく見る（平均的な人が早送りされた広告の約２１％の想起レートを有する理由である）ことを奨励するためにランダムに割り当てられる（パラメータのある範囲内で）。これは、重複するセグメントを追加することによって達成することができる。
本発明のインフラストラクチャおよび手法は、事実上全世界を「ハイパーリンクし」、その中の物品を検索可能なオントロジ内に配置するのに使用することができる。一実施形態で、各重要な点（例えば、店または国立公園、動物園、もしくは博物館の特定のスポット内の特定の製品ディスプレイ）が、一意識別子を割り当てられるために「登録する」。次に、誰もが彼ら自身のウェブ・サイト、物品フィードを作成することを可能にするウェブ・サイトが作成される。次に、識別子が、継続的に送信され（例えば、超音波、Ｗｉ−Ｆｉ、または類似物を介して）、視聴者のポータブル・デバイスによって受信される。したがって、視聴者は、即座に情報を見ることができ、あるいは、後の再検討のために位置をブックマークすることができる（例えば、その視聴者のオンライン・アカウントに）。
一実施形態で、視聴者のデバイスは、所望の情報を取り出すのに必要な信号を送信することができる。例えば、映画館は、聴衆が、上映されている映画に関連付けられた補足コンテンツをブックマークすることができるが、即座に見ることはできなくなるようにするために、信号を送信する（例えば、放送する）ことができる。
多数の物品がＲＦＩＤ情報を用いてタグ付けされる世界を検討されたい。例えば、ある店の中のすべての物品を、データベース内でカタログ化することができる。次に、ＲＦＩＤタグの「リーダー」の位置がわかっている（例えば、リーダーが、一体化されたＧＰＳ機能を含むセル電話機である）と仮定する。したがって、このデータベースは、特定の物品のタグが最後に読み取られたときのその物品の位置をログ記録することができる。言い換えると、リーダーの位置がわかり、この知識を使用して、物品の位置を判定することができる。逆に、物品の位置がわかっている場合があり、この知識を使用して、その物品を読み取っている視聴者の位置を確立することができる。一実施形態で、視聴者の位置（ならびに、位置の変化およびシーケンス）は、データベースがその位置データを含む特定の物品との視聴者の対話を追跡することによって追跡される。この位置データを、消費者挙動または類似物に関するその視聴者のプロファイルの一部として格納し、使用することができる。
一実施形態で、リーダーが物品に問い合わせるときに、データベースは、そのデータベース内の全物品の位置のマップを更新する。次に、リーダーは、これらの位置に基づいて様々な照会を行うことができ、かつ／または、様々な形の情報を、そのリーダーに送信することができる。例えば、視聴者が、スーパーマーケット内の物品に問い合わせる場合に、データベースは、その物品の価格と、同一の物品を見つけるために行くべき視聴者の近くの店とを視聴者に知らせることができる。代替案では、視聴者は、インターネット上で物品を見つけ、その物品を突き止めることができる場所を判定するためにデータベースに照会することができる。
視聴者デバイスは、そのＧＰＳ座標を直接に送信し、この情報を、上で説明した位置判定方法を介してその区域内にあることがわかっている他の物品と比較することができる。このデータを、視聴者の消費者プリファレンス（例えば、過去のクリック・スルー、購入、検索アクティビティなどによって判定される）または特性（例えば、物理的測定値）など、視聴者に関する既知の他のデータと組み合わせることができ、この情報を使用して、視聴者を、物理的に視聴者の近くにある特定の物品に向けることができる。例えば、視聴者デバイスは、「左側１０フィート（３．０４８ｍ）にあるＸＬの青いドレス・シャツが気に入るかもしれません」という主張を有する画面を表示することができる。
一実施形態で、データベースにアクセスするのに使用される視聴者デバイスは、視聴者に関する情報を含む信号を送信することもでき、この情報は、店内のパーソナライズされたディスプレイをトリガするのに使用することができる。一実施形態で、視聴者デバイスは、視聴者のＩＤだけを含み、このＩＤは、データベース内に格納された視聴者のプロファイルとマッチする。例えば、このデータベースには、視聴者の収入レベルを含めることができ、販売者は、カスタマイズされた取引を主催することができる（例えば、「左にあるシャツを買う場合に、この画面を見せれば１０％値引きします」）。
任意の特定の店または混んだ通り（例えば、タイムズ・スクエア）の人の数を考え、多数の人が同一コンテンツを同時に見ることができることを考えると、各視聴者にその視聴者自身のコンテンツを与えることは、不可能である。逆に、ある視聴者が受け取るすべてのコンテンツがあまりに完全にパーソナライズされるならば、その視聴者にとって心を乱すものになる可能性がある。一実施形態で、ある視聴者の人口統計の要約および特定の区域内の全視聴者の他の特性の要約が、作成され、この要約は、最も多数の視聴者に最良の広告を選択するのに利用される。例えば、タイムズ・スクエアの広告掲示板は、朝の時間中に、その区域内のほとんどの人が、通勤する専門家である（例えば、保険サービスの広告をトリガする）こと、午後の間に、その区域内のほとんどの人が、旅行者である（例えば、安いブロードウェイ・チケットの広告をトリガする）こと、および夕暮れの間に、その区域内のほとんどの人が、ニュー・ジャージーからの１０代である（例えば、彼らの好みの音楽を目玉にする運動靴の広告をトリガする）ことを検出することができる。
視聴者デバイスのＲＦＩＤ検出器を物品のグループ（例えば、店のディスプレイ内の物品のコレクション）に向けることが、ＲＦＩＤタグの限定性の欠如のゆえに、データベース内で複数の物品をトリガさせ、視聴者は、関心を持っている物品を選択する必要が生じる場合がある。一実施形態で、視聴者は、物品のグループを問い合わせ、データベースが、アクセスされる。次に、データベースは、視聴者デバイスの近くの物品のリスト（例えば、単語または写真）を送信する。視聴者は、関心を持っている物品（１つまたは複数）を選択し、改訂された照会が、データベースに送り返され、この照会によって、より完全な情報が返される。
一実施形態で、データベースは、各物品のグラフィカル表現を含む、特定の位置内のＲＦＩＤによって識別されたすべての物品に関する情報を与えられる。次に、特定の位置（例えば、スーパーマーケット）内で、その位置内の物品の相対位置に関して三角測量する（またはなんらかの他の形で判定する）ことのできるセンサが配置される。このデータは、その位置およびそこで見られる物品をシミュレートする仮想世界を作成するのに使用することができる。次に、視聴者のアバタが、仮想位置を「訪れる」ことができ、その位置内の広告は、その視聴者のためにカスタマイズされる。
一実施形態で、物品は、特定の位置内で見つかるが、オンライン仮想位置は、実際の位置と異なるルック／フィールを有する。言い換えると、仮想位置を、視聴者のプリファレンスに適するように再配置することができる。次に、視聴者が実際の位置を訪れるときに、視聴者デバイスに一体化されたＧＰＳ機能が、視聴者を物品の実際の位置に案内する。例えば、ある店を、ある物品を新たに仕入れる必要があるかどうかを知りたがっている配達員のために再配置することができる。
一実施形態で、上で説明したデータを使用して、位置レイアウトおよび広告のシミュレーションを実行して、その区域内のありそうな視聴者が、ある種の物品、価格、広告ディスプレイ、および類似物にどのように反応するかを判定することができる。
さらに、本発明の多数の実施形態を、テレビジョンを介してまたはインターネットを介して配信されるメディア・ストリームの文脈で説明したが、当業者は、本発明の概念を、映画上映およびビデオ・ゲームを含む他の形のメディア・ストリーム配信に適用できることを了解するであろう。例えば、上映される映画の各セグメントが、ある範囲の補足コンテンツにマッピングされる一意識別子にリンクされる。その映画を上映する映画館は、映画館全体にセグメント識別子情報を送信することができ（例えば、Ｗｉ−Ｆｉまたは超音波を介して）、その結果、そのセグメント識別子を読み取ることのできるデバイスを有するすべての視聴者が、関心のあるセグメントを取り込めるようになる。この情報は、即座の補足コンテンツを提供することができ、あるいは、後の（例えば上映後の）再検討のためにブックマークされるものとすることができる。代替案では、セグメントごとの識別子送信が非実用的であるとわかった場合に、映画を識別する単一の超音波またはコードだけを送信することができ、その後、タイムコードを使用することができる。というのは、タイミングを「狂わせる」コマーシャル中断の可能性がないからである。
一実施形態で、視聴者デバイスは、ドッキングでき（例えば、自動車内で）、送信をリモートに受信できるポータブル・デバイスである。例えば、視聴者デバイスを、セグメント識別子を読み取り、かつ／またはセル電話機が向けられているデバイスにセグメント識別子を送信させるのに必要なリーダーを含むセル電話機とすることができる。リモート・アクセスの文脈では、各送信器位置（例えば、博物館、国立公園、モール、および類似物の中）が、様々なパラメータ（例えば、戸外または屋内、景色がよいか否か、都市または田舎、伝えられる情報のタイプ（例えば、ヨセミテ公園の滝の景色のよい眺めまたはニュー・ジャージー・ターンパイクの脇の広告掲示板）、および関係のある広告コンテンツのパラメータ（色、サイズ、コンテンツ、手法など））と一緒に記述される。この記述は、視聴者の挙動、反応、および類似物に関する有用な情報を提供する。
一実施形態で、送信器記述入力は、他のソースから入手可能な追加情報と突き合わされる。例えば、所与の時刻および位置での全般的な気象条件を知ることが可能である場合がある。もう１つの例では、視聴者が、ハイウェイの広告掲示板に反応している場合があり、視聴者の自動車の速度（または全体的な交通速度）を知ることが有用であるはずである。というのは、これが、その広告掲示板が、ある速度でのみ有効であることを示唆する場合があるからである。
もう１つの実施形態で、本発明の概念は、コンピュータ・ゲームまたはビデオ・ゲームのコンテキストで適用される。特定のゲーム内の関連する各位置および物品には、通常使用されるセグメント識別子への一意識別子を割り当てることができる。データベースには、セグメント分類データ（例えば、環境のタイプ、ゲームのタイプ、使用されるフォント、使用されるイメージなど）に類似する、位置または物品（または位置および物品の組合せ）に関する情報が格納される。さらに、ゲーム内の補足コンテンツ・スペースの近くのアバタ（すなわち、ゲーマーのコンピュータ実施形態）も、報告される。次に、上で説明したものと同一の手法が、ゲーム環境内で適用される（例えば、その位置に集まっている視聴者の人口統計混合物およびプリファレンスを与えられて、その位置に供給すべき「最適の」補足コンテンツを判定する）。補足コンテンツには、広告掲示板、背景に埋め込まれるライブ・ビデオ、アバタがクリックできる通りまたは店のウィンドウ内に置かれた物品（例えば、ビデオ・ゲーム内でアバタが運転する特定の自動車）、および類似物を含めることができる。この手法を使用することの利益は、ビデオと同一すなわち、（１）補足コンテンツをゲーム内に埋め込む必要がなく（中央で「ホスティング」されるのではないゲームについて）、（２）補足コンテンツを個々の視聴者／プレイヤ向けにターゲティングすることができ、（３）サービスが、補足コンテンツのインフラストラクチャ全体を提供し、（４）ターゲティングが、他の媒体との視聴者／プレイヤの対話によって生成されるデータ（例えば、視聴者がビデオ・コンテキスト内の広告に関して「クリックした」もの）を活用できることである。
さらに、上で説明したように、本発明の概念を、データ・マイニングのために有利に適用することができる。例えば、セグメント識別子、視聴者人口統計、過去の視聴者反応、および類似物によって取り込まれる独自の統計は、メディア・ストリームとの視聴者の直接対話には関係しない任意の個数の目的のためのデータ・マイニングをサポートすることができる。言い換えると、セグメント識別子にマッピングされたデータベースは、所与のセグメントの多数の異なる態様を様々な数値情報に変換する潜在能力を有する。同様に、視聴者対話を数値情報に変換することができる。この基礎から、統計モデリングを利用して、所与のメディア・ストリームが所与のグループから生成する可能性が高い反応（または、逆に、その所与のグループが肯定的に反応する可能性が最も高いコンテンツのタイプ）を予測することができる。
一実施形態で、プロキシ・メディア・ストリームの複数のテンプレートが作成され、ここで、プロキシ・メディア・ストリームは、異なるタイプのメディア・ストリームをシミュレートする。これは、物品またはそれに関係する補足コンテンツを配置しなければならないメディア・ストリームのタイプを判定する際に、広告主を助けることができる。これらの統計を入手したならば、実際のメディア・ストリームを、視聴の前に検査することもできる。この形で、入札システムを配置して、広告スペースおよび類似物をオークションにかけることができる。
図４７および４８に、本発明の諸態様のもう１つの応用例を示す。具体的に言うと、図４７に示されているように、ホーム・シアター視聴デバイス４７００でメディア・ストリームを見る視聴者は、メディア・ストリームを一時停止することを選択し、そのメディア・ストリームの現在のセグメントを識別するセグメント識別子を、アクセス・プロバイダ４７０２のその視聴者のアカウントに送信することができる。図４８に示されているように、この視聴者は、後に、そのメディア・ストリームを受け取り（潜在的に、ポータブル・メディア・プレイヤなどの新しいディスプレイ・デバイス４８００を介して）、視聴者がそのメディア・ストリームを一時停止したセグメントで再開することを要求することができる。アクセス・プロバイダ４７０２は、その視聴者のアカウントに格納されたセグメント識別子を読み取って、メディア・ストリームの要求されたセグメント（１つまたは複数）を取り出し、要求されたセグメント（１つまたは複数）をその視聴者に配信する。
図１３は、汎用コンピューティング・デバイス１３００を使用して実施されるメディア・ストリーム注釈付け方法の高水準ブロック図である。一実施形態で、汎用コンピューティング・デバイス１３００は、プロセッサ１３０２、メモリ１３０４、注釈付けモジュール１３０５、ならびに、ディスプレイ、キーボード、マウス、モデム、および類似物などの様々な入出力（Ｉ／Ｏ）デバイス１３０６を含む。一実施形態で、少なくとも１つのＩ／Ｏデバイスは、ストレージ・デバイスである（例えば、ディスク・ドライブ、光ディスク・ドライブ、フロッピ・ディスク・ドライブ）。注釈付けモジュール１３０５を、通信チャネルを介してプロセッサに結合される物理デバイスまたは物理サブシステムとして実施できることを理解されたい。
代替案では、注釈付け取消モジュール１３０５を、１つまたは複数のソフトウェア・アプリケーション（または、例えば特定用途向け集積回路ＡＳＩＣを使用するなど、ソフトウェアおよびハードウェアの組合せさえ）によって表すことができ、ここで、ソフトウェアは、記憶媒体（例えば、Ｉ／Ｏデバイス１３０６）からロードされ、汎用コンピューティング・デバイス１３００のメモリ１３０４内でプロセッサ１３０２によって操作される。したがって、一実施形態で、前の図に関して本明細書で説明した、メタデータをメディア・ストリームにマッピングする注釈付けモジュール１３０５を、コンピュータ可読媒体またはコンピュータ可読担体（例えば、ＲＡＭ、磁気または光のドライブまたはディスケット、および類似物）に格納することができる。
したがって、本発明は、マルチメディア配信および広告の分野での重要な前進を表す。本発明の実施形態は、コンテンツ作成者、広告主、および他の当事者が、テレビジョン番組、コマーシャル、インフォマーシャル、予告編、ショッピング・チャネル・セグメント、音楽ビデオ、ムービー、ＶＨＳまたはＤＶＤのレコーディング、ビデオ・オンデマンド・コンテンツ、ビデオ・ゲーム（例えば、対話型テレビジョン・ゲーム、パーソナル・コンピュータ・ゲーム、オンライン・ゲーム、ハンドヘルド・ゲーム、およびコンソールベースのゲーム）、オンライン・ホスティングされるビデオ、および類似物などのメディア・ストリームを、そのメディア・ストリームに現れる物品（例えば、商業的物品、俳優、歌など）に関連する補足コンテンツを用いてマークアップすることを可能にする。したがって、情報および広告コンテンツ（プロダクト・プレースメントなど）を、技術的展望から計算的に単純化され、視聴者の展望から実質的に控え目な形で実施することができる。
明示的に指定されてはいないが、本明細書で説明した方法の１つまたは複数のステップに、特定の応用例に必要な格納ステップ、表示ステップ、および／または出力ステップが含まれる場合がある。言い換えると、これらの方法で述べたすべてのデータ、レコード、フィールド、および／または中間結果を、特定の応用例の必要に応じて別のデバイスに格納し、表示し、かつ／または出力することができる。さらに、判定動作を物語るか判断を含む、添付図面のステップまたはブロックは、必ずしも、判定動作の両方の分岐が実践されることを必要としない。言い換えると、判定動作の分岐の一方を、任意選択のステップとみなすことができる。
様々な実施形態を上で説明したが、これらが、限定ではなく例としてのみ提示されたことを理解されたい。したがって、好ましい実施形態の広がりおよび範囲は、上で説明した例示的実施形態のいずれによっても限定されてはならず、添付の特許請求の範囲およびその同等物に従ってのみ定義されなければならない。
本発明によるテレビジョン価値連鎖の一実施形態を示す概略図である。 コーディングされたメディア・ストリームを作る方法の一実施形態を示す流れ図である。 本発明による、メディア・ストリームに現れる物品上のタグを検出し、読み取る方法の一実施形態を示す流れ図である。 コーディングされたメディア・ストリームを作る方法のもう１つの実施形態を示す流れ図である。 コーディングされたメディア・ストリームを作る方法のもう１つの実施形態を示す流れ図である。 本発明による、メディア・ストリームに注釈を付ける方法の一実施形態を示す流れ図である。 本発明による、メディア・ストリームに注釈を付ける方法のもう１つの実施形態を示す流れ図である。 本発明による、注釈付きメディア・ストリームを視聴者に提供する方法の一実施形態を示す流れ図である。 本発明による、注釈付きメディア・ストリームを視聴者に提供する方法の第２の実施形態を示す流れ図である。 メディア・ストリームの一部に現れる物品に関する取り出された情報を提示する例示的ディスプレイを示す概略図である。 本発明による、注釈付きメディア・ストリームを視聴者に提供する方法の第３の実施形態を示す流れ図である。 本発明による、注釈付きメディア・ストリームを視聴者に提供する方法の第４の実施形態を示す流れ図である。 汎用コンピューティング・デバイスを使用して実施されるメディア・ストリーム注釈付け方法を示す高水準ブロック図である。 本発明による、メディア・ストリームに注釈を付ける方法のもう１つの実施形態を示す流れ図である。 本発明による、注釈付きメディア・ストリームを視聴者に提供する方法の第５の実施形態を示す流れ図である。 本発明による、補足コンテンツをメディア・ストリームに関連付ける方法の一実施形態を示す流れ図である。 補足コンテンツへの少なくとも１つのマッピングを伴うメディア・ストリームをホスティングするサービスを提供する方法の一実施形態を示す流れ図である。 マッピングされた補足コンテンツと共にメディア・ストリームを視聴者に表示する方法の一実施形態を示す流れ図である。 例示的ディスプレイ・デバイスを示す図である。 例示的ディスプレイ・デバイスを示す図である。 例示的ディスプレイ・デバイスを示す図である。 例示的ディスプレイ・デバイスを示す図である。 複数のセグメントに論理的に分割された例示的メディア・ストリームを示す図である。 図２０のメディア・ストリームのセグメントを識別するセグメント識別子が補足コンテンツのアイテムにマッピングされる、例示的マッピングを示す図である。 図２０に示されたメディア・ストリームのセグメントが補足情報に関連付けられる、例示的マッピングを示す図である。 複数の物品がタグ付けされる、例示的撮影位置を示す図である。 一体化されたＲＦＩＤセンサ・システムを有するイメージ取込デバイスを示す図である。 メディア・ストリーム・セグメントを識別する各セグメント識別子に関連するアクティブ・タグを識別する例示的タグ・ログを示す図である。 リモート・コントロールを介して提供されるユーザ信号と相互作用する例示的セット・トップ・ボックスを示す図である。 セグメント識別子にマッピングされた補足コンテンツが取り出され、ディスプレイ・デバイスを介して視聴者に表示された後の図２６のシステムを示す図である。 視聴者が、補足コンテンツがマッピングされる単一の物品への関心を示した後の図２６のシステムを示す図である。 補足コンテンツのディスプレイでの視聴者駆動制約の使用を示す図である。 補足コンテンツを選択するための視聴者駆動制約の使用の結果を示す図である。 視聴者が、後の時刻に見るために現在のセグメントのセグメント識別子にマッピングされた補足コンテンツを「ブックマークする」ことを望むことを視聴者信号が示す、例示的システムを示す図である。 コンピューティング・デバイスにロードされた例示的メディア・ストリームを示す図である。 図３２に示されたメディア・ストリームにマッピングできる補足コンテンツの例示的アイテムを示す図である。 メディア・ストリームが、補足コンテンツのマッピングを容易にするために時間セグメントに論理的に分割されている、図３２の例示的メディア・ストリームを示す図である。 補足コンテンツのアイテムがメディア・ストリームの少なくとも１つのセグメントと同時に表示されるように、補足コンテンツのアイテムがマッピングされる、図３２の例示的メディア・ストリームを示す図である。 メディア・ストリームのセグメントに関連付けられたセグメント識別子への潜在的マッピングに関する類似する補足コンテンツの３つのアイテムを示す図である。 図３６に示された回転される補足コンテンツの各めいめいのアイテムのクリック・スルー・カウンタを示す図である。 回転される補足コンテンツの異なるめいめいのアイテムのクリック・スルー・カウンタを示す図である。 本発明による例示的なシンジケーション・チームの動力学を示す図である。 コンテンツ作成者への提示のための例示的初期ディスプレイを示す図である。 補足コンテンツの所与のアイテムに関連付けられたメディア・ストリームの検索を可能にするために広告主に提示できる例示的ディスプレイを示す図である。 図４１のディスプレイによって使用可能にされるものなどの検索の結果が提示される例示的ディスプレイを示す図である。 広告主が、所与のメディア・ストリームとの補足コンテンツのアイテムの関連付けを阻止することを可能にされる、例示的ディスプレイを示す図である。 メディア・ストリームに現れる所与の物品に関連する補足コンテンツのアイテムを提供する能力が様々な販売者に競売で売られる例示的シナリオを示す図である。 メディア・ストリームに関連付けられた補足コンテンツが、関連するバナー広告を生成するのに使用される、例示的ディスプレイを示す図である。 ソーシャル・ネットワーキング・ウェブ・サイト、ウェブ・ログ、およびポータブル・メディア・プレイヤを含む様々なプラットフォームにまたがる最初の注釈付きメディア・ストリームの使用を示す図である。 本発明の諸態様のもう１つの応用例を示す図である。 本発明の諸態様のもう１つの応用例を示す図である。

Claims (20)

  1. 第１のユーザによって形成された注釈付きメディア・ストリームを配信する方法であって、
    前記第１のユーザの指示のもとに、メディア・ストリームを選択し、前記メディア・ストリームは1又はそれ以上のセグメント識別子のインデックスに関係し、前記セグメント識別子は前記メディア・ストリームの1又はそれ以上のセグメントに関係し、
    前記第１のユーザの指示のもとに、補足コンテンツの少なくとも１つのアイテムを選択し、
    前記1又はそれ以上のセグメント識別子の少なくとも１つに対して、前記補足コンテンツの少なくとも１つのアイテムを、前記メディア・ストリームが実質的に変更しないようにマッピングし、前記マッピングは前記第１のユーザの指示のもとに形成されるように行われ、
    前記メディア・ストリーム及び前記マッピングを格納し、
    前記第１のユーザとは異なる第２のユーザから前記メディア・ストリームを見ようとする第１の要求を受け取り、
    前記メディア・ストリーム及び前記マッピングを、ネットワークを介して、前記第２のユーザによって動作される第１の表示デバイスに配信し、前記メディア・ストリーム及び前記マッピングは共に用いられた場合には前記注釈付きメディア・ストリームを形成し、前記補足コンテンツの少なくとも１つのアイテムと前記1又はそれ以上のセグメント識別子によって識別された前記メディア・ストリームの前記1又はそれ以上のセグメンとは、時間的に同期化されて同時に表示され、それによって、前記補足コンテンツの少なくとも１つのアイテムをセグメントに特有の地域の環境に関連づけ、前記補足コンテンツの少なくとも１つのアイテム及び前記セグメントは、重なり合わない視認ペインとして、分離した状態で表示され、
    前記補足コンテンツの少なくとも１つのアイテムを、前記メディア・ストリームから分離し、
    前記メディア・ストリームから独立して、前記補足コンテンツの少なくとも１つのアイテムを、前記第２のユーザによって動作される第２の表示デバイスに送り、その後の前記第２のユーザによる視聴を前記第２のユーザ又は前記第２の表示デバイスからの入力を要せずに行い、
    前記注釈付きメディア・ストリームが前記第２のユーザによって視聴されたときに手数料を徴集し、
    前記手数料の第１の部分を前記第１のユーザに提供し、前記手数料の前記第１の部分は、前記注釈付きメディア・ストリームを視聴した回数に、少なくとも部分的に、基づいて算定され、
    マッピングのための前記補足コンテンツの少なくとも１つのアイテムを選択した１人または複数の個人に前記手数料の第２の部分を提供し、前記１人または複数の個人の間での前記手数料の前記第２の部分の割当は、前記１人または複数の個人によって指図されることを特徴とするメディア・ストリームを配信する方法。
  2. 補足コンテンツの前記少なくとも１つのアイテムは、物品、人、または概念に関連し、補足コンテンツの前記少なくとも１つのアイテムは、テキスト、オーディオ、ビデオ、マルチメディア・プレゼンテーション、写真、イメージ、URL、コンピュータ・アプリケーション、データ、コメント、広告コピー、キーワード、タグ、前記視聴者による対話型参加を奨励する要素、変数データ、生データ、様式化された情報、またはプレースホルダのうちの少なくとも１つを含むことを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  3. 前記物品、人、または概念は、前記メディア・ストリーム内に描かれるか、前記メディア・ストリームによって暗示されることを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  4. 前記補足コンテンツの前記少なくとも１つのアイテムは、前記メディア・ストリームが終了した後に表示されることを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  5. 前記補足コンテンツの前記少なくとも１つのアイテムに応答して、前記第２のユーザから第１の信号を受信し、
    前記第１の信号をログ記録し、前記第２のユーザ又は前記補足コンテンツの前記少なくとも１つのプロバイダの少なくとも１つに前記第１の信号を報告することを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  6. 前記補足コンテンツの前記少なくとも１つのアイテムに応答して、前記第２のユーザから第１の信号を受信し、
    前記第１の信号に応答して、前記補足コンテンツの前記少なくとも１つのアイテムに関する情報を前記第２のユーザに提供し、
    前記第２のユーザに第２の信号として情報を提供する応答をログ記録し、
    前記第１のユーザ又は前記補足コンテンツの前記少なくとも１つのプロバイダの少なくとも１つに前記第２の信号を提供することを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  7. 前記注釈付きメディア・ストリームは、ビデオ・コンポーネント、オーディオ・コンポーネント、またはテキスト・コンポーネントのうちの少なくとも１つを含むことを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  8. 補足コンテンツの前記少なくとも１つのアイテムは、前記1又はそれ以上のセグメント識別子の前記少なくとも一部にマッピングされる補足コンテンツの複数の潜在的アイテムの中から選択され、補足コンテンツの少なくとも１のアイテムの選択は、前記第２のユーザに関係する情報に少なくとも部分的に基づくものであり、
    前記第２のユーザに関係する情報は、
    前記第２のユーザに関する人口統計情報、前記第２のユーザの過去の視聴習慣に関する情報、前記第２のユーザが補足コンテンツの他のアイテムについて有した過去の対話に関する情報、前記第２のユーザが前記注釈付きメディア・ストリームを見た回数、前記第２のユーザが他のメディア・ストリームを見た平均時間、前記第２のユーザによって表される視聴者プリファレンス、および学習された第２のユーザ・プリファレンスのうちの少なくとも１つを含むことを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  9. 補足コンテンツの前記少なくとも１つのアイテムは、前記1又はそれ以上のセグメント識別子の前記少なくとも一部にマッピングされる補足コンテンツの複数の潜在的アイテムの中から選択され、補足コンテンツの少なくとも１のアイテムの選択は、注釈付きメディア・ストリームが表示されるデバイスに少なくとも部分的に基づくことを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  10. 補足コンテンツの前記少なくとも１つのアイテムは、前記1又はそれ以上のセグメント識別子の前記少なくとも一部にマッピングされる補足コンテンツの複数の潜在的アイテムの中からランダムに選択されることを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  11. 補足コンテンツの前記少なくとも１つのアイテムは、前記1又はそれ以上のセグメント識別子の前記少なくとも一部にマッピングされる補足コンテンツの複数の潜在的アイテムの中から選択され、補足コンテンツの少なくとも１のアイテムの選択は、回転するスケジュールに基づき、
    ある回数だけ前記回転するスケジュールを通ってサイクルした後に、前記選択は、補足コンテンツの前記複数の潜在的アイテムに対する前記第２のユーザの反応に少なくとも部分的に基づき、
    前記選択は、補足コンテンツの前記複数のアイテムのうちのどれが最高の度合の視聴者関心を生成したかに少なくとも部分的に基づくことを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  12. 補足コンテンツの前記少なくとも１つのアイテムは、前記1又はそれ以上のセグメント識別子の前記少なくとも一部にマッピングされる補足コンテンツの複数の潜在的アイテムの中から選択され、補足コンテンツの少なくとも１のアイテムの選択は、表示が行われるコンテキストに少なくとも部分的に基づく、ことを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  13. 補足コンテンツの前記少なくとも１つのアイテムは、前記1又はそれ以上のセグメント識別子の前記少なくとも一部にマッピングされる補足コンテンツの複数の潜在的アイテムの中から選択され、補足コンテンツの少なくとも１のアイテムの選択は、前記メディア・ストリームの前記少なくとも一部の全体的なトーンに少なくとも部分的に基づくことを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  14. 共通のディスプレイ・デバイス上に、表示される前記注釈付きメディア・ストリームと共にバナー広告を表示することであって、前記バナー広告の内容は、前記注釈付きメディア・ストリームに関連するキーワード、前記注釈付きメディア・ストリームのターゲット人口統計、補足コンテンツの前記少なくとも１つのアイテム、補足コンテンツのライブラリの階層内の補足コンテンツの前記少なくとも１つのアイテムの位置、または前記第２のユーザに関する情報のうちの少なくとも１つに従って選択されることを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  15. 前記メディア・ストリームおよび補足コンテンツの前記少なくとも１つのアイテムは、前記表示の前に異なるソースから取り出されることを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  16. 前記第２のユーザが、前記注釈付きメディア・ストリームを早送りしていることを検出することと、
    補足コンテンツの前記少なくとも１つのアイテムを、早送り中により簡単に見える置換アイテムに置換することと
    をさらに含むことを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  17. 前記メディア・ストリームの選択は、ネットワークを介して前記第１のユーザから前記メディア・ストリーム受信することを含むことを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  18. 前記重なり合わない分離した視認ペインは共通のディスプレイ上に表示され、
    前記メディア・ストリームのセグメントが表示された前記重なり合わない分離した視認ペインのうちのあるものは、前記メディア・ストリームの表示に亘って実質的に変わらないフレームサイズを有することを特徴とする請求項１に記載のメディア・ストリームを配信する方法。
  19. 第１のユーザによって形成された注釈付きメディア・ストリームを配信する実行可能プログラムを含むコンピュータ可読非書換媒体であって、前記プログラムは、
    前記第１のユーザの指示のもとに、メディア・ストリームを選択し、前記メディア・ストリームは1又はそれ以上のセグメント識別子のインデックスに関係し、前記セグメント識別子は前記メディア・ストリームの1又はそれ以上のセグメントに関係し、
    前記第１のユーザの指示のもとに、補足コンテンツの少なくとも１つのアイテムを選択し、
    前記1又はそれ以上のセグメント識別子の少なくとも１つに対して、前記補足コンテンツの少なくとも１つのアイテムを、前記メディア・ストリームが実質的に変更しないようにマッピングし、前記マッピングは前記第１のユーザの指示のもとに形成されるように行われ、
    前記メディア・ストリーム及び前記マッピングを格納し、
    前記第１のユーザとは異なる第２のユーザから前記メディア・ストリームを見ようとする第１の要求を受け取り、
    前記メディア・ストリーム及び前記マッピングを、ネットワークを介して、前記第２のユーザによって動作される第１の表示デバイスに配信し、前記メディア・ストリーム及び前記マッピングは共に用いられた場合には前記注釈付きメディア・ストリームを形成し、前記補足コンテンツの少なくとも１つのアイテムと前記1又はそれ以上のセグメント識別子によって識別された前記メディア・ストリームの前記1又はそれ以上のセグメンとは、時間的に同期化されて同時に表示され、それによって、前記補足コンテンツの少なくとも１つのアイテムをセグメントに特有の地域の環境に関連づけ、前記補足コンテンツの少なくとも１つのアイテム及び前記セグメントは、重なり合わない視認ペインとして、分離した状態で表示され、
    前記補足コンテンツの少なくとも１つのアイテムを、前記メディア・ストリームから分離し、
    前記メディア・ストリームから独立して、前記補足コンテンツの少なくとも１つのアイテムを、前記第２のユーザによって動作される第２の表示デバイスに送り、その後の前記第２のユーザによる視聴を前記第２のユーザ又は前記第２の表示デバイスからの入力を要せずに行い、
    前記注釈付きメディア・ストリームが前記第２のユーザによって視聴されたときに手数料を徴集し、
    前記手数料の第１の部分を前記第１のユーザに提供し、前記手数料の前記第１の部分は、前記注釈付きメディア・ストリームを視聴した回数に、少なくとも部分的に、基づいて算定され、
    マッピングのための前記補足コンテンツの少なくとも１つのアイテムを選択した１人または複数の個人に前記手数料の第２の部分を提供し、前記１人または複数の個人の間での前記手数料の前記第２の部分の割当は、前記１人または複数の個人によって指図されることを特徴とするコンピュータ可読非書換媒体。
  20. 第１のユーザによって形成された注釈付きメディア・ストリームを配信するシステムであって、
    前記第１のユーザの指示のもとに、メディア・ストリーム及び補足コンテンツの少なくとも１つのアイテムを選択する第１のユーザデバイスであって、前記メディア・ストリームは1又はそれ以上のセグメント識別子のインデックスに関係し、前記セグメント識別子は前記メディア・ストリームの1又はそれ以上のセグメントに関係し、前記第１のユーザデバイスが、前記1又はそれ以上のセグメント識別子の少なくとも１つに対して、前記補足コンテンツの少なくとも１つのアイテムを、前記メディア・ストリームが実質的に変更しないようにマッピングし、前記マッピングは前記第１のユーザの指示のもとに形成されるように行われる前記第１のユーザデバイスと、
    前記メディア・ストリーム及び前記マッピングを格納するサーバとを備え、
    前記サーバが、
    前記第１のユーザとは異なる第２のユーザから前記メディア・ストリームを見ようとする第１の要求を受け取り、
    前記メディア・ストリーム及び前記マッピングを、ネットワークを介して、前記第２のユーザによって動作される第１の表示デバイスに配信し、前記メディア・ストリーム及び前記マッピングは共に用いられた場合には前記注釈付きメディア・ストリームを形成し、前記補足コンテンツの少なくとも１つのアイテムと前記1又はそれ以上のセグメント識別子によって識別された前記メディア・ストリームの前記1又はそれ以上のセグメンとは、時間的に同期化されて同時に表示され、それによって、前記補足コンテンツの少なくとも１つのアイテムをセグメントに特有の地域の環境に関連づけ、前記補足コンテンツの少なくとも１つのアイテム及び前記セグメントは、重なり合わない視認ペインとして、分離した状態で表示され、
    前記サーバが、
    前記補足コンテンツの少なくとも１つのアイテムを、前記メディア・ストリームから分離し、
    前記メディア・ストリームから独立して、前記補足コンテンツの少なくとも１つのアイテムを、前記第１のユーザデバイスとは異なる第３のユーザデバイスと前記第２のユーザデバイスとに送り、ユーザ入力或いは前記第３のユーザデバイスからの信号を不要とし、
    前記注釈付きメディア・ストリームが前記第２のユーザによって視聴されたときに、前記サーバは手数料を徴集し、
    前記サーバは、前記手数料の第１の部分を前記第１のユーザに提供し、前記手数料の前記第２の部分は、マッピングのための前記補足コンテンツの少なくとも１つのアイテムを選択した１人または複数の個人に前記手数料の第２の部分を提供し、
    前記手数料の第１の部分は、前記注釈付きメディア・ストリームを視聴した回数に、少なくとも部分的に、基づいて算定され、
    前記１人または複数の個人の間での前記手数料の前記第２の部分の割当は、前記１人または複数の個人によって指図されることを特徴とする注釈付きメディア・ストリームを配信するシステム。
JP2009503323A 2006-03-30 2007-03-30 メディア・ストリームに注釈を付ける方法および装置 Expired - Fee Related JP5649303B2 (ja)

Applications Claiming Priority (13)

Application Number Priority Date Filing Date Title
US78836806P 2006-03-30 2006-03-30
US78836706P 2006-03-30 2006-03-30
US60/788,368 2006-03-30
US60/788,367 2006-03-30
US74737906P 2006-05-16 2006-05-16
US60/747,379 2006-05-16
US80409106P 2006-06-06 2006-06-06
US60/804,091 2006-06-06
US86680306P 2006-11-21 2006-11-21
US60/866,803 2006-11-21
US87170506P 2006-12-22 2006-12-22
US60/871,705 2006-12-22
PCT/US2007/065719 WO2007115224A2 (en) 2006-03-30 2007-03-30 Method and apparatus for annotating media streams

Publications (3)

Publication Number Publication Date
JP2009532956A JP2009532956A (ja) 2009-09-10
JP2009532956A5 JP2009532956A5 (ja) 2010-05-13
JP5649303B2 true JP5649303B2 (ja) 2015-01-07

Family

ID=38564271

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009503323A Expired - Fee Related JP5649303B2 (ja) 2006-03-30 2007-03-30 メディア・ストリームに注釈を付ける方法および装置

Country Status (4)

Country Link
US (2) US8645991B2 (ja)
EP (1) EP2011017A4 (ja)
JP (1) JP5649303B2 (ja)
WO (1) WO2007115224A2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180025880A (ko) * 2018-02-09 2018-03-09 엠랩 주식회사 스트리밍 미디어에 코멘트를 맵핑하는 시스템 및 방법
WO2018117303A1 (ko) * 2016-12-22 2018-06-28 주식회사 큐버 비디오 클립간 중간영상 ppl 편집 플랫폼 제공 방법
WO2019204372A1 (en) * 2018-04-17 2019-10-24 Edx Technologies, Inc. R-snap for production of augmented realities

Families Citing this family (708)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7209787B2 (en) 1998-08-05 2007-04-24 Bioneuronics Corporation Apparatus and method for closed-loop intracranial stimulation for optimal control of neurological disease
US7895620B2 (en) * 2000-04-07 2011-02-22 Visible World, Inc. Systems and methods for managing and distributing media content
EP1279164A1 (de) * 2000-04-28 2003-01-29 Deutsche Telekom AG Verfahren zur berechnung einer sprachaktivitätsentscheidung (voice activity detector)
US7490092B2 (en) 2000-07-06 2009-02-10 Streamsage, Inc. Method and system for indexing and searching timed media information based upon relevance intervals
DE10123415A1 (de) * 2001-05-14 2002-11-21 Bayer Ag Verfahren für die Bekämpfung von Schadnagern auf landwirtschaftlichen Betrieben
US8042132B2 (en) 2002-03-15 2011-10-18 Tvworks, Llc System and method for construction, delivery and display of iTV content
US8365230B2 (en) 2001-09-19 2013-01-29 Tvworks, Llc Interactive user interface for television applications
US20090024409A1 (en) * 2002-02-06 2009-01-22 Ryan Steelberg Apparatus, system and method for a brand affinity engine using positive and negative mentions
US20090112715A1 (en) * 2007-10-31 2009-04-30 Ryan Steelberg Engine, system and method for generation of brand affinity content
US7703116B1 (en) 2003-07-11 2010-04-20 Tvworks, Llc System and method for construction, delivery and display of iTV applications that blend programming information of on-demand and broadcast service offerings
US7398209B2 (en) 2002-06-03 2008-07-08 Voicebox Technologies, Inc. Systems and methods for responding to natural language speech utterance
US7693720B2 (en) 2002-07-15 2010-04-06 Voicebox Technologies, Inc. Mobile systems and methods for responding to natural language speech utterance
US8220018B2 (en) 2002-09-19 2012-07-10 Tvworks, Llc System and method for preferred placement programming of iTV content
US7827312B2 (en) 2002-12-27 2010-11-02 The Nielsen Company (Us), Llc Methods and apparatus for transcoding metadata
US8578411B1 (en) 2003-03-14 2013-11-05 Tvworks, Llc System and method for controlling iTV application behaviors through the use of application profile filters
US11381875B2 (en) 2003-03-14 2022-07-05 Comcast Cable Communications Management, Llc Causing display of user-selectable content types
WO2005004485A1 (en) * 2003-07-04 2005-01-13 Koninklijke Philips Electronics N.V. Method of broadcasting multimedia content via a distribution network
US8930561B2 (en) * 2003-09-15 2015-01-06 Sony Computer Entertainment America Llc Addition of supplemental multimedia content and interactive capability at the client
US8819734B2 (en) 2003-09-16 2014-08-26 Tvworks, Llc Contextual navigational control for digital television
US9665876B2 (en) * 2003-10-23 2017-05-30 Monvini Limited System of publication and distribution of instructional materials and method therefor
US20050289163A1 (en) * 2004-06-03 2005-12-29 Eric Gordon Occasion for media objects
EP1805918B1 (en) 2004-09-27 2019-02-20 Nielsen Media Research, Inc. Methods and apparatus for using location information to manage spillover in an audience monitoring system
US8131647B2 (en) * 2005-01-19 2012-03-06 Amazon Technologies, Inc. Method and system for providing annotations of a digital work
US9275052B2 (en) 2005-01-19 2016-03-01 Amazon Technologies, Inc. Providing annotations of a digital work
US7818667B2 (en) 2005-05-03 2010-10-19 Tv Works Llc Verification of semantic constraints in multimedia data and in its announcement, signaling and interchange
US7640160B2 (en) 2005-08-05 2009-12-29 Voicebox Technologies, Inc. Systems and methods for responding to natural language speech utterance
US7620549B2 (en) 2005-08-10 2009-11-17 Voicebox Technologies, Inc. System and method of supporting adaptive misrecognition in conversational speech
US7949529B2 (en) 2005-08-29 2011-05-24 Voicebox Technologies, Inc. Mobile systems and methods of supporting natural language human-machine interactions
EP1934971A4 (en) 2005-08-31 2010-10-27 Voicebox Technologies Inc DYNAMIC LANGUAGE SCRIPTURE
US7707485B2 (en) * 2005-09-28 2010-04-27 Vixs Systems, Inc. System and method for dynamic transrating based on content
US20100138561A1 (en) * 2006-01-27 2010-06-03 Michael Wayne Church Simulcast internet media distribution system and method
WO2007112087A2 (en) * 2006-03-24 2007-10-04 Mochila, Inc. Facilitating online content syndication
US8261300B2 (en) * 2006-06-23 2012-09-04 Tivo Inc. Method and apparatus for advertisement placement in a user dialog on a set-top box
WO2007150003A2 (en) * 2006-06-23 2007-12-27 Neurovista Corporation Minimally invasive monitoring systems and methods
US9451195B2 (en) * 2006-08-04 2016-09-20 Gula Consulting Limited Liability Company Moving video tags outside of a video area to create a menu system
US20080040748A1 (en) * 2006-08-09 2008-02-14 Ken Miyaki Dynamic rating of content
US9514436B2 (en) * 2006-09-05 2016-12-06 The Nielsen Company (Us), Llc Method and system for predicting audience viewing behavior
US8296172B2 (en) 2006-09-05 2012-10-23 Innerscope Research, Inc. Method and system for determining audience response to a sensory stimulus
JP2008109637A (ja) * 2006-09-25 2008-05-08 Toshiba Corp 動画像符号化装置及びその方法
US10204316B2 (en) 2006-09-28 2019-02-12 Leaf Group Ltd. User generated content publishing system
US7899178B2 (en) * 2006-09-29 2011-03-01 Verint Americas Inc. Recording invocation of communication sessions
KR100823281B1 (ko) * 2006-09-29 2008-04-21 삼성전자주식회사 컨텐츠 재생 방법 및 장치
US8081751B1 (en) 2006-10-04 2011-12-20 Sprint Spectrum L.P. Method for triggering content download during call setup
US8073681B2 (en) 2006-10-16 2011-12-06 Voicebox Technologies, Inc. System and method for a cooperative conversational voice user interface
US8059800B1 (en) 2006-10-17 2011-11-15 Sprint Spectrum L.P. Method for viral distribution of ringback media
US8295934B2 (en) 2006-11-14 2012-10-23 Neurovista Corporation Systems and methods of reducing artifact in neurological stimulation systems
US8082504B1 (en) * 2006-12-18 2011-12-20 At&T Intellectual Property I, L.P. Creation of a reference point to mark a media presentation
US7559017B2 (en) * 2006-12-22 2009-07-07 Google Inc. Annotation framework for video
US8046803B1 (en) 2006-12-28 2011-10-25 Sprint Communications Company L.P. Contextual multimedia metatagging
US8413059B2 (en) 2007-01-03 2013-04-02 Social Concepts, Inc. Image based electronic mail system
US20080030496A1 (en) 2007-01-03 2008-02-07 Social Concepts, Inc. On-line interaction system
US8180852B2 (en) * 2007-01-25 2012-05-15 Social Concepts, Inc. Apparatus for increasing social interaction over an electronic network
KR100856027B1 (ko) * 2007-01-09 2008-09-03 주식회사 태그스토리 저작권 인증된 동영상 데이터 서비스 시스템 및 방법
WO2008092119A2 (en) * 2007-01-25 2008-07-31 Neurovista Corporation Systems and methods for identifying a contra-ictal condition in a subject
EP2124734A2 (en) * 2007-01-25 2009-12-02 NeuroVista Corporation Methods and systems for measuring a subject's susceptibility to a seizure
US8166407B2 (en) 2007-01-25 2012-04-24 Social Concepts, Inc. Apparatus for increasing social interaction over an electronic network
US8665333B1 (en) * 2007-01-30 2014-03-04 Videomining Corporation Method and system for optimizing the observation and annotation of complex human behavior from video sources
US7818176B2 (en) 2007-02-06 2010-10-19 Voicebox Technologies, Inc. System and method for selecting and presenting advertisements based on natural language processing of voice-based input
US20100281042A1 (en) * 2007-02-09 2010-11-04 Novarra, Inc. Method and System for Transforming and Delivering Video File Content for Mobile Devices
JP2010518509A (ja) * 2007-02-09 2010-05-27 ノバラ・インコーポレイテッド 移動デバイス用にビデオ・ファイル・コンテンツを変換して配信する方法およびシステム
US20080208589A1 (en) * 2007-02-27 2008-08-28 Cross Charles W Presenting Supplemental Content For Digital Media Using A Multimodal Application
DE102007010400A1 (de) * 2007-03-01 2008-09-04 Inge Ritzka Verifizierungssystem zum Nachweis von Eigentumsverhältnissen eines Gutes, Konsumgut oder sonstiges Produkt sowie Verfahren zum Kennzeichnen von Gütern
KR20090000611A (ko) * 2007-03-08 2009-01-08 엔에이치엔(주) 클릭 통계 분석을 이용하여 최적의 노출용 광고 정보를노출하는 광고 방법 및 시스템
US20090070215A1 (en) * 2007-03-12 2009-03-12 Henryk Strzeletz Advertising Method
US8036736B2 (en) 2007-03-21 2011-10-11 Neuro Vista Corporation Implantable systems and methods for identifying a contra-ictal condition in a subject
CN101272477A (zh) * 2007-03-22 2008-09-24 华为技术有限公司 一种iptv系统、媒体服务器和iptv节目搜索、定位方法
EP2130146A4 (en) 2007-03-29 2011-08-24 Neurofocus Inc ANALYSIS OF THE EFFECTIVENESS OF MARKETING AND ENTERTAINMENT CONTENTS
US20100325255A1 (en) * 2007-04-05 2010-12-23 Gene Cheung Data transmission system and method
US7739596B2 (en) * 2007-04-06 2010-06-15 Yahoo! Inc. Method and system for displaying contextual advertisements with media
US20080270473A1 (en) * 2007-04-30 2008-10-30 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Determining an influence on a person by web pages
US20080276159A1 (en) * 2007-05-01 2008-11-06 International Business Machines Corporation Creating Annotated Recordings and Transcripts of Presentations Using a Mobile Device
EP2156386A4 (en) * 2007-05-03 2012-05-02 Google Inc MONETIZATION OF DIGITAL CONTENT CONTRIBUTIONS
US9015179B2 (en) * 2007-05-07 2015-04-21 Oracle International Corporation Media content tags
US8316302B2 (en) * 2007-05-11 2012-11-20 General Instrument Corporation Method and apparatus for annotating video content with metadata generated using speech recognition technology
US8392253B2 (en) 2007-05-16 2013-03-05 The Nielsen Company (Us), Llc Neuro-physiology and neuro-behavioral based stimulus targeting system
US8234282B2 (en) 2007-05-21 2012-07-31 Amazon Technologies, Inc. Managing status of search index generation
US20090094108A1 (en) * 2007-10-09 2009-04-09 Atul Bhandari Flexible Revenue Sharing and Referral Bounty System
US20080300974A1 (en) * 2007-05-30 2008-12-04 Google Inc. Flexible Revenue Sharing and Referral Bounty System
CA2689547C (en) * 2007-06-04 2017-12-05 Visible World Inc. Systems and methods for dynamic bit/bandwidth allocation
US9542394B2 (en) * 2007-06-14 2017-01-10 Excalibur Ip, Llc Method and system for media-based event generation
US20090011743A1 (en) * 2007-07-02 2009-01-08 Yahoo! Inc. Mobile trading cards
JP2010535438A (ja) * 2007-07-23 2010-11-18 インタートラスト テクノロジーズ コーポレイション 動的メディアゾーンシステム及び方法
US9357155B2 (en) * 2007-07-26 2016-05-31 The Directv Group, Inc. Method and system for generating row advertising in a program guide
US8856835B2 (en) 2007-07-26 2014-10-07 The Directv Group, Inc. Method and system for associating content and content information in a menu structure
US8281255B2 (en) * 2007-07-26 2012-10-02 The Directv Group, Inc. Method and system for using various content and content information in multiple menu structures
US8209718B2 (en) * 2007-07-26 2012-06-26 The Directv Group, Inc. Method and system for positioning row advertising in a program guide
US10063813B2 (en) * 2007-07-26 2018-08-28 The Directv Group, Inc. Method and system for communicating and displaying broadband content availability using information received through a satellite
JP5542051B2 (ja) 2007-07-30 2014-07-09 ニューロフォーカス・インコーポレーテッド 神経応答刺激及び刺激属性共鳴推定を行うシステム、方法、及び、装置
US8744118B2 (en) * 2007-08-03 2014-06-03 At&T Intellectual Property I, L.P. Methods, systems, and products for indexing scenes in digital media
US8386313B2 (en) 2007-08-28 2013-02-26 The Nielsen Company (Us), Llc Stimulus placement system using subject neuro-response measurements
US8392255B2 (en) 2007-08-29 2013-03-05 The Nielsen Company (Us), Llc Content based selection and meta tagging of advertisement breaks
US8060407B1 (en) 2007-09-04 2011-11-15 Sprint Communications Company L.P. Method for providing personalized, targeted advertisements during playback of media
US8285700B2 (en) 2007-09-07 2012-10-09 Brand Affinity Technologies, Inc. Apparatus, system and method for a brand affinity engine using positive and negative mentions and indexing
US9633505B2 (en) * 2007-09-07 2017-04-25 Veritone, Inc. System and method for on-demand delivery of audio content for use with entertainment creatives
US9294727B2 (en) 2007-10-31 2016-03-22 Veritone, Inc. System and method for creation and management of advertising inventory using metadata
CA2702888A1 (en) * 2007-09-07 2009-06-18 James Kakaire Wireless home
US20100274644A1 (en) * 2007-09-07 2010-10-28 Ryan Steelberg Engine, system and method for generation of brand affinity content
US8452764B2 (en) 2007-09-07 2013-05-28 Ryan Steelberg Apparatus, system and method for a brand affinity engine using positive and negative mentions and indexing
US8725563B2 (en) * 2007-09-07 2014-05-13 Brand Affinity Technologies, Inc. System and method for searching media assets
US7809603B2 (en) * 2007-09-07 2010-10-05 Brand Affinity Technologies, Inc. Advertising request and rules-based content provision engine, system and method
US20090112714A1 (en) * 2007-10-31 2009-04-30 Ryan Steelberg Engine, system and method for generation of brand affinity content
US8751479B2 (en) 2007-09-07 2014-06-10 Brand Affinity Technologies, Inc. Search and storage engine having variable indexing for information associations
US7945862B2 (en) * 2007-09-11 2011-05-17 Yahoo! Inc. Social network site including contact-based recommendation functionality
US8176070B2 (en) * 2007-09-13 2012-05-08 Google Inc. Media plan managing
US20090076898A1 (en) * 2007-09-14 2009-03-19 Yiqing Wang System And Method For Delivering Offline Advertisement Supported Digital Content
US20090083129A1 (en) 2007-09-20 2009-03-26 Neurofocus, Inc. Personalized content delivery using neuro-response priming data
US9811842B2 (en) 2007-09-27 2017-11-07 At&T Intellectual Property I, L.P. System and method for sending advertising data
US20090216636A1 (en) * 2007-09-28 2009-08-27 James Eliason Method of Promotion and Advertisement of a Website
US8250616B2 (en) * 2007-09-28 2012-08-21 Yahoo! Inc. Distributed live multimedia capture, feedback mechanism, and network
US8522289B2 (en) * 2007-09-28 2013-08-27 Yahoo! Inc. Distributed automatic recording of live event
US8332883B2 (en) 2007-10-02 2012-12-11 The Nielsen Company (Us), Llc Providing actionable insights based on physiological responses from viewers of media
US8739200B2 (en) 2007-10-11 2014-05-27 At&T Intellectual Property I, L.P. Methods, systems, and products for distributing digital media
US8190986B2 (en) * 2008-05-19 2012-05-29 Microsoft Corporation Non-destructive media presentation derivatives
US9521960B2 (en) 2007-10-31 2016-12-20 The Nielsen Company (Us), Llc Systems and methods providing en mass collection and centralized processing of physiological responses from viewers
US20170024791A1 (en) * 2007-11-20 2017-01-26 Theresa Klinger System and method for interactive metadata and intelligent propagation for electronic multimedia
US20090144789A1 (en) * 2007-11-30 2009-06-04 At&T Delaware Intellectual Property, Inc. Systems, methods, and computer products for storage of music via iptv
US20090150341A1 (en) * 2007-12-05 2009-06-11 Microsoft Corporation Generation of alternative phrasings for short descriptions
US8140335B2 (en) 2007-12-11 2012-03-20 Voicebox Technologies, Inc. System and method for providing a natural language voice user interface in an integrated voice navigation services environment
US8051455B2 (en) * 2007-12-12 2011-11-01 Backchannelmedia Inc. Systems and methods for providing a token registry and encoder
US20090158337A1 (en) * 2007-12-13 2009-06-18 Mobitv, Inc. Mosaic video content selection mechanism
US7971146B2 (en) * 2007-12-13 2011-06-28 International Business Machines Corporation Method for visual depiction of audiences for viewing items in blogs and other electronic repositories
US9275056B2 (en) * 2007-12-14 2016-03-01 Amazon Technologies, Inc. System and method of presenting media data
US9259591B2 (en) 2007-12-28 2016-02-16 Cyberonics, Inc. Housing for an implantable medical device
US20090171168A1 (en) 2007-12-28 2009-07-02 Leyde Kent W Systems and Method for Recording Clinical Manifestations of a Seizure
US8099662B2 (en) * 2008-01-17 2012-01-17 Seiko Epson Corporation Efficient image annotation display and transmission
US8700491B2 (en) 2008-01-22 2014-04-15 Ebay Inc. Method and system of displaying information related to items offered for sale in a network-based marketplace
US8458598B1 (en) * 2008-01-23 2013-06-04 Goldmail, Inc. Customized advertising for online slideshow
US8140973B2 (en) * 2008-01-23 2012-03-20 Microsoft Corporation Annotating and sharing content
GB0801429D0 (en) * 2008-01-25 2008-03-05 Decisive Media Ltd Media Annotation system, method and media player
US20110191809A1 (en) 2008-01-30 2011-08-04 Cinsay, Llc Viral Syndicated Interactive Product System and Method Therefor
US11227315B2 (en) 2008-01-30 2022-01-18 Aibuy, Inc. Interactive product placement system and method therefor
US8312486B1 (en) 2008-01-30 2012-11-13 Cinsay, Inc. Interactive product placement system and method therefor
CN102084358A (zh) * 2008-02-05 2011-06-01 杜比实验室特许公司 将信息与媒体内容关联
US8181197B2 (en) 2008-02-06 2012-05-15 Google Inc. System and method for voting on popular video intervals
EA201070931A1 (ru) * 2008-02-07 2011-04-29 Брэнд Эффинити Текнолоджиз, Инк. Количественный и качественный способ оценки бренда с использованием ключевых слов
US10269024B2 (en) * 2008-02-08 2019-04-23 Outbrain Inc. Systems and methods for identifying and measuring trends in consumer content demand within vertically associated websites and related content
US8707382B2 (en) * 2008-02-13 2014-04-22 At&T Intellectual Property I, L.P. Synchronizing presentations of multimedia programs
US20090210301A1 (en) * 2008-02-14 2009-08-20 Microsoft Corporation Generating customized content based on context data
US8112702B2 (en) 2008-02-19 2012-02-07 Google Inc. Annotating video intervals
WO2009105735A2 (en) * 2008-02-21 2009-08-27 Globalenglish Corporation Web-based tool for collaborative, social learning
US8612469B2 (en) 2008-02-21 2013-12-17 Globalenglish Corporation Network-accessible collaborative annotation tool
US8850590B2 (en) * 2008-03-05 2014-09-30 Broadcom Corporation Systems and methods for using transport stream splicing for programming information security
US20090228918A1 (en) * 2008-03-05 2009-09-10 Changingworlds Ltd. Content recommender
US10460085B2 (en) 2008-03-13 2019-10-29 Mattel, Inc. Tablet computer
US20100211899A1 (en) * 2009-02-17 2010-08-19 Robb Fujioka Virtual Marketplace Accessible To Widgetized Avatars
US8793256B2 (en) * 2008-03-26 2014-07-29 Tout Industries, Inc. Method and apparatus for selecting related content for display in conjunction with a media
US8151194B1 (en) * 2008-03-26 2012-04-03 Google Inc. Visual presentation of video usage statistics
KR100980578B1 (ko) 2008-03-31 2010-09-06 엔에이치엔비즈니스플랫폼 주식회사 확장된 키워드를 등록하여 검색결과를 제공하는 시스템 및방법
WO2009124004A1 (en) * 2008-03-31 2009-10-08 Dolby Laboratories Licensing Corporation Associating information with media content using objects recognized therein
US20090259531A1 (en) * 2008-04-11 2009-10-15 Yahoo! Inc. Interactive advertisements
US8214751B2 (en) * 2008-04-15 2012-07-03 International Business Machines Corporation Dynamic spawning of focal point objects within a virtual universe system
US10096032B2 (en) * 2008-04-15 2018-10-09 International Business Machines Corporation Proximity-based broadcast virtual universe system
US20090265212A1 (en) * 2008-04-17 2009-10-22 David Hyman Advertising in a streaming media environment
US9489383B2 (en) * 2008-04-18 2016-11-08 Beats Music, Llc Relevant content to enhance a streaming media experience
US8806530B1 (en) 2008-04-22 2014-08-12 Sprint Communications Company L.P. Dual channel presence detection and content delivery system and method
WO2009137368A2 (en) 2008-05-03 2009-11-12 Mobile Media Now, Inc. Method and system for generation and playback of supplemented videos
US8090727B2 (en) * 2008-05-20 2012-01-03 Check Point Software Technologies Ltd. Methods for automatically generating natural-language news items from log files and status traces
JP5117280B2 (ja) * 2008-05-22 2013-01-16 富士フイルム株式会社 撮像装置、撮像方法、再生装置および再生方法
US8589161B2 (en) 2008-05-27 2013-11-19 Voicebox Technologies, Inc. System and method for an integrated, multi-modal, multi-device natural language voice services environment
US9305548B2 (en) 2008-05-27 2016-04-05 Voicebox Technologies Corporation System and method for an integrated, multi-modal, multi-device natural language voice services environment
GB0809631D0 (en) * 2008-05-28 2008-07-02 Mirriad Ltd Zonesense
US8584048B2 (en) * 2008-05-29 2013-11-12 Telcordia Technologies, Inc. Method and system for multi-touch-based browsing of media summarizations on a handheld device
WO2009155089A1 (en) * 2008-05-29 2009-12-23 Telcordia Technologies, Inc. Method and system for generating and presenting mobile content summarization
FR2932049B1 (fr) * 2008-05-30 2011-01-21 Alcatel Lucent Procede permettant la mise en oeuvre de la video enrichie sur les terminaux mobiles
US8566353B2 (en) 2008-06-03 2013-10-22 Google Inc. Web-based system for collaborative generation of interactive videos
US20090307048A1 (en) * 2008-06-04 2009-12-10 Jordan Ian Grossman Methods and systems for delivering targeted advertisements
US20120030553A1 (en) * 2008-06-13 2012-02-02 Scrible, Inc. Methods and systems for annotating web pages and managing annotations and annotated web pages
EP2134094A1 (en) * 2008-06-13 2009-12-16 Alcatel Lucent Method and system for performing transactions on multimedia streams being produced over a chain of contributing producers
EP2304930A1 (en) * 2008-06-18 2011-04-06 Carl Livesey Tagging product information
US8701033B2 (en) * 2008-06-18 2014-04-15 Xerox Corporation Electronic indexing for printed media
US9870629B2 (en) * 2008-06-20 2018-01-16 New Bis Safe Luxco S.À R.L Methods, apparatus and systems for data visualization and related applications
US20090319571A1 (en) * 2008-06-23 2009-12-24 Itel Llc Video indexing
US20090328103A1 (en) * 2008-06-25 2009-12-31 Microsoft Corporation Genre-based segment collections
US8266644B2 (en) * 2008-06-25 2012-09-11 At&T Intellectual Property I, L.P. Digital television channel trending
US20090325138A1 (en) * 2008-06-26 2009-12-31 Gary Stephen Shuster Virtual interactive classroom using groups
US8510646B1 (en) * 2008-07-01 2013-08-13 Google Inc. Method and system for contextually placed chat-like annotations
US20100017534A1 (en) * 2008-07-17 2010-01-21 Shrage Smilowitz System and method for real-time question and answer sessions via a global computer network
US9128981B1 (en) 2008-07-29 2015-09-08 James L. Geer Phone assisted ‘photographic memory’
US8775454B2 (en) 2008-07-29 2014-07-08 James L. Geer Phone assisted ‘photographic memory’
US8073733B1 (en) 2008-07-30 2011-12-06 Philippe Caland Media development network
WO2010012312A1 (en) * 2008-08-01 2010-02-04 Rapid Mobile Media Limited Method and apparatus for identifying additional content relating to a media file
WO2010016918A1 (en) * 2008-08-06 2010-02-11 Stephens James H Jr Contextual keyword-based access control
US9024723B2 (en) * 2008-08-29 2015-05-05 Alcatel Lucent Method and apparatus for cross-media use of RFID readers and RFID tags
US9275684B2 (en) * 2008-09-12 2016-03-01 At&T Intellectual Property I, L.P. Providing sketch annotations with multimedia programs
WO2010031009A1 (en) * 2008-09-12 2010-03-18 Jamabi, Inc. Method and system for distributing media content and processing payments and/or voluntary data collection
US20100070929A1 (en) * 2008-09-12 2010-03-18 International Business Machines Corporation Method for Automatically Constructing Pageflows by Analysing Traversed Breadcrumbs
AU2009200295C1 (en) * 2008-09-26 2014-11-27 Guvera Ip Pty Ltd An Advertising System and Method
US8285790B2 (en) 2008-09-26 2012-10-09 International Business Machines Corporation Virtual universe avatar activities review
US20100114692A1 (en) * 2008-09-30 2010-05-06 Ryan Steelberg System and method for brand affinity content distribution and placement
US9407942B2 (en) * 2008-10-03 2016-08-02 Finitiv Corporation System and method for indexing and annotation of video content
US7603682B1 (en) 2008-10-07 2009-10-13 International Business Machines Corporation Digest video browsing based on collaborative information
AU2009303824A1 (en) 2008-10-14 2010-04-22 Brand Affinity Technologies, Inc. Apparatus, system and method for a brand affinity engine using positive and negative mentions and indexing
US20100091835A1 (en) * 2008-10-14 2010-04-15 Morris Robert P Method And System For Processing A Media Stream
US20100095326A1 (en) * 2008-10-15 2010-04-15 Robertson Iii Edward L Program content tagging system
US9094721B2 (en) 2008-10-22 2015-07-28 Rakuten, Inc. Systems and methods for providing a network link between broadcast content and content located on a computer network
US8160064B2 (en) * 2008-10-22 2012-04-17 Backchannelmedia Inc. Systems and methods for providing a network link between broadcast content and content located on a computer network
US20100103173A1 (en) * 2008-10-27 2010-04-29 Minkyu Lee Real time object tagging for interactive image display applications
US8661056B1 (en) * 2008-11-03 2014-02-25 Salesforce.Com, Inc. System, method and computer program product for publicly providing web content of a tenant using a multi-tenant on-demand database service
US8713618B1 (en) * 2008-11-06 2014-04-29 Google Inc. Segmenting video based on timestamps in comments
US8244517B2 (en) * 2008-11-07 2012-08-14 Yahoo! Inc. Enhanced matching through explore/exploit schemes
WO2010056866A1 (en) * 2008-11-14 2010-05-20 Brand Affinity Technologies, Inc. System and method for brand affinity content distribution and optimization
US11832024B2 (en) 2008-11-20 2023-11-28 Comcast Cable Communications, Llc Method and apparatus for delivering video and video-related content at sub-asset level
US9355554B2 (en) * 2008-11-21 2016-05-31 Lenovo (Singapore) Pte. Ltd. System and method for identifying media and providing additional media content
CN101414307A (zh) * 2008-11-26 2009-04-22 阿里巴巴集团控股有限公司 提供图片搜索的方法和服务器
JP4602449B2 (ja) * 2008-11-28 2010-12-22 株式会社東芝 コンテンツ処理装置およびコンテンツ処理方法
US8489599B2 (en) * 2008-12-02 2013-07-16 Palo Alto Research Center Incorporated Context and activity-driven content delivery and interaction
WO2010065741A1 (en) * 2008-12-04 2010-06-10 Neurovista Corporation Universal electrode array for monitoring brain activity
US20100161441A1 (en) * 2008-12-24 2010-06-24 Comcast Interactive Media, Llc Method and apparatus for advertising at the sub-asset level
US9442933B2 (en) 2008-12-24 2016-09-13 Comcast Interactive Media, Llc Identification of segments within audio, video, and multimedia items
US8713016B2 (en) 2008-12-24 2014-04-29 Comcast Interactive Media, Llc Method and apparatus for organizing segments of media assets and determining relevance of segments to a query
US8849390B2 (en) * 2008-12-29 2014-09-30 Cyberonics, Inc. Processing for multi-channel signals
US11531668B2 (en) 2008-12-29 2022-12-20 Comcast Interactive Media, Llc Merging of multiple data sets
WO2010076933A1 (ko) * 2008-12-30 2010-07-08 (주)엘지전자 이차원 영상과 3d 영상의 통합 서비스가 가능한 디지털 방송 수신방법, 및 이를 이용한 디지털 방송 수신장치
US8588933B2 (en) 2009-01-09 2013-11-19 Cyberonics, Inc. Medical lead termination sleeve for implantable medical devices
CN102576412B (zh) 2009-01-13 2014-11-05 华为技术有限公司 图像处理以为图像中的对象进行分类的方法和系统
US8345102B2 (en) * 2009-01-13 2013-01-01 Futurewei Technologies, Inc. Image processing system and method for object tracking
US20100180218A1 (en) * 2009-01-15 2010-07-15 International Business Machines Corporation Editing metadata in a social network
US20100188573A1 (en) * 2009-01-29 2010-07-29 Usva Kuusiholma Media metadata transportation
US8326127B2 (en) * 2009-01-30 2012-12-04 Echostar Technologies L.L.C. Methods and apparatus for identifying portions of a video stream based on characteristics of the video stream
US8326637B2 (en) 2009-02-20 2012-12-04 Voicebox Technologies, Inc. System and method for processing multi-modal device interactions in a natural language voice services environment
US10104436B1 (en) 2009-02-23 2018-10-16 Beachfront Media Llc Automated video-preroll method and device
US8364671B1 (en) * 2009-02-23 2013-01-29 Mefeedia, Inc. Method and device for ranking video embeds
US8296675B2 (en) * 2009-03-09 2012-10-23 Telcordia Technologies, Inc. System and method for capturing, aggregating and presenting attention hotspots in shared media
GB0904113D0 (en) * 2009-03-10 2009-04-22 Intrasonics Ltd Video and audio bookmarking
US20100235391A1 (en) * 2009-03-11 2010-09-16 Sony Corporation Accessing item information for an item selected from a displayed image
US8176043B2 (en) 2009-03-12 2012-05-08 Comcast Interactive Media, Llc Ranking search results
WO2010108053A1 (en) * 2009-03-19 2010-09-23 Azuki Systems, Inc. Method for scalable live streaming delivery for mobile audiences
US9170995B1 (en) 2009-03-19 2015-10-27 Google Inc. Identifying context of content items
US8600849B1 (en) 2009-03-19 2013-12-03 Google Inc. Controlling content items
US9760906B1 (en) * 2009-03-19 2017-09-12 Google Inc. Sharing revenue associated with a content item
US8572647B2 (en) * 2009-03-19 2013-10-29 Google Inc. Online ad placement based on user metrics for hosted media
CA2759880C (en) * 2009-03-23 2013-09-24 Azuki Systems, Inc. Method and system for efficient streaming video dynamic rate adaptation
US20100250325A1 (en) 2009-03-24 2010-09-30 Neurofocus, Inc. Neurological profiles for market matching and stimulus presentation
US8826117B1 (en) 2009-03-25 2014-09-02 Google Inc. Web-based system for video editing
US8726324B2 (en) * 2009-03-27 2014-05-13 Motorola Mobility Llc Method for identifying image capture opportunities using a selected expert photo agent
US8132200B1 (en) 2009-03-30 2012-03-06 Google Inc. Intra-video ratings
US8769589B2 (en) 2009-03-31 2014-07-01 At&T Intellectual Property I, L.P. System and method to create a media content summary based on viewer annotations
US20100287026A1 (en) * 2009-05-06 2010-11-11 Disney Enterprises , Inc. System and method for providing online video advertisements based on determined user tolerances
US8533223B2 (en) 2009-05-12 2013-09-10 Comcast Interactive Media, LLC. Disambiguation and tagging of entities
US10375451B2 (en) 2009-05-29 2019-08-06 Inscape Data, Inc. Detection of common media segments
US9055309B2 (en) 2009-05-29 2015-06-09 Cognitive Networks, Inc. Systems and methods for identifying video segments for displaying contextually relevant content
US10116972B2 (en) 2009-05-29 2018-10-30 Inscape Data, Inc. Methods for identifying video segments and displaying option to view from an alternative source and/or on an alternative device
US8595781B2 (en) 2009-05-29 2013-11-26 Cognitive Media Networks, Inc. Methods for identifying video segments and displaying contextual targeted content on a connected television
US9449090B2 (en) 2009-05-29 2016-09-20 Vizio Inscape Technologies, Llc Systems and methods for addressing a media database using distance associative hashing
US10949458B2 (en) 2009-05-29 2021-03-16 Inscape Data, Inc. System and method for improving work load management in ACR television monitoring system
US8786624B2 (en) * 2009-06-02 2014-07-22 Cyberonics, Inc. Processing for multi-channel signals
US20100312596A1 (en) * 2009-06-05 2010-12-09 Mozaik Multimedia, Inc. Ecosystem for smart content tagging and interaction
US8250040B2 (en) * 2009-06-15 2012-08-21 Microsoft Corporation Storage or removal actions based on priority
ES2544966T3 (es) * 2009-06-22 2015-09-07 Cinvolve Bvba Método para un sistema de cine digital interactivo
US11647243B2 (en) * 2009-06-26 2023-05-09 Seagate Technology Llc System and method for using an application on a mobile device to transfer internet media content
US10296937B2 (en) * 2009-06-29 2019-05-21 Excalibur Ip, Llc Operating a sensor recording marketplace
US8321787B2 (en) * 2009-06-30 2012-11-27 International Business Machines Corporation Managing multiple virtual world accounts from a single virtual lobby interface
US9892730B2 (en) 2009-07-01 2018-02-13 Comcast Interactive Media, Llc Generating topic-specific language models
US20110063503A1 (en) * 2009-07-06 2011-03-17 Brand Steven M Synchronizing secondary content to a multimedia presentation
US20110015765A1 (en) * 2009-07-15 2011-01-20 Apple Inc. Controlling an audio and visual experience based on an environment
US8612435B2 (en) * 2009-07-16 2013-12-17 Yahoo! Inc. Activity based users' interests modeling for determining content relevance
US20110035281A1 (en) * 2009-08-10 2011-02-10 Ari Bernstein Filter for displaying advertisements over a network
US8380582B2 (en) * 2009-08-12 2013-02-19 Google Inc. Annotating content
US10536728B2 (en) * 2009-08-18 2020-01-14 Jinni Content classification system
US20170243244A1 (en) * 2009-08-18 2017-08-24 Jinni Media Ltd. Methods Circuits Devices Systems and Associated Machine Executable Code for Taste-based Targeting and Delivery of Content
US10987015B2 (en) 2009-08-24 2021-04-27 Nielsen Consumer Llc Dry electrodes for electroencephalography
US8307308B2 (en) * 2009-08-27 2012-11-06 International Business Machines Corporation Updating assets rendered in a virtual world environment based on detected user interactions in another world
US20110052144A1 (en) * 2009-09-01 2011-03-03 2Cimple, Inc. System and Method for Integrating Interactive Call-To-Action, Contextual Applications with Videos
US8473611B1 (en) * 2009-09-04 2013-06-25 Blue Coat Systems, Inc. Referrer cache chain
US20110261258A1 (en) * 2009-09-14 2011-10-27 Kumar Ramachandran Systems and methods for updating video content with linked tagging information
US8947350B2 (en) 2009-09-14 2015-02-03 Broadcom Corporation System and method for generating screen pointing information in a television control device
US10587833B2 (en) 2009-09-16 2020-03-10 Disney Enterprises, Inc. System and method for automated network search and companion display of result relating to audio-video metadata
WO2011038195A1 (en) * 2009-09-25 2011-03-31 Phillip Anthony Storage A method and system for collection and management of remote observational data for businesses
US9031243B2 (en) * 2009-09-28 2015-05-12 iZotope, Inc. Automatic labeling and control of audio algorithms by audio recognition
US8369686B2 (en) * 2009-09-30 2013-02-05 Microsoft Corporation Intelligent overlay for video advertising
WO2011042876A1 (en) 2009-10-07 2011-04-14 Alon Atsmon Automatic content analysis method and system
US8990104B1 (en) 2009-10-27 2015-03-24 Sprint Communications Company L.P. Multimedia product placement marketplace
US20110106750A1 (en) 2009-10-29 2011-05-05 Neurofocus, Inc. Generating ratings predictions using neuro-response data
US9560984B2 (en) 2009-10-29 2017-02-07 The Nielsen Company (Us), Llc Analysis of controlled and automatic attention for introduction of stimulus material
US9171541B2 (en) 2009-11-10 2015-10-27 Voicebox Technologies Corporation System and method for hybrid processing in a natural language voice services environment
US9502025B2 (en) 2009-11-10 2016-11-22 Voicebox Technologies Corporation System and method for providing a natural language content dedication service
US8813164B2 (en) * 2009-11-30 2014-08-19 Sony Corporation Data tunneling via closed captioning
JP5715390B2 (ja) * 2009-12-03 2015-05-07 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 視聴端末装置、視聴統計装置、視聴統計処理システムおよび視聴統計処理方法
US10721526B2 (en) * 2009-12-15 2020-07-21 Sony Corporation Enhancement of main items video data with supplemental audio or video
US20110184972A1 (en) * 2009-12-23 2011-07-28 Cbs Interactive Inc. System and method for navigating a product catalog
US8682728B2 (en) * 2010-01-22 2014-03-25 Vincent KONKOL Network advertising methods and apparatus
US8555324B2 (en) * 2010-02-02 2013-10-08 Microsoft Corporation Video download mechanism for transferring large data
US9643019B2 (en) * 2010-02-12 2017-05-09 Cyberonics, Inc. Neurological monitoring and alerts
US20110208604A1 (en) * 2010-02-20 2011-08-25 Yang Pan Media Delivery System for an Automobile by the Use of Voice Input Device and Head-Up Display
US10116902B2 (en) * 2010-02-26 2018-10-30 Comcast Cable Communications, Llc Program segmentation of linear transmission
US20110219325A1 (en) * 2010-03-02 2011-09-08 Himes David M Displaying and Manipulating Brain Function Data Including Enhanced Data Scrolling Functionality
US20120066303A1 (en) 2010-03-03 2012-03-15 Waldeck Technology, Llc Synchronized group location updates
US8386308B2 (en) * 2010-03-12 2013-02-26 Yahoo! Inc. Targeting content creation requests to content contributors
US8489991B2 (en) * 2010-03-17 2013-07-16 Creative Technology Ltd System and method for video frame marking
ITMI20100455A1 (it) * 2010-03-19 2011-09-20 Bertaso Alberto Sistema integrato di gestione di aree espositive
US8422859B2 (en) * 2010-03-23 2013-04-16 Vixs Systems Inc. Audio-based chapter detection in multimedia stream
WO2011133548A2 (en) 2010-04-19 2011-10-27 Innerscope Research, Inc. Short imagery task (sit) research method
US9443147B2 (en) * 2010-04-26 2016-09-13 Microsoft Technology Licensing, Llc Enriching online videos by content detection, searching, and information aggregation
US10192138B2 (en) 2010-05-27 2019-01-29 Inscape Data, Inc. Systems and methods for reducing data density in large datasets
US9838753B2 (en) 2013-12-23 2017-12-05 Inscape Data, Inc. Monitoring individual viewing of television events using tracking pixels and cookies
US8417966B1 (en) * 2010-05-28 2013-04-09 Adobe Systems Incorporated System and method for measuring and reporting consumption of rights-protected media content
US8903798B2 (en) * 2010-05-28 2014-12-02 Microsoft Corporation Real-time annotation and enrichment of captured video
US8694899B2 (en) 2010-06-01 2014-04-08 Apple Inc. Avatars reflecting user states
US8424037B2 (en) * 2010-06-29 2013-04-16 Echostar Technologies L.L.C. Apparatus, systems and methods for accessing and synchronizing presentation of media content and supplemental media rich content in response to selection of a presented object
US8688679B2 (en) 2010-07-20 2014-04-01 Smartek21, Llc Computer-implemented system and method for providing searchable online media content
WO2012015889A1 (en) 2010-07-27 2012-02-02 Telcordia Technologies, Inc. Interactive projection and playback of relevant media segments onto facets of three-dimensional shapes
US9021118B2 (en) * 2010-07-30 2015-04-28 Avaya Inc. System and method for displaying a tag history of a media event
US20120066071A1 (en) * 2010-08-05 2012-03-15 Thomas Scott W Intelligent electronic information deployment
US20140172501A1 (en) * 2010-08-18 2014-06-19 Jinni Media Ltd. System Apparatus Circuit Method and Associated Computer Executable Code for Hybrid Content Recommendation
US9071885B2 (en) * 2010-08-18 2015-06-30 Demand Media, Inc. Systems, methods, and machine-readable storage media for presenting animations overlying multimedia files
JP5676971B2 (ja) 2010-08-18 2015-02-25 キヤノン株式会社 情報処理装置、表示制御方法、プログラム
US9792640B2 (en) 2010-08-18 2017-10-17 Jinni Media Ltd. Generating and providing content recommendations to a group of users
US8655805B2 (en) 2010-08-30 2014-02-18 International Business Machines Corporation Method for classification of objects in a graph data stream
KR20120028491A (ko) * 2010-09-15 2012-03-23 삼성전자주식회사 이미지 데이터 관리장치 및 방법
US8533192B2 (en) * 2010-09-16 2013-09-10 Alcatel Lucent Content capture device and methods for automatically tagging content
US8122142B1 (en) 2010-10-12 2012-02-21 Lemi Technology, Llc Obtaining and displaying status updates for presentation during playback of a media content stream based on proximity to the point of capture
US9484065B2 (en) * 2010-10-15 2016-11-01 Microsoft Technology Licensing, Llc Intelligent determination of replays based on event identification
US9098407B2 (en) * 2010-10-25 2015-08-04 Inkling Systems, Inc. Methods for automatically retrieving electronic media content items from a server based upon a reading list and facilitating presentation of media objects of the electronic media content items in sequences not constrained by an original order thereof
US20120109728A1 (en) * 2010-10-29 2012-05-03 Google Inc. Incentives for media sharing
US8863165B2 (en) * 2010-11-01 2014-10-14 Gracenote, Inc. Method and system for presenting additional content at a media system
US8924993B1 (en) * 2010-11-11 2014-12-30 Google Inc. Video content analysis for automatic demographics recognition of users and videos
US8806054B1 (en) * 2010-12-15 2014-08-12 Amazon Technologies, Inc. Sending application input commands over a network
US20120159540A1 (en) * 2010-12-16 2012-06-21 Electronics And Telecommunications Research Institute System and method for providing personalized content
US20120167146A1 (en) * 2010-12-28 2012-06-28 White Square Media Llc Method and apparatus for providing or utilizing interactive video with tagged objects
US20120170914A1 (en) 2011-01-04 2012-07-05 Sony Dadc Us Inc. Logging events in media files
US8589423B2 (en) 2011-01-18 2013-11-19 Red 5 Studios, Inc. Systems and methods for generating enhanced screenshots
JP6042596B2 (ja) * 2011-01-21 2016-12-14 ソニー株式会社 情報処理装置、テレビ受像機、情報処理方法、プログラム、および情報処理システム
US9792363B2 (en) * 2011-02-01 2017-10-17 Vdopia, INC. Video display method
US20120200573A1 (en) * 2011-02-07 2012-08-09 Hooray LLC E-reader with locked and unlocked content and reader tracking capability
US9003462B2 (en) * 2011-02-10 2015-04-07 Comcast Cable Communications, Llc Content archive model
US8775664B2 (en) * 2011-02-16 2014-07-08 Sony Corporation Method and apparatus for use in tracking playback of media streams while in stand-by mode
US10739941B2 (en) 2011-03-29 2020-08-11 Wevideo, Inc. Multi-source journal content integration systems and methods and systems and methods for collaborative online content editing
US9711178B2 (en) 2011-03-29 2017-07-18 Wevideo, Inc. Local timeline editing for online content editing
US8694593B1 (en) 2011-03-31 2014-04-08 Google Inc. Tools for micro-communities
US20120259712A1 (en) * 2011-04-06 2012-10-11 Avaya Inc. Advertising in a virtual environment
CN102232298B (zh) * 2011-04-07 2013-10-09 华为技术有限公司 媒体内容的传输处理方法、装置与系统
US9380356B2 (en) 2011-04-12 2016-06-28 The Nielsen Company (Us), Llc Methods and apparatus to generate a tag for media content
EP2705664A2 (en) * 2011-05-03 2014-03-12 Atsmon, Alon Automatic image content analysis method and system
US8332424B2 (en) 2011-05-13 2012-12-11 Google Inc. Method and apparatus for enabling virtual tags
US9678992B2 (en) 2011-05-18 2017-06-13 Microsoft Technology Licensing, Llc Text to image translation
US10044448B2 (en) * 2011-05-18 2018-08-07 Sparcq, Inc. Sonic signaling communication for user devices
CN102802055B (zh) * 2011-05-25 2016-06-01 阿里巴巴集团控股有限公司 一种基于在线视频的数据交互方法及装置
US20140278992A1 (en) * 2013-03-15 2014-09-18 Nfluence Media, Inc. Ad blocking tools for interest-graph driven personalization
US8185448B1 (en) 2011-06-10 2012-05-22 Myslinski Lucas J Fact checking method and system
US9015037B2 (en) 2011-06-10 2015-04-21 Linkedin Corporation Interactive fact checking system
US9176957B2 (en) 2011-06-10 2015-11-03 Linkedin Corporation Selective fact checking method and system
US9087048B2 (en) 2011-06-10 2015-07-21 Linkedin Corporation Method of and system for validating a fact checking system
WO2012174301A1 (en) * 2011-06-14 2012-12-20 Related Content Database, Inc. System and method for presenting content with time based metadata
CN102831117B (zh) * 2011-06-15 2016-07-06 阿里巴巴集团控股有限公司 选择字体、字体的确定、推荐、生成方法及其设备
US8737820B2 (en) 2011-06-17 2014-05-27 Snapone, Inc. Systems and methods for recording content within digital video
US9210208B2 (en) 2011-06-21 2015-12-08 The Nielsen Company (Us), Llc Monitoring streaming media content
US10296921B2 (en) * 2011-06-21 2019-05-21 Disney Enterprises, Inc. System and method for event context-based commerce options
US20130290508A1 (en) * 2012-04-25 2013-10-31 Jan Besehanic Methods and apparatus to measure exposure to streaming media
US9209978B2 (en) 2012-05-15 2015-12-08 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
US9681160B2 (en) * 2011-06-22 2017-06-13 Tout Inc. Method and apparatus for automatically associating media segments with broadcast media streams
KR20140024347A (ko) * 2011-06-28 2014-02-28 톰슨 라이센싱 매체 컨텐츠 내의 제품들 및 서비스들을 식별하기 위한 방법 및 장치
US8788578B2 (en) * 2011-07-11 2014-07-22 Roku, Inc. Method and apparatus for customized provisioning of on-line application channels
CN110069661B (zh) * 2011-07-22 2023-09-26 谷歌有限责任公司 链接内容文件
US9087058B2 (en) 2011-08-03 2015-07-21 Google Inc. Method and apparatus for enabling a searchable history of real-world user experiences
US8849819B2 (en) * 2011-08-05 2014-09-30 Deacon Johnson System and method for controlling and organizing metadata associated with on-line content
US8719277B2 (en) 2011-08-08 2014-05-06 Google Inc. Sentimental information associated with an object within a media
US9195679B1 (en) 2011-08-11 2015-11-24 Ikorongo Technology, LLC Method and system for the contextual display of image tags in a social network
US10019962B2 (en) 2011-08-17 2018-07-10 Microsoft Technology Licensing, Llc Context adaptive user interface for augmented reality display
US9153195B2 (en) * 2011-08-17 2015-10-06 Microsoft Technology Licensing, Llc Providing contextual personal information by a mixed reality device
WO2013028908A1 (en) 2011-08-24 2013-02-28 Microsoft Corporation Touch and social cues as inputs into a computer
EP2758885A4 (en) 2011-08-29 2015-10-28 Cinsay Inc ENCAPSED SOFTWARE FOR VIRAL COPYING FROM ONE FINAL POINT TO ANOTHER
US20130060661A1 (en) * 2011-09-06 2013-03-07 Apple Inc. Managing access to digital content items
US8793313B2 (en) 2011-09-08 2014-07-29 Red 5 Studios, Inc. Systems, methods and media for distributing peer-to-peer communications
ITRM20110469A1 (it) * 2011-09-08 2013-03-09 Hyper Tv S R L Sistema e metodo per la produzione da parte di un autore di contenuti multimediali complessi e per la fruizione di tali contenuti da parte di un utente
CN103797811B (zh) 2011-09-09 2017-12-12 乐天株式会社 用于消费者对交互式电视接触的控制的系统和方法
US9525900B2 (en) * 2011-09-15 2016-12-20 Google Inc. Video management system
US9147194B1 (en) * 2011-09-23 2015-09-29 Google Inc. Aggregated performance information for video content items
US20130088514A1 (en) * 2011-10-05 2013-04-11 Wikitude GmbH Mobile electronic device, method and webpage for visualizing location-based augmented reality content
US9900644B2 (en) * 2011-10-13 2018-02-20 Samsung Electronics Co., Ltd. Device and method for processing an object which provides additional service in connection with a broadcast service in a broadcast receiving device
US20150199308A1 (en) 2011-10-17 2015-07-16 Google Inc. Systems and methods for controlling the display of online documents
WO2013059691A1 (en) * 2011-10-19 2013-04-25 Cornell University Systems and methods for identifying objects
US9930311B2 (en) 2011-10-20 2018-03-27 Geun Sik Jo System and method for annotating a video with advertising information
US9635128B2 (en) 2011-11-02 2017-04-25 Photopon, Inc. System and method for experience-sharing within a computer network
US9015785B2 (en) * 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system
EP2788860A4 (en) 2011-12-06 2016-07-06 Autograph Inc GUIDE WITH USER-FRIENDLY PROFILING AND TOOLS FOR ANALYSIS AND FAST INFORMATION DISPLAY
US9275198B2 (en) * 2011-12-06 2016-03-01 The Boeing Company Systems and methods for electronically publishing content
US9348554B2 (en) * 2011-12-20 2016-05-24 Audible, Inc. Managing playback of supplemental information
EP2610871A1 (en) * 2011-12-30 2013-07-03 Research In Motion Limited Methods and apparatus for use in providing object indicators during video recording or playback
US9406090B1 (en) 2012-01-09 2016-08-02 Google Inc. Content sharing system
US9137308B1 (en) 2012-01-09 2015-09-15 Google Inc. Method and apparatus for enabling event-based media data capture
US9363540B2 (en) 2012-01-12 2016-06-07 Comcast Cable Communications, Llc Methods and systems for content control
US9172994B2 (en) 2012-02-07 2015-10-27 Turner Broadcasting System, Inc. Method and system for an automatic content recognition abstraction layer
US9619123B1 (en) * 2012-02-16 2017-04-11 Google Inc. Acquiring and sharing content extracted from media content
JP5298235B1 (ja) * 2012-02-17 2013-09-25 株式会社コナミデジタルエンタテインメント ゲーム装置，プログラムおよびゲーム管理方法
US8995437B2 (en) * 2012-02-22 2015-03-31 Texas Instruments Incorporated Transmission of segmented frames in power line communication
US9292858B2 (en) 2012-02-27 2016-03-22 The Nielsen Company (Us), Llc Data collection system for aggregating biologically based measures in asynchronous geographically distributed public environments
US9569986B2 (en) 2012-02-27 2017-02-14 The Nielsen Company (Us), Llc System and method for gathering and analyzing biometric user feedback for use in social media and advertising applications
US9451303B2 (en) 2012-02-27 2016-09-20 The Nielsen Company (Us), Llc Method and system for gathering and computing an audience's neurologically-based reactions in a distributed framework involving remote storage and computing
US8862764B1 (en) 2012-03-16 2014-10-14 Google Inc. Method and Apparatus for providing Media Information to Mobile Devices
US9332241B2 (en) 2012-03-26 2016-05-03 Customplay Llc Video map responsive to a video release
US9583147B2 (en) 2012-03-26 2017-02-28 Max Abecassis Second screen shopping function
US9124950B2 (en) 2012-03-26 2015-09-01 Max Abecassis Providing item information notification during video playing
US9380282B2 (en) * 2012-03-26 2016-06-28 Max Abecassis Providing item information during video playing
US9609395B2 (en) 2012-03-26 2017-03-28 Max Abecassis Second screen subtitles function
US9576334B2 (en) 2012-03-26 2017-02-21 Max Abecassis Second screen recipes function
US20130343720A1 (en) 2012-03-26 2013-12-26 Customplay Llc Providing Plot Explanation Within A Video
US9578370B2 (en) 2012-03-26 2017-02-21 Max Abecassis Second screen locations function
US9301016B2 (en) 2012-04-05 2016-03-29 Facebook, Inc. Sharing television and video programming through social networking
US8935725B1 (en) * 2012-04-16 2015-01-13 Google Inc. Visually browsing videos
US10148374B2 (en) * 2012-04-23 2018-12-04 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for altering an in-vehicle presentation
US9552124B2 (en) * 2012-04-27 2017-01-24 Mobitv, Inc. Character based search and discovery of media content
US9449089B2 (en) 2012-05-07 2016-09-20 Pixability, Inc. Methods and systems for identifying distribution opportunities
EP2670157B1 (en) * 2012-06-01 2019-10-02 Koninklijke KPN N.V. Fingerprint-based inter-destination media synchronization
TWI470999B (zh) * 2012-06-19 2015-01-21 Wistron Corp 編輯與儲存串流的方法、裝置、系統
US9607330B2 (en) 2012-06-21 2017-03-28 Cinsay, Inc. Peer-assisted shopping
US10789631B2 (en) 2012-06-21 2020-09-29 Aibuy, Inc. Apparatus and method for peer-assisted e-commerce shopping
US8632411B1 (en) 2012-06-28 2014-01-21 Red 5 Studios, Inc. Exchanging virtual rewards for computing resources
US8628424B1 (en) 2012-06-28 2014-01-14 Red 5 Studios, Inc. Interactive spectator features for gaming environments
US20140092127A1 (en) * 2012-07-11 2014-04-03 Empire Technology Development Llc Media annotations in networked environment
WO2014010470A1 (ja) * 2012-07-12 2014-01-16 ソニー株式会社 送信装置、情報処理方法、プログラム、受信装置、およびアプリケーション連動システム
US8834268B2 (en) * 2012-07-13 2014-09-16 Red 5 Studios, Inc. Peripheral device control and usage in a broadcaster mode for gaming environments
US8795086B2 (en) 2012-07-20 2014-08-05 Red 5 Studios, Inc. Referee mode within gaming environments
US20150373230A9 (en) * 2012-07-23 2015-12-24 Timecode Systems Ltd Networked programmable timecode and metadata transfer system
US9998789B1 (en) 2012-07-27 2018-06-12 Dp Technologies, Inc. Audience interaction system
US8475284B1 (en) 2012-07-31 2013-07-02 Scott Rudi Dynamic views within gaming environments
US9547862B2 (en) * 2012-08-01 2017-01-17 Paypal, Inc. Electronic payment restriction
US9172999B2 (en) * 2012-08-08 2015-10-27 Verizon Patent And Licensing Inc. Behavioral keyword identification based on thematic channel viewing
US9270515B1 (en) * 2012-08-15 2016-02-23 Google Inc. Identifying portions of a media stream
US9699485B2 (en) * 2012-08-31 2017-07-04 Facebook, Inc. Sharing television and video programming through social networking
US9342209B1 (en) * 2012-08-23 2016-05-17 Audible, Inc. Compilation and presentation of user activity information
US9113128B1 (en) * 2012-08-31 2015-08-18 Amazon Technologies, Inc. Timeline interface for video content
BE1020639A3 (nl) * 2012-09-06 2014-02-04 Holybrain Bvba Een systeem voor het selecteren en het bekijken van programma-inhoud met behulp van gebruikersinterfaces.
BE1020638A3 (nl) * 2012-09-06 2014-02-04 Holybrain Bvba Een werkwijze voor gedistribueerde vertraagde streaming van inhoud.
BE1020636A3 (nl) * 2012-09-06 2014-02-04 Holybrain Bvba Een werkwijze voor verdeeld vertraagde streaming van inhoud.
BE1020637A3 (nl) * 2012-09-06 2014-02-04 Holybrain Bvba Een werkwijze voor verdeeld uploaden van inhoud.
US20140089423A1 (en) * 2012-09-27 2014-03-27 United Video Properties, Inc. Systems and methods for identifying objects displayed in a media asset
US9635438B2 (en) 2012-09-27 2017-04-25 Arris Enterprises, Inc. Providing secondary content to accompany a primary content item
US9143823B2 (en) * 2012-10-01 2015-09-22 Google Inc. Providing suggestions for optimizing videos to video owners
US9484063B2 (en) * 2012-10-02 2016-11-01 Quadmanage Ltd. Shared scene mosaic generation
US20140108958A1 (en) * 2012-10-12 2014-04-17 Redpeppix. Gmbh & Co. Kg Tagging system and method for providing a communication platform in a network
US8972389B2 (en) * 2012-10-16 2015-03-03 International Business Machines Corporation Use of ontology to find a category of a selected keyword in a webpage
US11115722B2 (en) * 2012-11-08 2021-09-07 Comcast Cable Communications, Llc Crowdsourcing supplemental content
US20140133833A1 (en) * 2012-11-09 2014-05-15 Jason Sumler Creating customized digital advertisement from video and/or an image array
US9529785B2 (en) 2012-11-27 2016-12-27 Google Inc. Detecting relationships between edits and acting on a subset of edits
US9936256B2 (en) * 2012-11-28 2018-04-03 Saturn Licensing Llc Receiver, reception method, transmitter and transmission method
US9389745B1 (en) 2012-12-10 2016-07-12 Amazon Technologies, Inc. Providing content via multiple display devices
US9483159B2 (en) 2012-12-12 2016-11-01 Linkedin Corporation Fact checking graphical user interface including fact checking icons
US20140173086A1 (en) * 2012-12-13 2014-06-19 Telemetry Limited Method and apparatus for determining digital media visibility
US8863175B2 (en) * 2012-12-19 2014-10-14 Ebay Inc. Method and system for targeted commerce in network broadcasting
US9628524B2 (en) 2012-12-20 2017-04-18 Google Inc. Tagging posts within a media stream
US20140181243A1 (en) * 2012-12-21 2014-06-26 Adswizz S.A. Server-based content tracking apparatus and method
US9720895B1 (en) * 2012-12-26 2017-08-01 Metadata Authoring Technologies, LLC Device for construction of computable linked semantic annotations
US20140178041A1 (en) * 2012-12-26 2014-06-26 Balakesan P. Thevar Content-sensitive media playback
US8769557B1 (en) 2012-12-27 2014-07-01 The Nielsen Company (Us), Llc Methods and apparatus to determine engagement levels of audience members
US9282346B2 (en) 2012-12-28 2016-03-08 Turner Broadcasting System, Inc. Method and system for automatic content recognition (ACR) integration for smartTVs and mobile communication devices
US9396180B1 (en) * 2013-01-29 2016-07-19 Amazon Technologies, Inc. System and method for analyzing video content and presenting information corresponding to video content to users
CN103971244B (zh) 2013-01-30 2018-08-17 阿里巴巴集团控股有限公司 一种商品信息的发布与浏览方法、装置及系统
US9313544B2 (en) * 2013-02-14 2016-04-12 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
US9123335B2 (en) 2013-02-20 2015-09-01 Jinni Media Limited System apparatus circuit method and associated computer executable code for natural language understanding and semantic content discovery
US9830304B1 (en) * 2013-02-22 2017-11-28 Swoop Inc. Systems and methods for integrating dynamic content into electronic media
US10007933B2 (en) * 2013-02-22 2018-06-26 Swoop Inc. Systems and methods for integrating dynamic content into electronic media
CN104009965A (zh) * 2013-02-27 2014-08-27 腾讯科技（深圳）有限公司 一种展示移动媒体信息的方法、装置和系统
US11748833B2 (en) 2013-03-05 2023-09-05 Wevideo, Inc. Systems and methods for a theme-based effects multimedia editing platform
US9118960B2 (en) * 2013-03-08 2015-08-25 The Nielsen Company (Us), Llc Methods and systems for reducing spillover by detecting signal distortion
US9654538B1 (en) * 2013-03-11 2017-05-16 DataTorrent, Inc. Dynamic partitioning of instances in distributed streaming platform for real-time applications
US9497507B2 (en) * 2013-03-14 2016-11-15 Arris Enterprises, Inc. Advertisement insertion
US9952742B2 (en) 2013-03-14 2018-04-24 Google Llc Providing trending information to users
US10880609B2 (en) 2013-03-14 2020-12-29 Comcast Cable Communications, Llc Content event messaging
US9613101B2 (en) * 2013-03-15 2017-04-04 Google Inc. Promoting an original version of a copyrighted media item over an authorized copied version of the copyrighted media item in a search query
US9788084B2 (en) * 2013-04-05 2017-10-10 NBCUniversal, LLC Content-object synchronization and authoring of dynamic metadata
US9514119B2 (en) * 2013-05-21 2016-12-06 International Business Machines Corporation Contributor identification tool
CN104182431A (zh) * 2013-05-28 2014-12-03 英业达科技有限公司 媒体检索方法
US10366418B1 (en) * 2013-05-30 2019-07-30 Ca, Inc. Method and system for providing a relevant message using a smart radio
US9369506B2 (en) 2013-06-05 2016-06-14 Adobe Systems Incorporated Insertion of supplementary content into a segmented content stream
US9100718B2 (en) * 2013-06-14 2015-08-04 Beamly Limited System for synchronising content with live television
US9633317B2 (en) 2013-06-20 2017-04-25 Viv Labs, Inc. Dynamically evolving cognitive architecture system based on a natural language intent interpreter
US10474961B2 (en) 2013-06-20 2019-11-12 Viv Labs, Inc. Dynamically evolving cognitive architecture system based on prompting for additional user input
US10083009B2 (en) 2013-06-20 2018-09-25 Viv Labs, Inc. Dynamically evolving cognitive architecture system planning
US9594542B2 (en) 2013-06-20 2017-03-14 Viv Labs, Inc. Dynamically evolving cognitive architecture system based on training by third-party developers
US11019300B1 (en) 2013-06-26 2021-05-25 Amazon Technologies, Inc. Providing soundtrack information during playback of video content
WO2014205761A1 (zh) * 2013-06-28 2014-12-31 华为技术有限公司 一种数据展示的方法、终端及系统
US9971752B2 (en) 2013-08-19 2018-05-15 Google Llc Systems and methods for resolving privileged edits within suggested edits
US10318579B2 (en) 2013-09-06 2019-06-11 Gracenote, Inc. Inserting information into playing content
JP6546924B2 (ja) 2013-09-11 2019-07-17 アイバイ，インコーポレイテッド コンテンツトランザクションアイテムの動的バインド
US9083726B2 (en) * 2013-09-11 2015-07-14 Verizon Patent And Licensing Inc. Automatic content publication and distribution
US8701145B1 (en) * 2013-09-12 2014-04-15 Penthera Partners, Inc. Commercials on mobile devices
US9743124B2 (en) 2013-09-12 2017-08-22 Wideorbit Inc. Systems and methods to deliver a personalized mediacast with an uninterrupted lead-in portion
US20150088921A1 (en) 2013-09-20 2015-03-26 Ebay Inc. Search guidance
US9245192B2 (en) * 2013-09-20 2016-01-26 Here Global B.V. Ad collateral detection
US10194189B1 (en) 2013-09-23 2019-01-29 Amazon Technologies, Inc. Playback of content using multiple devices
US20150095320A1 (en) 2013-09-27 2015-04-02 Trooclick France Apparatus, systems and methods for scoring the reliability of online information
US10169424B2 (en) 2013-09-27 2019-01-01 Lucas J. Myslinski Apparatus, systems and methods for scoring and distributing the reliability of online information
EP3050017A4 (en) 2013-09-27 2017-06-21 Cinsay, Inc. Apparatus and method for supporting relationships associated with content provisioning
CN105579997A (zh) 2013-09-27 2016-05-11 辛赛股份有限公司 补充内容的n-层复制
US10033847B2 (en) 2013-09-30 2018-07-24 Sony Interactive Entertainment Inc. Dropped call warning and prevention methods
US9374606B2 (en) * 2013-10-04 2016-06-21 Nbcuniversal Media, Llc Synchronization of supplemental digital content
US11589127B2 (en) * 2013-10-04 2023-02-21 Disney Enterprises, Inc. Interactive multimedia package methods and systems
US9332035B2 (en) 2013-10-10 2016-05-03 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
US9348803B2 (en) 2013-10-22 2016-05-24 Google Inc. Systems and methods for providing just-in-time preview of suggestion resolutions
US20150135071A1 (en) * 2013-11-12 2015-05-14 Fox Digital Entertainment, Inc. Method and apparatus for distribution and presentation of audio visual data enhancements
US9426538B2 (en) 2013-11-20 2016-08-23 At&T Intellectual Property I, Lp Method and apparatus for presenting advertising in content having an emotional context
US20150177940A1 (en) * 2013-12-20 2015-06-25 Clixie Media, LLC System, article, method and apparatus for creating event-driven content for online video, audio and images
US9955192B2 (en) 2013-12-23 2018-04-24 Inscape Data, Inc. Monitoring individual viewing of television events using tracking pixels and cookies
US9503790B2 (en) * 2013-12-27 2016-11-22 Verizon and Redbox Digital Entertainment Services, LLC Sorting content assets
KR102159816B1 (ko) * 2014-01-13 2020-09-24 삼성전자 주식회사 실감형 멀티미디어 컨텐츠 재생 방법 및 장치
US20150221112A1 (en) * 2014-02-04 2015-08-06 Microsoft Corporation Emotion Indicators in Content
US10037380B2 (en) * 2014-02-14 2018-07-31 Microsoft Technology Licensing, Llc Browsing videos via a segment list
US9591365B2 (en) * 2014-02-26 2017-03-07 Rovi Guides, Inc. Methods and systems for supplementing media assets during fast-access playback operations
US9643722B1 (en) 2014-02-28 2017-05-09 Lucas J. Myslinski Drone device security system
US10713494B2 (en) 2014-02-28 2020-07-14 Second Spectrum, Inc. Data processing systems and methods for generating and interactive user interfaces and interactive game systems based on spatiotemporal analysis of video content
US11120271B2 (en) * 2014-02-28 2021-09-14 Second Spectrum, Inc. Data processing systems and methods for enhanced augmentation of interactive video content
US9972055B2 (en) 2014-02-28 2018-05-15 Lucas J. Myslinski Fact checking method and system utilizing social networking information
US11861906B2 (en) 2014-02-28 2024-01-02 Genius Sports Ss, Llc Data processing systems and methods for enhanced augmentation of interactive video content
US8990234B1 (en) 2014-02-28 2015-03-24 Lucas J. Myslinski Efficient fact checking method and system
US10769446B2 (en) 2014-02-28 2020-09-08 Second Spectrum, Inc. Methods and systems of combining video content with one or more augmentations
US10521671B2 (en) 2014-02-28 2019-12-31 Second Spectrum, Inc. Methods and systems of spatiotemporal pattern recognition for video content development
KR101678389B1 (ko) * 2014-02-28 2016-11-22 엔트릭스 주식회사 클라우드 스트리밍 기반의 영상데이터 제공 방법, 이를 위한 장치 및 시스템
US20150254512A1 (en) * 2014-03-05 2015-09-10 Lockheed Martin Corporation Knowledge-based application of processes to media
US10671947B2 (en) * 2014-03-07 2020-06-02 Netflix, Inc. Distributing tasks to workers in a crowd-sourcing workforce
WO2015135805A1 (en) * 2014-03-10 2015-09-17 Alcatel Lucent Dynamic content delivery in a multiscreen digital televison environment
US20150281784A1 (en) * 2014-03-18 2015-10-01 Vixs Systems, Inc. E-reading system with interest-based recommendations and methods for use therewith
US9451325B2 (en) * 2014-03-31 2016-09-20 Samarth Desai System and method for targeted advertising
US9866884B2 (en) * 2014-04-10 2018-01-09 Verizon Patent And Licensing Inc. Social television system
KR20150121889A (ko) * 2014-04-22 2015-10-30 에스케이플래닛 주식회사 재생 음악 관련 이미지 제공 장치 및 이를 이용한 방법
US9723374B2 (en) * 2014-04-23 2017-08-01 Google Inc. Programmatically determining when credits appear during a video in order to provide supplemental information
US9491496B2 (en) * 2014-05-01 2016-11-08 Verizon Patent And Licensing Inc. Systems and methods for delivering content to a media content access device
US10638194B2 (en) * 2014-05-06 2020-04-28 At&T Intellectual Property I, L.P. Embedding interactive objects into a video session
US10248979B2 (en) 2014-05-12 2019-04-02 Quantify Labs, Inc. Commission allocation based on electronic information consumption
US11122315B2 (en) 2014-05-13 2021-09-14 Wideorbit Llc Systems and methods to identify video content types
US9860578B2 (en) 2014-06-25 2018-01-02 Google Inc. Methods, systems, and media for recommending collaborators of media content based on authenticated media content input
CN104113786A (zh) * 2014-06-26 2014-10-22 小米科技有限责任公司 信息获取方法及装置
US20150382077A1 (en) * 2014-06-26 2015-12-31 Xiaomi Inc. Method and terminal device for acquiring information
US9451581B1 (en) * 2014-07-09 2016-09-20 Google Inc. Providing commercial information in a geographic application
US10621223B2 (en) * 2014-07-11 2020-04-14 Netflix, Inc. Systems and methods for presenting content and representations of content according to developmental stage
US10552684B2 (en) * 2014-07-11 2020-02-04 Iomniscient Pty Ltd Image management system
US10152479B1 (en) * 2014-08-01 2018-12-11 Google Llc Selecting representative media items based on match information
US20160063589A1 (en) * 2014-08-29 2016-03-03 Shelly Xu Apparatus and method for smart photography
US9189514B1 (en) 2014-09-04 2015-11-17 Lucas J. Myslinski Optimized fact checking method and system
WO2016044321A1 (en) 2014-09-16 2016-03-24 Min Tang Integration of domain information into state transitions of a finite state transducer for natural language processing
EP3195145A4 (en) 2014-09-16 2018-01-24 VoiceBox Technologies Corporation Voice commerce
TWI535279B (zh) * 2014-09-25 2016-05-21 財團法人資訊工業策進會 電視節目導購系統及其方法
US9990653B1 (en) 2014-09-29 2018-06-05 Google Llc Systems and methods for serving online content based on user engagement duration
US9251013B1 (en) 2014-09-30 2016-02-02 Bertram Capital Management, Llc Social log file collaboration and annotation
US9747896B2 (en) 2014-10-15 2017-08-29 Voicebox Technologies Corporation System and method for providing follow-up responses to prior natural language inputs of a user
US11783382B2 (en) 2014-10-22 2023-10-10 Comcast Cable Communications, Llc Systems and methods for curating content metadata
US10140379B2 (en) 2014-10-27 2018-11-27 Chegg, Inc. Automated lecture deconstruction
US10250951B2 (en) * 2014-10-27 2019-04-02 Adobe Inc. Systems and methods for planning, executing, and reporting a strategic advertising campaign for television
US20160119689A1 (en) 2014-10-27 2016-04-28 Tubemogul, Inc. Systems and Methods for Planning and Executing an Advertising Campaign Targeting TV Viewers and Digital Media Viewers Across Formats and Screen Types
US10825069B2 (en) 2014-11-14 2020-11-03 The Joan and Irwin Jacobs Technion-Cornell Institute System and method for intuitive content browsing
WO2016077714A2 (en) 2014-11-14 2016-05-19 The Joan and Irwin Jacobs Technion-Cornell Innovation Institute An inventory management system and method thereof
US10431214B2 (en) 2014-11-26 2019-10-01 Voicebox Technologies Corporation System and method of determining a domain and/or an action related to a natural language input
US10614799B2 (en) 2014-11-26 2020-04-07 Voicebox Technologies Corporation System and method of providing intent predictions for an utterance prior to a system detection of an end of the utterance
JP6929219B2 (ja) 2014-11-30 2021-09-01 ドルビー ラボラトリーズ ライセンシング コーポレイション ソーシャルメディアにリンクした大型劇場設計
US9551161B2 (en) 2014-11-30 2017-01-24 Dolby Laboratories Licensing Corporation Theater entrance
CN107003019B (zh) * 2014-12-01 2020-09-04 3M创新有限公司 用于预测hvac过滤器更换的系统和方法
KR102292908B1 (ko) * 2014-12-02 2021-08-25 삼성전자주식회사 전자 장치 및 전자 장치에서의 서비스 제공 방법
US9405936B2 (en) * 2014-12-16 2016-08-02 Nxp B.V. Code integrity protection by computing target addresses from checksums
US9705709B2 (en) * 2014-12-22 2017-07-11 Exara, Inc. Recipient-driven traffic optimizing overlay systems and methods
US11240349B2 (en) * 2014-12-31 2022-02-01 Ebay Inc. Multimodal content recognition and contextual advertising and content delivery
KR20160085076A (ko) * 2015-01-07 2016-07-15 삼성전자주식회사 콘텐츠를 제공하는 방송 서버를 판단하는 방법 및 이를 제공하는 전자 장치
US9929824B2 (en) 2015-01-26 2018-03-27 Timecode Systems Limited Networked programmable master clock base stations
WO2016123495A1 (en) 2015-01-30 2016-08-04 Vizio Inscape Technologies, Llc Methods for identifying video segments and displaying option to view from an alternative source and/or on an alternative device
US20160260108A1 (en) * 2015-03-05 2016-09-08 David Brian Bracewell Occasion-based consumer analytics
US11550993B2 (en) 2015-03-08 2023-01-10 Microsoft Technology Licensing, Llc Ink experience for images
US10328336B1 (en) * 2015-03-13 2019-06-25 Amazon Technologies, Inc. Concurrent game functionality and video content
US10325212B1 (en) 2015-03-24 2019-06-18 InsideView Technologies, Inc. Predictive intelligent softbots on the cloud
US9924224B2 (en) 2015-04-03 2018-03-20 The Nielsen Company (Us), Llc Methods and apparatus to determine a state of a media presentation device
US20160293032A1 (en) * 2015-04-03 2016-10-06 Drexel University Video Instruction Methods and Devices
CA2982797C (en) 2015-04-17 2023-03-14 Inscape Data, Inc. Systems and methods for reducing data density in large datasets
KR101698558B1 (ko) * 2015-05-08 2017-01-23 네이버 주식회사 컨텐츠에 링크 정보를 등록하는 서비스 방법 및 시스템
US9936250B2 (en) 2015-05-19 2018-04-03 The Nielsen Company (Us), Llc Methods and apparatus to adjust content presented to an individual
US9762965B2 (en) 2015-05-29 2017-09-12 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
US10085048B2 (en) 2015-06-07 2018-09-25 Apple Inc. Customizing supplemental content delivery
AU2016274496B2 (en) 2015-06-08 2019-12-05 Wideorbit Llc Content management and provisioning system
US10671234B2 (en) * 2015-06-24 2020-06-02 Spotify Ab Method and an electronic device for performing playback of streamed media including related media content
US10021156B2 (en) 2015-06-24 2018-07-10 Spotify Ab Method and an electronic device for performing playback and sharing of streamed media
US9848222B2 (en) 2015-07-15 2017-12-19 The Nielsen Company (Us), Llc Methods and apparatus to detect spillover
CN108351879B (zh) 2015-07-16 2022-02-18 构造数据有限责任公司 用于提高识别媒体段的效率的划分搜索索引的系统和方法
US10080062B2 (en) 2015-07-16 2018-09-18 Inscape Data, Inc. Optimizing media fingerprint retention to improve system resource utilization
CN108337912A (zh) 2015-07-16 2018-07-27 构造数据有限责任公司 对视频段的未来收看的预测以优化系统资源利用
CA3216076A1 (en) 2015-07-16 2017-01-19 Inscape Data, Inc. Detection of common media segments
GB201513196D0 (en) * 2015-07-27 2015-09-09 Microsoft Technology Licensing Llc Media device
KR102326057B1 (ko) * 2015-08-03 2021-11-12 현대모비스 주식회사 주차 지원 장치 및 그 제어 방법
US9986149B2 (en) * 2015-08-14 2018-05-29 International Business Machines Corporation Determining settings of a camera apparatus
US10963925B2 (en) * 2015-08-25 2021-03-30 Seilas PHILLIPS Product placement, purchase and information from within streaming or other content
US10320797B2 (en) 2015-09-25 2019-06-11 International Business Machines Corporation Enabling a multi-dimensional collaborative effort system
US10120552B2 (en) * 2015-09-25 2018-11-06 International Business Machines Corporation Annotating collaborative content to facilitate mining key content as a runbook
CN107710197B (zh) 2015-09-28 2021-08-17 谷歌有限责任公司 在通信网络上共享图像和图像相册
US9866732B2 (en) 2015-10-12 2018-01-09 Timecode Systems Limited Synchronizing data between personal and timecode devices
US10742733B2 (en) 2015-10-12 2020-08-11 Timecode Systems Limited Synchronizing data between media devices
EP3157239B1 (en) 2015-10-12 2020-02-12 Timecode Systems Limited Synchronizing media devices
US10063637B2 (en) 2015-10-12 2018-08-28 Timecode Systems Limited Synchronizing data between personal and timecode devices
CN105912309A (zh) * 2015-10-30 2016-08-31 乐视移动智能信息技术（北京）有限公司 一种在应用程序窗口禁止通知的方法及装置
US9596502B1 (en) 2015-12-21 2017-03-14 Max Abecassis Integration of multiple synchronization methodologies
US9516373B1 (en) 2015-12-21 2016-12-06 Max Abecassis Presets of synchronized second screen functions
US10356493B2 (en) * 2015-12-22 2019-07-16 Google Llc Methods, systems, and media for presenting interactive elements within video content
US10314510B2 (en) * 2015-12-30 2019-06-11 The Nielsen Company (Us), Llc Determining intensity of a biological response to a presentation
US11222064B2 (en) * 2015-12-31 2022-01-11 Ebay Inc. Generating structured queries from images
KR101871340B1 (ko) * 2015-12-31 2018-06-27 충남대학교산학협력단 평가지표 자율제안에 의한 연구개발과제 선정 시스템
US10838613B2 (en) * 2016-02-17 2020-11-17 Trufan Llc Consumer electronic entertainment and display system
US11750867B2 (en) * 2016-03-16 2023-09-05 Disney Enterprises, Inc. Systems and methods for determining and distributing fees associated with curated video clips
US20170272800A1 (en) * 2016-03-21 2017-09-21 Le Holdings (Beijing) Co., Ltd. Method for bullet screen pushing and electronic device
US10225309B1 (en) * 2016-03-22 2019-03-05 Amazon Technologies, Inc. Monitoring of media pipeline health using tracing
US10432685B2 (en) * 2016-05-31 2019-10-01 Brightcove, Inc. Limiting key request rates for streaming media
CN107483970B (zh) * 2016-06-08 2020-09-18 华为技术有限公司 一种确定热门直播视频的方法及设备
US10958695B2 (en) 2016-06-21 2021-03-23 Google Llc Methods, systems, and media for recommending content based on network conditions
US10743053B2 (en) * 2016-07-09 2020-08-11 N. Dilip Venkatraman Method and system for real time, dynamic, adaptive and non-sequential stitching of clips of videos
US10516909B2 (en) * 2016-07-09 2019-12-24 N. Dilip Venkatraman Method and system for recommending dynamic, adaptive and non-sequentially assembled videos
US10085049B2 (en) 2016-07-09 2018-09-25 N. Dilip Venkatraman Method and system for serving advertisements during streaming of dynamic, adaptive and non-sequentially assembled video
US10659505B2 (en) 2016-07-09 2020-05-19 N. Dilip Venkatraman Method and system for navigation between segments of real time, adaptive and non-sequentially assembled video
US10455296B2 (en) 2016-07-21 2019-10-22 Newblue, Inc. Intelligent title cache system
US10331784B2 (en) 2016-07-29 2019-06-25 Voicebox Technologies Corporation System and method of disambiguating natural language processing requests
US10936695B2 (en) * 2016-08-02 2021-03-02 International Business Machines Corporation Collaboration system to share tailored information with social networks
US11405696B2 (en) * 2016-08-17 2022-08-02 International Business Machines Corporation System and method for targeting mass media ads on the television to given physical locations using online activity profiles at the locations
EP3502924B1 (en) * 2016-08-18 2020-10-21 Tagsonomy, S.L. Process for generating a database linked to an audiovisual content through different time references
US10205794B2 (en) * 2016-09-08 2019-02-12 International Business Machines Corporation Enhancing digital media with supplemental contextually relevant content
US10448115B1 (en) * 2016-09-28 2019-10-15 Amazon Technologies, Inc. Speech recognition for localized content
US10116716B2 (en) * 2016-11-01 2018-10-30 International Business Machines Corporation Real time optimized content delivery framework
US10362365B2 (en) * 2016-11-03 2019-07-23 Ravi Guides, Inc. Systems and methods for managing an interactive session in an interactive media guidance application
CN108184143B (zh) * 2016-12-08 2020-12-11 腾讯科技（深圳）有限公司 获取资源的方法及装置
US11709996B2 (en) * 2016-12-30 2023-07-25 Meta Platforms, Inc. Suggesting captions for content
US10856016B2 (en) 2016-12-31 2020-12-01 Turner Broadcasting System, Inc. Publishing disparate live media output streams in mixed mode based on user selection
US11438658B2 (en) 2016-12-31 2022-09-06 Turner Broadcasting System, Inc. Client-side dynamic presentation of programming content in an indexed disparate live media output stream
US11546400B2 (en) 2016-12-31 2023-01-03 Turner Broadcasting System, Inc. Generating a live media segment asset
US11503352B2 (en) 2016-12-31 2022-11-15 Turner Broadcasting System, Inc. Dynamic scheduling and channel creation based on external data
US11051074B2 (en) 2016-12-31 2021-06-29 Turner Broadcasting System, Inc. Publishing disparate live media output streams using live input streams
US10645462B2 (en) 2016-12-31 2020-05-05 Turner Broadcasting System, Inc. Dynamic channel versioning in a broadcast air chain
US10701438B2 (en) 2016-12-31 2020-06-30 Turner Broadcasting System, Inc. Automatic content recognition and verification in a broadcast chain
US11470373B2 (en) 2016-12-31 2022-10-11 Turner Broadcasting System, Inc. Server-side dynamic insertion of programming content in an indexed disparate live media output stream
US10694231B2 (en) 2016-12-31 2020-06-23 Turner Broadcasting System, Inc. Dynamic channel versioning in a broadcast air chain based on user preferences
US11109086B2 (en) 2016-12-31 2021-08-31 Turner Broadcasting System, Inc. Publishing disparate live media output streams in mixed mode
US10992973B2 (en) 2016-12-31 2021-04-27 Turner Broadcasting System, Inc. Publishing a plurality of disparate live media output stream manifests using live input streams and pre-encoded media assets
US11134309B2 (en) 2016-12-31 2021-09-28 Turner Broadcasting System, Inc. Creation of channels using pre-encoded media assets
US11051061B2 (en) 2016-12-31 2021-06-29 Turner Broadcasting System, Inc. Publishing a disparate live media output stream using pre-encoded media assets
US11962821B2 (en) 2016-12-31 2024-04-16 Turner Broadcasting System, Inc. Publishing a disparate live media output stream using pre-encoded media assets
US10965967B2 (en) 2016-12-31 2021-03-30 Turner Broadcasting System, Inc. Publishing a disparate per-client live media output stream based on dynamic insertion of targeted non-programming content and customized programming content
US11038932B2 (en) 2016-12-31 2021-06-15 Turner Broadcasting System, Inc. System for establishing a shared media session for one or more client devices
US10075753B2 (en) 2016-12-31 2018-09-11 Turner Broadcasting System, Inc. Dynamic scheduling and channel creation based on user selection
US12022142B2 (en) 2016-12-31 2024-06-25 Turner Broadcasting System, Inc. Publishing a plurality of disparate live media output stream manifests using live input streams and pre-encoded media assets
US10425700B2 (en) 2016-12-31 2019-09-24 Turner Broadcasting System, Inc. Dynamic scheduling and channel creation based on real-time or near-real-time content context analysis
CN110235121B (zh) * 2017-01-30 2023-10-27 宋硕奎 用于增强型在线调研的系统和方法
US9918135B1 (en) 2017-02-07 2018-03-13 The Directv Group, Inc. Single button selection to facilitate actions in a communications network
WO2018170272A1 (en) * 2017-03-16 2018-09-20 Timothy Joseph Erskine Automatically controlling a multiplicity of televisions over a network by the outputs of a subset of interfaces
KR102690528B1 (ko) 2017-04-06 2024-07-30 인스케이프 데이터, 인코포레이티드 미디어 시청 데이터를 사용하여 디바이스 맵의 정확도를 향상시키는 시스템 및 방법
WO2018212815A1 (en) 2017-05-17 2018-11-22 Google Llc Automatic image sharing with designated users over a communication network
US10827220B2 (en) 2017-05-25 2020-11-03 Turner Broadcasting System, Inc. Client-side playback of personalized media content generated dynamically for event opportunities in programming media content
US10701413B2 (en) * 2017-06-05 2020-06-30 Disney Enterprises, Inc. Real-time sub-second download and transcode of a video stream
US10652170B2 (en) 2017-06-09 2020-05-12 Google Llc Modification of audio-based computer program output
WO2018226247A1 (en) * 2017-06-09 2018-12-13 Google Llc Modification of audio-based computer program output
US10681120B2 (en) * 2017-07-25 2020-06-09 Uber Technologies, Inc. Load balancing sticky session routing
US10552680B2 (en) * 2017-08-08 2020-02-04 Here Global B.V. Method, apparatus and computer program product for disambiguation of points of-interest in a field of view
US11599370B2 (en) * 2017-09-01 2023-03-07 Automobility Distribution Inc. Device control app with advertising
SE2030075A1 (en) 2017-09-11 2020-03-11 Futuri Media Llc System and method for production, distribution and archival of content
US10733262B2 (en) 2017-10-05 2020-08-04 Adobe Inc. Attribute control for updating digital content in a digital medium environment
US10657118B2 (en) 2017-10-05 2020-05-19 Adobe Inc. Update basis for updating digital content in a digital medium environment
US10685375B2 (en) 2017-10-12 2020-06-16 Adobe Inc. Digital media environment for analysis of components of content in a digital marketing campaign
US11551257B2 (en) 2017-10-12 2023-01-10 Adobe Inc. Digital media environment for analysis of audience segments in a digital marketing campaign
US20190114680A1 (en) * 2017-10-13 2019-04-18 Adobe Systems Incorporated Customized Placement of Digital Marketing Content in a Digital Video
US11544743B2 (en) 2017-10-16 2023-01-03 Adobe Inc. Digital content control based on shared machine learning properties
US10795647B2 (en) 2017-10-16 2020-10-06 Adobe, Inc. Application digital content control using an embedded machine learning module
US11397511B1 (en) * 2017-10-18 2022-07-26 Nationwide Mutual Insurance Company System and method for implementing improved user interface
US10853766B2 (en) 2017-11-01 2020-12-01 Adobe Inc. Creative brief schema
US10991012B2 (en) 2017-11-01 2021-04-27 Adobe Inc. Creative brief-based content creation
JP2018032441A (ja) * 2017-11-20 2018-03-01 ヤフー株式会社 サービス提供装置、サービス提供方法及びサービス提供プログラム
EP3499901A1 (en) * 2017-12-12 2019-06-19 Spotify AB Methods, computer server systems and media devices for media streaming
US10897643B2 (en) * 2017-12-28 2021-01-19 Yu-Sang Hsiao Content streaming platform with dynamically arranged media content
US20180301170A1 (en) * 2018-01-27 2018-10-18 Iman Rezanezhad Gatabi Computer-Implemented Methods to Share Audios and Videos
US11893638B2 (en) * 2018-02-07 2024-02-06 Verasity Limited S.R.L. System and method for content stake via blockchain
US11139977B2 (en) * 2018-02-07 2021-10-05 Verasity Limited System and method for proof of view via blockchain
US10956931B2 (en) * 2018-02-07 2021-03-23 Verasity Foundation Company Limited System and method for proof of view via blockchain
US11698927B2 (en) * 2018-05-16 2023-07-11 Sony Interactive Entertainment LLC Contextual digital media processing systems and methods
US11323086B2 (en) * 2018-05-31 2022-05-03 Comcast Cable Communications, Llc Content audio adjustment
CN108965909B (zh) * 2018-08-01 2021-02-02 中国联合网络通信集团有限公司 一种冷门视频评估方法和系统
US20200073925A1 (en) * 2018-09-05 2020-03-05 Stephen Londy Shapiro Method and system for generating a website from collected content
US11423920B2 (en) * 2018-09-28 2022-08-23 Rovi Guides, Inc. Methods and systems for suppressing vocal tracks
CN111061912A (zh) * 2018-10-16 2020-04-24 华为技术有限公司 一种处理视频文件的方法及电子设备
KR101994592B1 (ko) * 2018-10-19 2019-06-28 인하대학교 산학협력단 비디오 콘텐츠의 메타데이터 자동 생성 방법 및 시스템
CN110166842B (zh) * 2018-11-19 2020-10-16 深圳市腾讯信息技术有限公司 一种视频文件操作方法、装置和存储介质
US11544320B2 (en) * 2018-11-29 2023-01-03 Entigenlogic Llc Image processing utilizing an entigen construct
US11082734B2 (en) 2018-12-21 2021-08-03 Turner Broadcasting System, Inc. Publishing a disparate live media output stream that complies with distribution format regulations
US10880606B2 (en) 2018-12-21 2020-12-29 Turner Broadcasting System, Inc. Disparate live media output stream playout and broadcast distribution
US10873774B2 (en) 2018-12-22 2020-12-22 Turner Broadcasting System, Inc. Publishing a disparate live media output stream manifest that includes one or more media segments corresponding to key events
US11645326B2 (en) 2019-01-22 2023-05-09 Harman International Industries, Incorporated Automatic reference finding in audiovisual scenes
US10638206B1 (en) 2019-01-28 2020-04-28 International Business Machines Corporation Video annotation based on social media trends
CN111726692B (zh) * 2019-03-22 2022-09-09 北京图音数码科技有限公司 音视图数据的互动播放方法
US11057652B1 (en) 2019-04-30 2021-07-06 Amazon Technologies, Inc. Adjacent content classification and targeting
US11482005B2 (en) 2019-05-28 2022-10-25 Apple Inc. Techniques for secure video frame management
US11082724B2 (en) 2019-08-21 2021-08-03 Dish Network L.L.C. Systems and methods for targeted advertisement insertion into a program content stream
WO2021040766A1 (en) * 2019-08-26 2021-03-04 Acxiom Llc Primary tagging in a data stream
US11800202B2 (en) * 2019-09-10 2023-10-24 Dish Network L.L.C. Systems and methods for generating supplemental content for a program content stream
US11829723B2 (en) 2019-10-17 2023-11-28 Microsoft Technology Licensing, Llc System for predicting document reuse
US10990624B1 (en) 2019-10-21 2021-04-27 Panasonic Corporation Methods and systems for dynamically processing media content on transportation vehicles
US11113535B2 (en) 2019-11-08 2021-09-07 Second Spectrum, Inc. Determining tactical relevance and similarity of video sequences
US11615772B2 (en) * 2020-01-31 2023-03-28 Obeebo Labs Ltd. Systems, devices, and methods for musical catalog amplification services
KR102264059B1 (ko) * 2020-03-12 2021-06-14 월드퍼스트테크 주식회사 Ott 환경에 적합한 전자 지급 결제 시스템 및 방법
US11259085B2 (en) * 2020-05-08 2022-02-22 At&T Intellectual Property I, L.P. Generating personalized synthesized media
US11295746B2 (en) * 2020-07-15 2022-04-05 Gracenote, Inc. System and method for multi-modal podcast summarization
EP3944242A1 (en) * 2020-07-22 2022-01-26 Idomoo Ltd A system and method to customizing video
US11544695B2 (en) * 2020-09-10 2023-01-03 Block, Inc. Transaction identification by comparison of merchant transaction data and context data
CA3200392A1 (en) * 2020-12-05 2022-06-09 Scott Baker Media processing methods and systems
US20220191573A1 (en) * 2020-12-16 2022-06-16 Raymond Gladwell Automated video generation
US20220222289A1 (en) * 2021-01-14 2022-07-14 Microsoft Technology Licensing, Llc Automatic embedding of additional content to articles
WO2022164547A1 (en) * 2021-01-26 2022-08-04 Microsoft Technology Licensing, Llc Collaborative content recommendation platform
US11516539B2 (en) 2021-03-01 2022-11-29 Comcast Cable Communications, Llc Systems and methods for providing contextually relevant information
US11553255B2 (en) 2021-03-10 2023-01-10 Sony Interactive Entertainment LLC Systems and methods for real time fact checking during stream viewing
US11546669B2 (en) * 2021-03-10 2023-01-03 Sony Interactive Entertainment LLC Systems and methods for stream viewing with experts
US11823253B2 (en) * 2021-03-26 2023-11-21 Avec LLC Systems and methods for purchasing items or merchandise within streaming media platforms
US20220337911A1 (en) * 2021-04-15 2022-10-20 Shopify Inc. Systems and methods for customizing live video streams
US11665389B2 (en) * 2021-06-30 2023-05-30 Rovi Guides, Inc. Systems and methods for highlighting content within media assets
CN113721810A (zh) * 2021-09-08 2021-11-30 北京字跳网络技术有限公司 显示方法、装置、设备及存储介质
US11871091B2 (en) * 2021-10-22 2024-01-09 Rovi Guides, Inc. Dynamically generating and highlighting references to content segments in videos related to a main video that is being watched
US11936941B2 (en) 2021-10-22 2024-03-19 Rovi Guides, Inc. Dynamically generating and highlighting references to content segments in videos related to a main video that is being watched
US11829239B2 (en) 2021-11-17 2023-11-28 Adobe Inc. Managing machine learning model reconstruction
CN118303030A (zh) * 2021-11-23 2024-07-05 纳格拉影像有限公司 自动视频剪辑非同质化通证（nft）生成
US20230196425A1 (en) * 2021-12-21 2023-06-22 Paypal, Inc. Linking user behaviors to tracked data consumption using digital tokens
US20230276109A1 (en) * 2022-02-25 2023-08-31 Source Digital, Inc. Curating non-fungible token collections in relation to audiovisual content
US20230298089A1 (en) * 2022-03-16 2023-09-21 Buy Z, Llc Facilitating purchasing from within streaming videos
GB2619550A (en) * 2022-06-10 2023-12-13 Sony Interactive Entertainment Europe Ltd Systems and methods for contolling content streams

Family Cites Families (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5446919A (en) * 1990-02-20 1995-08-29 Wilkins; Jeff K. Communication system and method with demographically or psychographically defined audiences
US6240555B1 (en) * 1996-03-29 2001-05-29 Microsoft Corporation Interactive entertainment system for presenting supplemental interactive content together with continuous video programs
US20030093790A1 (en) * 2000-03-28 2003-05-15 Logan James D. Audio and video program recording, editing and playback systems using metadata
US6567980B1 (en) 1997-08-14 2003-05-20 Virage, Inc. Video cataloger system with hyperlinked output
US6360234B2 (en) 1997-08-14 2002-03-19 Virage, Inc. Video cataloger system with synchronized encoders
IL122194A0 (en) * 1997-11-13 1998-06-15 Scidel Technologies Ltd Method and apparatus for personalized images inserted into a video stream
US6816201B1 (en) 1998-01-13 2004-11-09 Mitsubishi Digital Electronics America, Inc. XDS enhancement system
US6799298B2 (en) 1998-03-11 2004-09-28 Overture Services, Inc. Technique for locating an item of interest within a stored representation of data
US6154771A (en) 1998-06-01 2000-11-28 Mediastra, Inc. Real-time receipt, decompression and play of compressed streaming video/hypervideo; with thumbnail display of past scenes and with replay, hyperlinking and/or recording permissively intiated retrospectively
US6269366B1 (en) * 1998-06-24 2001-07-31 Eastman Kodak Company Method for randomly combining images with annotations
WO2000016221A1 (en) 1998-09-15 2000-03-23 Microsoft Corporation Interactive playlist generation using annotations
US6357042B2 (en) 1998-09-16 2002-03-12 Anand Srinivasan Method and apparatus for multiplexing separately-authored metadata for insertion into a video data stream
US11109114B2 (en) * 2001-04-18 2021-08-31 Grass Valley Canada Advertisement management method, system, and computer program product
US6466275B1 (en) 1999-04-16 2002-10-15 Sportvision, Inc. Enhancing a video of an event at a remote location using data acquired at the event
US7082162B2 (en) 1999-04-17 2006-07-25 Pts Corporation Segment-based encoding system including segment-specific metadata
US6842190B1 (en) 1999-07-06 2005-01-11 Intel Corporation Video bit stream extension with supplementary content information to aid in subsequent video processing
DE60045248D1 (de) 1999-09-20 2010-12-30 Tivo Inc Untertitel-etikettiersystem
US20020073423A1 (en) * 1999-12-14 2002-06-13 Haig Krakirian System, method and program product for displaying simultaneously video content and supplemental information without obstructing video content
KR20000036648A (ko) * 2000-02-10 2000-07-05 손원일 광고 정보 제공 방법 및 장치
US7367042B1 (en) 2000-02-29 2008-04-29 Goldpocket Interactive, Inc. Method and apparatus for hyperlinking in a television broadcast
US7284064B1 (en) 2000-03-21 2007-10-16 Intel Corporation Method and apparatus to determine broadcast content and scheduling in a broadcast system
US20060015925A1 (en) 2000-03-28 2006-01-19 Gotuit Media Corp Sales presentation video on demand system
US7162696B2 (en) 2000-06-08 2007-01-09 Franz Wakefield Method and system for creating, using and modifying multifunctional website hot spots
US6864886B1 (en) 2000-08-10 2005-03-08 Sportvision, Inc. Enhancing video using a virtual surface
WO2002019719A1 (en) 2000-08-30 2002-03-07 Watchpoint Media, Inc. A method and apparatus for hyperlinking in a television broadcast
US7284008B2 (en) 2000-08-30 2007-10-16 Kontera Technologies, Inc. Dynamic document context mark-up technique implemented over a computer network
WO2002032139A2 (en) * 2000-10-11 2002-04-18 United Video Properties, Inc. Systems and methods for supplementing on-demand media
US20020083468A1 (en) 2000-11-16 2002-06-27 Dudkiewicz Gil Gavriel System and method for generating metadata for segments of a video program
JP4442027B2 (ja) * 2000-12-05 2010-03-31 ソニー株式会社 通信システムおよび通信方法
AU2002311744A1 (en) 2001-01-04 2002-10-08 3Cx, Inc. Authoring platform for synchronized multimedia presentation
US20020108112A1 (en) 2001-02-02 2002-08-08 Ensequence, Inc. System and method for thematically analyzing and annotating an audio-visual sequence
US20020170068A1 (en) 2001-03-19 2002-11-14 Rafey Richter A. Virtual and condensed television programs
US6876970B1 (en) 2001-06-13 2005-04-05 Bellsouth Intellectual Property Corporation Voice-activated tuning of broadcast channels
JP2003022346A (ja) 2001-07-05 2003-01-24 Fujitsu Ltd 情報表示方法および装置、媒体、プログラム
US20030023562A1 (en) * 2001-07-25 2003-01-30 Steven Bailey Secure records storage and retrieval system and method
US7068309B2 (en) 2001-10-09 2006-06-27 Microsoft Corp. Image exchange with image annotation
US8261306B2 (en) * 2001-12-11 2012-09-04 Koninklijke Philips Electronics N.V. System for and method of shopping through television
AU2002357397A1 (en) 2001-12-28 2003-07-24 Findwhat Com System and method for pay for performance advertising in general media
US9715500B2 (en) * 2004-04-27 2017-07-25 Apple Inc. Method and system for sharing playlists
US20060026067A1 (en) * 2002-06-14 2006-02-02 Nicholas Frank C Method and system for providing network based target advertising and encapsulation
EP1536638A4 (en) 2002-06-24 2005-11-09 Matsushita Electric Ind Co Ltd METADATA PRODUCTION DEVICE, CREATION METHOD DAFUR AND TESTING DEVICE
KR20040033766A (ko) 2002-10-15 2004-04-28 케이투아이엠에스 인터넷상에서 비디오 메타 데이터를 이용하여 비디오요약과 동영상 부가정보를 서비스하는 방법
US20040098743A1 (en) * 2002-11-15 2004-05-20 Koninklijke Philips Electronics N.V. Prediction of ratings for shows not yet shown
US7904797B2 (en) * 2003-01-21 2011-03-08 Microsoft Corporation Rapid media group annotation
US20050203800A1 (en) * 2003-01-22 2005-09-15 Duane Sweeney System and method for compounded marketing
JP2004304792A (ja) 2003-03-28 2004-10-28 Eastman Kodak Co 観客測定基準に基づいてデジタルシネマコンテンツを供給する方法
US7512885B2 (en) 2003-03-31 2009-03-31 Avid Technology, Inc. Graphical user interface for navigating and displaying relationships among media data and metadata
US8214256B2 (en) 2003-09-15 2012-07-03 Time Warner Cable Inc. System and method for advertisement delivery within a video time shifting architecture
WO2005034503A2 (en) * 2003-10-02 2005-04-14 Tivo Inc. Modifying commercials for multi-speed playback
US20050097451A1 (en) * 2003-11-03 2005-05-05 Cormack Christopher J. Annotating media content with user-specified information
US20050246625A1 (en) 2004-04-30 2005-11-03 Ibm Corporation Non-linear example ordering with cached lexicon and optional detail-on-demand in digital annotation
US20060041926A1 (en) 2004-04-30 2006-02-23 Vulcan Inc. Voice control of multimedia content
US10032196B2 (en) 2004-05-14 2018-07-24 Da Ip Corp. Product and presentation placement system and method
US20060123451A1 (en) * 2004-12-07 2006-06-08 Showtime Networks Inc. Enhanced content in an on-demand environment
US20060179453A1 (en) 2005-02-07 2006-08-10 Microsoft Corporation Image and other analysis for contextual ads
JP2006311462A (ja) * 2005-05-02 2006-11-09 Toshiba Corp コンテンツ検索装置及びその方法
US9286388B2 (en) 2005-08-04 2016-03-15 Time Warner Cable Enterprises Llc Method and apparatus for context-specific content delivery
US20070061309A1 (en) * 2005-08-05 2007-03-15 Realnetworks, Inc. System and method for color-based searching of media content
US7925973B2 (en) 2005-08-12 2011-04-12 Brightcove, Inc. Distribution of content
US20070078714A1 (en) 2005-09-30 2007-04-05 Yahoo! Inc. Automatically matching advertisements to media files
US20070077921A1 (en) 2005-09-30 2007-04-05 Yahoo! Inc. Pushing podcasts to mobile devices
US20070083611A1 (en) 2005-10-07 2007-04-12 Microsoft Corporation Contextual multimedia advertisement presentation
US7539951B1 (en) 2008-02-07 2009-05-26 International Business Machines Corporation Method and system of using navigation area controls and indicators for non-hierarchies

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018117303A1 (ko) * 2016-12-22 2018-06-28 주식회사 큐버 비디오 클립간 중간영상 ppl 편집 플랫폼 제공 방법
KR20180025880A (ko) * 2018-02-09 2018-03-09 엠랩 주식회사 스트리밍 미디어에 코멘트를 맵핑하는 시스템 및 방법
KR102037183B1 (ko) 2018-02-09 2019-10-28 엠랩 주식회사 스트리밍 미디어에 코멘트를 맵핑하는 시스템 및 방법
WO2019204372A1 (en) * 2018-04-17 2019-10-24 Edx Technologies, Inc. R-snap for production of augmented realities

Also Published As

Publication number Publication date
WO2007115224A3 (en) 2008-04-24
US20140223475A1 (en) 2014-08-07
WO2007115224A2 (en) 2007-10-11
EP2011017A4 (en) 2010-07-07
US20070250901A1 (en) 2007-10-25
JP2009532956A (ja) 2009-09-10
US8645991B2 (en) 2014-02-04
EP2011017A2 (en) 2009-01-07

Similar Documents

Publication Publication Date Title
JP5649303B2 (ja) メディア・ストリームに注釈を付ける方法および装置
US10869103B2 (en) Process and apparatus for advertising component placement
US10796343B2 (en) Systems and methods for augmenting digital content
KR101419976B1 (ko) 분산형 라이브 멀티미디어 머니타이제이션 메커니즘 및 네트워크
US9899063B2 (en) System and methods for providing user generated video reviews
US9066130B1 (en) Standardizing video content for use in generating an advertising overlay
US8290982B2 (en) Methods for managing content for brand related media
TWI405139B (zh) 品牌中心網站之內容評等方法
US20080262908A1 (en) Methods for promoting brand-centric advertising and managing the same
EP3712832A1 (en) Computerized method and system for providing customized entertainment content
KR20160054484A (ko) 라이브 비디오 콘텐츠의 동적 바인딩
WO2005003899A2 (en) Method, system and apparatus for information delivery
WO2014142758A1 (en) An interactive system for video customization and delivery
CN101479687A (zh) 用于在机顶盒的用户对话中设置广告的方法和设备
US20080262907A1 (en) Systems and methods for managing a brand universe for user information, brand related marketing and user interactivity
US20080262858A1 (en) Methods for Establishing Brand-Centric Websites From Bi-Directionally Linked Content
JPWO2016035424A1 (ja) 情報処理装置、情報処理方法及びプログラム
WO2014142301A1 (ja) 情報提供システム、サーバ装置、動画表示装置、情報提供方法、およびプログラム
WO2019183061A1 (en) Object identification in social media post
US20220368994A1 (en) Method and apparatus for interactive television guides and program rules
Ennis et al. Understanding Fans and Their Consumption of Sport
Major Powering Premium Content: An analysis of Ooyala's Online Video Distribution Services
KR20230050656A (ko) 적응형 아이템 소비 플랫폼, 그 시스템 및 운영 방법

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100323

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100323

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120528

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120604

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20120904

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20120911

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20130221

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130621

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20130621

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20130801

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20131101

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140305

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140310

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140404

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140409

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140501

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140513

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140916

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141111

R150 Certificate of patent or registration of utility model

Ref document number: 5649303

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees