[go: up one dir, main page]

WO2023166910A1 - 情報処理装置、情報処理方法及び情報処理プログラム - Google Patents

情報処理装置、情報処理方法及び情報処理プログラム Download PDF

Info

Publication number
WO2023166910A1
WO2023166910A1 PCT/JP2023/003589 JP2023003589W WO2023166910A1 WO 2023166910 A1 WO2023166910 A1 WO 2023166910A1 JP 2023003589 W JP2023003589 W JP 2023003589W WO 2023166910 A1 WO2023166910 A1 WO 2023166910A1
Authority
WO
WIPO (PCT)
Prior art keywords
makeup
face image
user
information
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2023/003589
Other languages
English (en)
French (fr)
Inventor
卯太弘 乾
敢 家田
文紀 安藤
駿矢 吉岡
美幸 保利
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zozo Inc
Original Assignee
Zozo Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zozo Inc filed Critical Zozo Inc
Priority to CA3253788A priority Critical patent/CA3253788A1/en
Priority to CN202380024828.8A priority patent/CN118805195A/zh
Priority to US18/842,557 priority patent/US20250182359A1/en
Priority to EP23763172.6A priority patent/EP4488921A4/en
Publication of WO2023166910A1 publication Critical patent/WO2023166910A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/01—Customer relationship services
    • G06Q30/015—Providing customer assistance, e.g. assisting a customer within a business location or via helpdesk
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207—Discounts or incentives, e.g. coupons or rebates
    • G06Q30/0214—Referral reward systems
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0621—Electronic shopping [e-shopping] by configuring or customising goods or services
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0623—Electronic shopping [e-shopping] by investigating goods or services
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0631—Recommending goods or services
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Electronic shopping [e-shopping] utilising user interfaces specially adapted for shopping
    • G06Q30/0643—Electronic shopping [e-shopping] utilising user interfaces specially adapted for shopping graphically representing goods, e.g. 3D product representation
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Electronic shopping [e-shopping] utilising user interfaces specially adapted for shopping
    • G06Q30/0643—Electronic shopping [e-shopping] utilising user interfaces specially adapted for shopping graphically representing goods, e.g. 3D product representation
    • G06Q30/06431—Electronic shopping [e-shopping] utilising user interfaces specially adapted for shopping graphically representing goods, e.g. 3D product representation relative to a shopper model
    • G06Q30/06432—Electronic shopping [e-shopping] utilising user interfaces specially adapted for shopping graphically representing goods, e.g. 3D product representation relative to a shopper model by virtually fitting wearable articles
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01—Social networking

Definitions

  • the present invention relates to an information processing device, an information processing method, and an information processing program.
  • This application has been made in view of the above, and aims to promote further improvement of usability for users who refer to other people's makeup.
  • An information processing apparatus includes a generation unit that generates makeup information for generating a face image in which makeup similar to the predetermined makeup is applied to the face image of a contributor wearing predetermined makeup; an application unit that applies makeup information generated from a face image selected by a user from among face images posted by contributors who meet predetermined conditions to the face image of the user; and a providing unit for providing the user with content including a face image to which makeup information is applied and content describing an article used for the makeup.
  • FIG. 1 is a diagram illustrating a configuration example of an information processing system according to an embodiment.
  • FIG. 2 is a diagram illustrating an example of information processing according to the embodiment;
  • FIG. 3 is an explanatory diagram for explaining information processing when giving a higher priority to a face image according to the embodiment.
  • FIG. 4 is a diagram illustrating a configuration example of a user terminal according to the embodiment;
  • FIG. 5 is a diagram illustrating a configuration example of a contributor terminal according to the embodiment;
  • FIG. 6 is a diagram illustrating a configuration example of an information processing apparatus according to the embodiment;
  • 7 is a diagram illustrating an example of a poster information storage unit according to the embodiment;
  • FIG. 8 is a diagram illustrating an example of a cosmetic information storage unit according to the embodiment;
  • FIG. 9 is a flowchart illustrating an example of information processing according to the embodiment;
  • FIG. 10 is a hardware configuration diagram showing an example of a computer that implements the functions of the information processing apparatus.
  • FIG. 1 is a diagram showing a configuration example of an information processing system 1 according to an embodiment.
  • the user terminal 10 is an information processing device used by a user who wants to check whether or not makeup applied to the face of another person suits him/herself.
  • a user who uses the user terminal 10 is, for example, considering purchasing cosmetics.
  • the user terminal 10 may be any device as long as it can implement the processing in the embodiment.
  • the user terminal 10 may be a device such as a smart phone, a tablet terminal, a notebook PC, a desktop PC, a mobile phone, or a PDA.
  • FIG. 2 shows a case where the user terminal 10 is a smart phone.
  • the user terminal 10 is, for example, a smart device such as a smartphone or tablet, and can communicate with any server device via a wireless communication network such as 3G to 5G (Generation) or LTE (Long Term Evolution). It is a mobile terminal device.
  • the user terminal 10 has a screen such as a liquid crystal display, which has a touch panel function. Various operations on the may be received.
  • the user terminal 10 is used by a user U11.
  • the contributor terminal 20 is an information processing device used by a contributor who provides a face image with makeup on.
  • a contributor using the contributor terminal 20 posts, for example, a face image in which makeup is completed by applying makeup to a natural face before makeup.
  • the contributor terminal 20 may be any device as long as it can implement the processing in the embodiments.
  • the contributor terminal 20 may be a device such as a smart phone, a tablet terminal, a notebook PC, a desktop PC, a mobile phone, or a PDA.
  • FIG. 2 shows a case where poster terminal 20 is a smart phone.
  • the contributor terminal 20 is, for example, a smart device such as a smartphone or a tablet, and is a mobile terminal device capable of communicating with any server device via a wireless communication network such as 3G to 5G or LTE.
  • the contributor terminal 20 is a screen such as a liquid crystal display, and has a screen having a touch panel function. Various operations on the may be received.
  • poster terminal 20 is used by poster P11 and poster P12.
  • poster terminal 20-1 and poster terminal 20-2 are poster terminals 20 of poster P11 and poster P12, respectively.
  • Information processing apparatus 100 is an information processing apparatus intended to promote further improvement of usability for users who refer to makeup of others. Such a device may be used.
  • the information processing device 100 is implemented by, for example, a server device, a cloud system, or the like.
  • the information processing device 100 is implemented by a server device, a cloud system, or the like that provides a predetermined online shopping mall for selling cosmetics.
  • FIG. 2 is a diagram showing an example of information processing of the information processing system 1 according to the embodiment.
  • processing in response to the user U11's desire to check whether or not the make-up of the poster P11 looks good on him/herself will be described.
  • the information processing apparatus 100 selects a face image selected by the user U11 from face images posted by posters such as so-called influencers whose number of followers exceeds a predetermined threshold on SNS (Social Networking Service).
  • the face images selectable by the user U11 may include a plurality of face images posted by one contributor.
  • the face image IM11 posted by the contributor P11, the face image IM12 posted by the contributor P12, and the like are included.
  • the following description assumes that the user U11 has selected the face image IM11 from the content CT11.
  • the face image displayed in the content CT11 may be selected based on any criteria. For example, a face image posted by a poster followed by user U11 may be preferentially selected.
  • the content CT11 is content on a predetermined service that manages the poster's face image.
  • the face image IM11 is the face image of the contributor P11 after applying a predetermined make-up.
  • the face image IM21 is a face image before the makeup of the contributor P11 for the face image IM11.
  • the face image IM21 may be displayed in the content CT11 together with the face image IM11, or may be displayed by an operation (eg, clicking or tapping) on the face image IM11.
  • the face image IM21 may not be displayed to the user. This eliminates the need for the contributor to reveal his true face to the user, thereby promoting the improvement of usability for the contributor.
  • the face image IM12 is a face image of the contributor P12 after a predetermined makeup has been applied.
  • the face image IM22 is the face image of the contributor P12 before makeup for the face image IM12.
  • the facial image IM22 may be displayed in the content CT11 together with the facial image IM12, or may be displayed by an operation or the like on the facial image IM12. Also, the face image IM22 may not be displayed to the user.
  • Non-Patent Document 1 As an example of a technique for generating makeup information, for example, PSGAN (Pose and Expression Robust Spatial-Aware Generative Adversarial Network) disclosed in Non-Patent Document 1, only makeup information is extracted from a face image into another A method of moving to the face can be cited (Non-Patent Document 1). This method is a method using deep learning, and can move only makeup information to another face regardless of facial expressions and poses.
  • Information processing apparatus 100 uses a technique such as PSGAN to perform makeup for generating a face image by applying makeup similar to makeup of contributor P11 used for face image IM11 selected by user U11 to the face image. Information is generated (step S102).
  • the information processing apparatus 100 applies the makeup information generated in step S102 to the face image IM1 of the user U11 using a technique such as PSGAN (step S103).
  • the facial image IM1 may be obtained in any manner.
  • the face image IM1 may be, for example, registered in advance by the user U11 and stored in an external information processing device or the own device, or may be transmitted from the user terminal 10.
  • FIG. Moreover, the face image IM1 may be selected as an application target by the user U11, or may be automatically selected as an application target.
  • the face image IM2 is a face image after application to the face image IM1.
  • step S103 information processing apparatus 100 uses information for displaying content including face image IM2 of user U11 to which makeup information is applied and content describing cosmetics (corresponding to articles) used for makeup. is transmitted to the user terminal 10 (step S104). Then, the user terminal 10 displays the content CT1 based on the information transmitted from the information processing device 100.
  • the content CT1 includes content describing the cosmetics that the contributor P11 used for makeup for the face image IM11. For example, information such as product name and price of cosmetics is included.
  • FIG. 2 shows a case where two cosmetics (PR1 and PR2) of lipstick and foundation are included, but the number of cosmetics is not particularly limited.
  • the content CT1 may include content describing a set of cosmetics used by the contributor P11 to change the facial image IM21 before makeup to a predetermined post-makeup facial image IM11.
  • the explanation content may also include operation reception information B1 for receiving an operation for accessing a predetermined electronic shopping mall where a set of cosmetics used for makeup can be purchased.
  • the operation reception information B1 may access, for example, a product page introducing a set of cosmetics, or a purchase page where a set of cosmetics is added to a cart, when an operation is received. Note that the operation reception information B1 may be integrated with the face image IM2 or other content in the explanation content. may be accessed.
  • the information processing device 100 determines whether or not the user U11 has purchased cosmetics linked to the explanation content. For example, the information processing apparatus 100 determines whether or not the user U11 has purchased a set of cosmetics including the cosmetics PR1 and the cosmetics PR2, or a part thereof, at a predetermined online shopping mall accessed by operating the operation reception information B1. . When the information processing apparatus 100 determines that the user U11 has made the purchase, the information processing apparatus 100 notifies the poster P11 who posted the face image using the makeup corresponding to the makeup information of the image IM2 that the user U11 has made the purchase. decide to give rewards according to Then, the information processing apparatus 100 performs a process for giving the contributor P11 a reward corresponding to the purchase by the user U11.
  • the information processing apparatus 100 may determine to transmit information for the contributor P11 to receive a reward corresponding to the purchase by the user U11. In this case, the information processing apparatus 100 transmits information for the contributor P11 to receive a reward corresponding to the purchase by the user U11. Further, the information processing device 100 may determine to remit the reward to the account of the poster P11. In this case, the information processing device 100 performs processing for transferring the remuneration to the account of the poster P11.
  • the content CT11 shows a case where the face image IM11, the face image IM12, or the like after predetermined makeup is displayed, but the present invention is not limited to this example.
  • a face image before makeup such as a face image IM21 or a face image IM22 may be displayed in the content CT11, and the face image after makeup may be displayed by operating the face image before makeup.
  • information processing apparatus 100 may generate makeup information to be applied to the user's face image by user U11 viewing and selecting a face image after makeup corresponding to the face image before makeup.
  • the face image IM11, the face image IM12, or the like after predetermined makeup is displayed in the content CT11, and by operating the face image after makeup, for example, the face image before makeup is displayed.
  • the present invention is not limited to this example.
  • a video of makeup applied by the contributor to change the state before makeup to the state after makeup may be displayed.
  • the makeup moving image includes, for example, face images before makeup, such as face image IM21 and face image IM22, and face images after predetermined makeup, such as face image IM11 and face image IM12.
  • the makeup moving image may be displayed in the content CT11 together with the face image after the makeup.
  • the face image before makeup such as the face image IM21 and the face image IM22
  • the face image before makeup is the face image of the contributor's bare face, but the present invention is not limited to this example.
  • a face image before makeup such as the face image IM21 or the face image IM22 is applied with a certain amount of makeup such as only lips or foundation if it is a predetermined face image before makeup such as the face image IM11 or the face image IM12. It may be a face image.
  • information processing apparatus 100 may generate makeup information that does not apply makeup information of cosmetics used for facial images before makeup, such as facial image IM21 and facial image IM22, to the facial image of the user.
  • makeup information that is applied to the user's face image may be generated.
  • face images before makeup such as the face image IM21 and the face image IM22, are used for skeleton learning when generating makeup information. can be done. Therefore, the face image of the poster before makeup may be registered only once, for example, on a predetermined service that manages the face image of the poster.
  • the content describing the cosmetics used in the facial image before makeup such as the facial image IM21 and the facial image IM22, may or may not be included in the content CT1.
  • the cosmetics used by the contributor P11 for makeup for the face image IM11 are, for example, identified in advance by image analysis from the face image IM11 or the face image IM21. may be stored in the information processing apparatus or the own apparatus. Further, for example, it may be specified based on the purchase history of cosmetics in a predetermined electronic shopping mall of the contributor P11 and stored in association with the face image IM11 or the face image IM21. It may be specified by the contributor P11 selecting from a list displayed as candidates based on the history, and stored in association with the face image IM11 or the face image IM21. Further, for example, cosmetics that are not sold in a predetermined electronic shopping mall may be specified by accepting registration from the contributor P11 and stored in association with the face image IM11 or IM21.
  • the information processing apparatus 100 may generate makeup information that reflects the makeup order by specifying the makeup order in which the contributor P11 applies makeup to the face image IM11. At this time, information processing apparatus 100 may specify the order of makeup by, for example, receiving an input of the order of makeup from contributor P11. You may specify the order of make-up from the moving image. Further, information processing apparatus 100 may specify the order of makeup by learning from a plurality of makeup videos, for example. In addition, in the case of a makeup moving image, the information processing apparatus 100 can generate makeup information for each type of cosmetics, so that applicable face images may be selected. Also, the content CT1 may include explanatory content that reflects the order of makeup. Thereby, the information processing apparatus 100 can make an appropriate proposal including the order of makeup.
  • the face images displayed in the content CT1 may be selected based on any criteria and displayed in any order of priority. For example, face images posted by contributors followed by user U11 may be preferentially selected, or face images of contributors with more followers may be preferentially displayed. Alternatively, for example, the information may be preferentially selected or displayed based on the face information or other physical information of the user U11.
  • examples of face information include the shape, size, and arrangement of the parts that make up the face, the color and outline (shape) of the face, the color and size of the eyes, and the like.
  • the face color includes, for example, the natural complexion.
  • the average color of the entire measurement area excluding the lips For example, the average color of the forehead area, the average color of the left lower eye area, the average color of the right lower eye area, the average color of the left cheek area, the average color of the right cheek area, the average of the nose area.
  • Examples of body information other than face information include hair (hair style, hair type, hair color, accessories, etc.), skin (skin color, skin texture, wrinkles, etc.), body shape (part size, etc.). , overall balance) and the like.
  • the higher the priority of the face image of the poster the more similar or identical the face or physical information other than the face is to the user U11.
  • the higher the age, skin age, or skin concerns of the user U11 the higher the priority of the face image of the contributor.
  • the priority of the face image of the contributor may be set higher as the user U11 and the user U11 have the same or similar concerns about makeup.
  • the priority of the face image of the contributor may be set higher as the hairstyle, hair color, or hair preference is the same as or similar to that of the user U11.
  • the priority may be lowered so that the face image of the contributor is not preferentially selected or displayed as the physical information is farther from the user U11.
  • the priority of the face image of the contributor may be lowered as the part balance of the face differs from that of the user U11.
  • the priority of the face image of the contributor may be lowered as the profile of the face differs from that of the user U11.
  • the priority of the face image of the contributor may be lowered as the facial color of the user U11 differs from that of the user U11.
  • the facial image may be preferentially selected or displayed based on an index indicating the degree of popularity of the facial image, such as access histories of multiple users, purchase histories, and evaluation histories.
  • an index indicating the degree of popularity of the facial image such as access histories of multiple users, purchase histories, and evaluation histories.
  • It may be preferentially selected or displayed based on evaluation histories of multiple users when applying makeup, facial images of multiple users after purchase, evaluation histories of purchased cosmetics, or the like.
  • the higher the index indicating the degree of popularity of a face image such as the access history, purchase history, and evaluation history of a plurality of users to the face image, the higher the priority of the face image may be.
  • the poster may be preferentially selected or displayed based on the total price of the set of cosmetics used by the contributor for makeup. For example, the higher the total price of the makeup set used by the contributor, the higher or lower the priority
  • the facial images of posters whose purchase histories include cosmetics PR2 and PR3 are given a higher priority than facial images of posters whose purchase histories include only cosmetics PR1.
  • the face image may be given a higher priority as it is the same as or similar to cosmetics owned by the user U11.
  • cosmetics PR1, cosmetics PR2, and cosmetics PR3 are included in the purchase history of user U11, facial images that use more cosmetics among cosmetics PR1, cosmetics PR2, and cosmetics PR3 have higher priority. can be increased.
  • FIG. 3 is an explanatory diagram for explaining information processing in the case of increasing the priority of a face image based on the cosmetic purchase history of the user U11, the more identical or similar it is to the cosmetics owned by the user U11.
  • Face image IM11 and face image IM12 are face images posted by poster P11
  • face image IM12 is a face image posted by poster P12.
  • Cosmetics PR1, PR2, and PR3 are used for face image IM11.
  • Cosmetics PR1, PR4, and PR5 are used for face image IM111.
  • Cosmetics used for makeup are cosmetics PR2, cosmetics PR6, cosmetics PR7, and cosmetics PR8.
  • cosmetics PR1, cosmetics PR2, cosmetics PR3, and cosmetics PR6 are included in the purchase history of user U11, the priority of face image IM11 common to cosmetics PR1, cosmetics PR2, and cosmetics PR3 is higher, and cosmetics PR2, The priority of the face image IM111 common to the cosmetics PR6 is medium, and the priority of the face image IM12 common to the cosmetics PR1 is low.
  • the skin color such as complexion may be measured by a measurement item such as ZOZOGLASS (registered trademark) that can be measured by being worn by the user U11.
  • a measurement item such as ZOZOGLASS (registered trademark) that can be measured by being worn by the user U11.
  • Accuracy of makeup information generated by the information processing apparatus 100 can be improved by correcting light and accurately measuring the color of the skin.
  • FIG. 4 is a diagram showing a configuration example of the user terminal 10 according to the embodiment.
  • the user terminal 10 has a communication section 11 , an input section 12 , an output section 13 and a control section 14 .
  • the communication unit 11 is realized by, for example, a NIC (Network Interface Card) or the like.
  • the communication unit 11 is connected to a predetermined network N by wire or wirelessly, and transmits and receives information to and from the information processing apparatus 100 and the like via the predetermined network N.
  • the input unit 12 receives various operations from the user. In FIG. 2, various operations from the user U11 are accepted. For example, the input unit 12 may receive various operations from the user through the display surface using a touch panel function. The input unit 12 may also receive various operations from buttons provided on the user terminal 10 or from a keyboard or mouse connected to the user terminal 10 .
  • the output unit 13 is a display screen of a tablet terminal realized by, for example, a liquid crystal display or an organic EL (Electro-Luminescence) display, and is a display device for displaying various information. For example, the output unit 13 displays information transmitted from the information processing device 100 .
  • control unit 14 The control unit 14 is, for example, a controller, and various programs stored in a storage device inside the user terminal 10 are transferred to RAM (Random Access Memory) as a work area.
  • these various programs include application programs installed in the user terminal 10 .
  • the various programs include an application program for displaying content including face images transmitted from the information processing apparatus 100 .
  • the control unit 14 is implemented by an integrated circuit such as an ASIC (Application Specific Integrated Circuit) or an FPGA (Field Programmable Gate Array).
  • control unit 14 has a receiving unit 141 and a transmitting unit 142, and implements or executes the information processing operation described below.
  • the receiving unit 141 receives various information from other information processing devices such as the information processing device 100 .
  • the receiving unit 141 receives content including the user's face image to which makeup similar to that of the contributor used for the face image selected by the user is applied, and content describing the cosmetics used for the makeup. Receive information for display.
  • the transmission unit 142 transmits various types of information to other information processing devices such as the information processing device 100 .
  • the transmission unit 142 transmits information of the face image selected by the user in order to confirm whether or not the poster's makeup suits the user.
  • FIG. 5 is a diagram showing a configuration example of the poster terminal 20 according to the embodiment.
  • poster terminal 20 has communication section 21 , input section 22 , output section 23 , and control section 24 .
  • the communication unit 21 is implemented by, for example, a NIC.
  • the communication unit 21 is connected to a predetermined network N by wire or wirelessly, and transmits and receives information to and from the information processing apparatus 100 and the like via the predetermined network N.
  • the input unit 22 receives various operations from the contributor. In FIG. 2, various operations from contributors P11 and P12 are accepted. For example, the input unit 22 may receive various operations from the contributor via the display surface using a touch panel function. Further, the input unit 22 may receive various operations from buttons provided on the contributor terminal 20 or from a keyboard or mouse connected to the contributor terminal 20 .
  • the output unit 23 is, for example, a display screen of a tablet terminal realized by a liquid crystal display, an organic EL display, or the like, and is a display device for displaying various information. For example, the output unit 23 displays information transmitted from the information processing device 100 .
  • the control unit 24 is, for example, a controller, and is realized by executing various programs stored in a storage device inside the contributor terminal 20 by a CPU, MPU, etc., using the RAM as a work area.
  • the various programs include programs of applications installed in poster terminal 20 .
  • the various programs include an application program that transmits a poster's face image according to the poster's operation.
  • the control unit 14 is realized by, for example, an integrated circuit such as ASIC or FPGA.
  • control unit 24 has a receiving unit 241 and a transmitting unit 242, and implements or executes the information processing operation described below.
  • the receiving unit 241 receives various information from other information processing apparatuses such as the information processing apparatus 100 . For example, when a user who has applied makeup to his/her own facial image by looking at the face image provided by the contributor purchases cosmetics corresponding to the applied makeup at a predetermined electronic shopping mall, the receiving unit 241 , to receive information about rewards available to contributors determined in accordance with user purchases. Note that the receiving unit 241 may receive information for the contributor to receive a reward according to the user's purchase.
  • the transmission unit 242 transmits various types of information to other information processing devices such as the information processing device 100 .
  • the transmission unit 142 transmits the poster's face image according to the poster's operation.
  • FIG. 6 is a diagram illustrating a configuration example of the information processing apparatus 100 according to the embodiment.
  • the information processing apparatus 100 has a communication section 110, a storage section 120, and a control section .
  • the information processing apparatus 100 has an input unit (for example, a keyboard, a mouse, etc.) that receives various operations from the administrator of the information processing apparatus 100, and a display unit (for example, a liquid crystal display, etc.) for displaying various information. You may
  • the communication unit 110 is implemented by, for example, a NIC.
  • the communication unit 110 is connected to the network N by wire or wirelessly, and transmits and receives information to and from the user terminal 10 and the like via the network N.
  • the storage unit 120 is realized by, for example, a semiconductor memory device such as a RAM or flash memory, or a storage device such as a hard disk or an optical disk. As shown in FIG. 6 , the storage unit 120 has a poster information storage unit 121 and a cosmetics information storage unit 122 .
  • the contributor information storage unit 121 stores the face image of the contributor.
  • FIG. 7 shows an example of the poster information storage unit 121 according to the embodiment.
  • the contributor information storage unit 121 has items such as "contributor ID" and "face image”.
  • “Poster ID” indicates identification information for identifying the poster.
  • “Face image” indicates the face image of the contributor's real face registered by the contributor at the time of first use or the like.
  • conceptual information such as “face image #11” and “face image #12” is stored in “face image”, but image data and the like are actually stored. be done.
  • the "face image” may store, for example, a URL where image data is located, a file path name indicating a storage location, or the like.
  • FIG. 7 shows an example in which the face image of the contributor identified by contributor "P11" is “face image #11".
  • the cosmetic information storage unit 122 stores information on the cosmetics used by the contributor for makeup. As shown in FIG. 8, the cosmetic information storage unit 122 has items such as "contributor ID”, "face image”, and "set of cosmetics”.
  • “Poster ID” indicates identification information for identifying the poster.
  • “Face image” indicates the face image posted by the contributor. In the example shown in FIG. 8, conceptual information such as “face image #21” and “face image #22” is stored in “face image”, but image data and the like are actually stored. be done. Further, the “face image” may store, for example, a URL where image data is located, a file path name indicating a storage location, or the like.
  • “Cosmetic set” indicates a set of cosmetics used by the contributor for makeup.
  • the face image posted by the contributor identified by the contributor “P11” is “face image #21”
  • the set of cosmetics used by the contributor for makeup is “brand XX product A1 ( lip), brand XX product A2 (foundation), . . . ”.
  • the numbers in parentheses indicate the types of cosmetics.
  • control unit 130 is a controller, and is realized by, for example, executing various programs stored in a storage device inside the information processing apparatus 100 using a RAM as a work area by a CPU, MPU, or the like. Also, the control unit 130 is a controller, and is implemented by an integrated circuit such as an ASIC or FPGA, for example.
  • control unit 130 includes an acquisition unit 131, a generation unit 132, an application unit 133, a provision unit 134, and a determination unit 135, and implements the information processing operation described below. or run.
  • the internal configuration of the control unit 130 is not limited to the configuration shown in FIG. 6, and may be another configuration as long as it performs information processing described later.
  • Acquisition unit 131 acquires various types of information from an external information processing device.
  • the acquisition unit 131 acquires various types of information from other information processing devices such as the user terminal 10 .
  • the acquisition unit 131 acquires various types of information from the storage unit 120.
  • the acquisition unit 131 also stores the acquired various information in the storage unit 120 .
  • the acquisition unit 131 acquires information on the face image selected by the user from among the face images posted by the contributor on a predetermined service.
  • the acquisition unit 131 acquires information about the cosmetics used by the contributor for the face image selected by the user.
  • the generation unit 132 Based on the information acquired by the acquisition unit 131, the generation unit 132 applies makeup similar to the makeup of the contributor used for the face image selected by the user to the face image using a technique such as PSGAN. Generate makeup information for generating a face image. Further, when the order of makeup applied by the contributor is specified for the face image selected by the user, the generation unit 132 may generate makeup information reflecting the order of makeup.
  • the generation unit 132 generates information for displaying content including a face image to which makeup information is applied by the application unit 133 described later and content describing cosmetics specified based on the information acquired by the acquisition unit 131. Generate.
  • the applying unit 133 applies the makeup information generated by the generating unit 132 to the facial image of the user selected as the application target, thereby generating a facial image to be displayed on the user terminal 10 .
  • the application unit 133 selects from face images that are preferentially selected or displayed as the priority is higher, based on the order of priority determined based on the user's face information, body information, purchase history of cosmetics, and the like.
  • a face image to be displayed on the user terminal 10 is generated by applying makeup information generated from the face image.
  • the application unit 133 preferentially selects or displays a face image having a higher priority based on the priority determined based on the index indicating the degree of popularity of the face image, such as the access history, purchase history, and evaluation history of the face image.
  • a face image to be displayed on the user terminal 10 is generated by applying makeup information generated from the face image selected from among the face images.
  • the applying unit 133 selects a face selected or displayed preferentially from the face images selected or displayed as the priority is higher, based on the order of priority determined based on the total price of cosmetics used by the poster.
  • a face image to be displayed on the user terminal 10 is generated by applying makeup information generated from the image.
  • the providing unit 134 transmits information for displaying content generated by the generating unit 132 to the user terminal 10 .
  • the user terminal 10 Upon receiving the information transmitted by the providing unit 134 , the user terminal 10 displays content corresponding to the information generated by the generating unit 132 .
  • the determining unit 135 determines whether or not the user has purchased cosmetics linked to the content provided by the providing unit 134. If it is determined that the user has purchased the cosmetics, the face image selected by the user is posted. determines that the user will be rewarded according to the user's purchase. Then, the providing unit 134 performs processing for giving the contributor a reward according to the user's purchase. Also, the determining unit 135 may determine to transmit information for the contributor to receive a reward according to the user's purchase. In this case, the providing unit 134 transmits information for the contributor to receive a reward according to the user's purchase. Alternatively, the determination unit 135 may determine to transfer the reward to the poster's account. In this case, the providing unit 134 performs processing for transferring the remuneration to the poster's account.
  • FIG. 9 is a flow chart showing the procedure of information processing by the information processing system 1 according to the embodiment.
  • the information processing apparatus 100 acquires information on the face image selected by the user from the face images posted by the contributor on a predetermined service (step S201).
  • the information processing apparatus 100 Based on the acquired information, the information processing apparatus 100 generates makeup information for generating a face image in which the same makeup as the contributor's makeup used for the face image selected by the user is applied to the face image. (Step S202).
  • the information processing apparatus 100 applies the generated makeup information to the face image of the user selected as the application target, thereby generating a face image to be provided to the user (step S203).
  • the information processing apparatus 100 transmits information for displaying content including the generated face image and content describing the cosmetics used by the contributor for makeup (step S204).
  • the user's face image to which makeup information has been applied is displayed on the user terminal 10, but the present invention is not limited to this example.
  • it may be displayed on a terminal device of another person who communicates with the user online.
  • the makeup associated with the selected face image will appear on the face of the user participating in the online meeting.
  • a face image to which makeup related to the face image selected by the user has been applied may be displayed on the terminal device of another person.
  • the user may be charged according to usage conditions such as usage time and usage frequency.
  • a process may be performed to give the contributor part of the billing amount charged to the user as a reward.
  • the face with make-up is displayed to others online, so that the user can participate in the meeting with a bare face.
  • the applying unit 133 applies the makeup information generated by the generating unit 132 to the face image of the user being captured in real time, thereby generating in real time the face image to be displayed on the terminal device of the other person.
  • the generating unit 132 uses the facial image generated by the applying unit 133 to generate information in real time for displaying the facial image of the user to which makeup information is applied on the terminal device of another person.
  • the providing unit 134 distributes the face image to which the makeup information is applied by the applying unit 133 to others who communicate with the user online in real time.
  • the determination unit 135 assigns the face image selected by the user to the poster who posted the face image generated by the application unit 133 according to the usage status of the face image generated by the application unit 133 online (for example, usage time and usage frequency). determine the reward for In other words, the determination unit 135 determines the reward to be given to the poster who posted the face image from which the makeup information is generated, according to the usage status of the face image to which the makeup information is applied to the user's face image. .
  • the providing unit 134 may provide, for example, only the right to use makeup information. By exercising the provided right of use, the user may cause the terminal device of another person to display the face image to which the makeup information is applied to the user's face image.
  • the information processing apparatus 100 has the generating unit 132, the applying unit 133, and the providing unit .
  • the generation unit 132 generates makeup information for generating a face image obtained by applying makeup similar to the predetermined makeup to the face image from the face image of the contributor wearing the predetermined makeup.
  • the application unit 133 applies makeup information generated from a face image selected by the user from among face images posted by contributors who satisfy a predetermined condition, to the face image of the user.
  • the providing unit 134 provides the user with the content indicating the face image to which the makeup information is applied by the applying unit 133 and the description content of the article used for the makeup.
  • the information processing apparatus 100 can appropriately respond to the user's desire to immediately check whether or not the makeup of others suits him/herself.
  • content is content that includes information that allows the user to access a predetermined online shopping mall where items can be purchased.
  • the information processing apparatus 100 can appropriately refer customers to a predetermined online shopping mall where they can purchase items used for makeup by others.
  • the information processing apparatus 100 when the user purchases an article at a predetermined online shopping mall, the information processing apparatus 100 according to the embodiment sends a message to the poster who posted the face image selected by the user in response to the purchase by the user. It further has a decision unit 135 that decides to give a reward.
  • the information processing apparatus 100 can appropriately motivate the poster to post the face image.
  • the application unit 133 also applies makeup information generated from a face image selected from face images preferentially selected or displayed based on a predetermined criterion.
  • the information processing apparatus 100 can provide appropriate information to the user based on the predetermined criteria, so that it is possible to more appropriately respond to the desire of the user.
  • the application unit 133 preferentially selects or displays a face selected or displayed as the priority is higher, based on the order of priority determined based on at least one of the user's face information, body information, and product purchase history. To apply makeup information generated from a face image selected from among images.
  • the information processing apparatus 100 can provide appropriate information to the user based on facial information, physical information, product purchase history, and the like. I can answer.
  • the application unit 133 preferentially selects or displays the selected or displayed face image as the priority is higher, based on the order of priority determined based on at least one of the access history, purchase history, and evaluation history for the face image.
  • the makeup information generated from the selected face image is applied.
  • the information processing apparatus 100 can provide the user with appropriate information based on the access history, purchase history, evaluation history, and the like for the face image. can respond to
  • the application unit 133 generates the face image selected from among the face images that are preferentially selected or displayed as the priority is higher, based on the order of priority determined based on the total price of the article. Apply makeup information.
  • the information processing apparatus 100 can provide the user with appropriate information based on the total price of the goods, so that the desire of the user can be more appropriately met.
  • FIG. 10 is a hardware configuration diagram showing an example of a computer that implements the functions of the user terminal 10, poster terminal 20, and information processing apparatus 100.
  • Computer 1000 has CPU 1100 , RAM 1200 , ROM 1300 , HDD 1400 , communication interface (I/F) 1500 , input/output interface (I/F) 1600 and media interface (I/F) 1700 .
  • the CPU 1100 operates based on programs stored in the ROM 1300 or HDD 1400 and controls each section.
  • the ROM 1300 stores a boot program executed by the CPU 1100 when the computer 1000 is started up, a program depending on the hardware of the computer 1000, and the like.
  • the HDD 1400 stores programs executed by the CPU 1100 and data used by these programs.
  • Communication interface 1500 acquires data from another device via a predetermined communication network, sends the data to CPU 1100, and transmits data generated by CPU 1100 to another device via a predetermined communication network.
  • the CPU 1100 controls output devices such as displays and printers, and input devices such as keyboards and mice, via an input/output interface 1600 .
  • CPU 1100 acquires data from an input device via input/output interface 1600 .
  • CPU 1100 also outputs the generated data to an output device via input/output interface 1600 .
  • the media interface 1700 reads programs or data stored in the recording medium 1800 and provides them to the CPU 1100 via the RAM 1200 .
  • CPU 1100 loads such a program from recording medium 1800 onto RAM 1200 via media interface 1700, and executes the loaded program.
  • the recording medium 1800 is, for example, an optical recording medium such as a DVD (Digital Versatile Disc) or a PD (Phase change rewritable disk), a magneto-optical recording medium such as an MO (Magneto-Optical disk), a tape medium, a magnetic recording medium, or a semiconductor memory. etc.
  • the CPU 1100 of the computer 1000 executes a program loaded on the RAM 1200 to control the control unit 14 , 24 and 130 .
  • CPU 1100 of computer 1000 reads these programs from recording medium 1800 and executes them, but as another example, these programs may be obtained from another device via a predetermined communication network.
  • each component of each device illustrated is functionally conceptual and does not necessarily need to be physically configured as illustrated.
  • the specific form of distribution and integration of each device is not limited to the one shown in the figure, and all or part of them can be functionally or physically distributed and integrated in arbitrary units according to various loads and usage conditions. Can be integrated and configured.
  • section, module, unit can be read as “means” or “circuit”.
  • acquisition unit can be read as acquisition means or an acquisition circuit.

Landscapes

  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Game Theory and Decision Science (AREA)
  • Computing Systems (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Primary Health Care (AREA)
  • Tourism & Hospitality (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Image Processing (AREA)

Abstract

他者のメイクを参考にする利用者のための更なるユーザビリティの向上を促進させること。情報処理装置（１００）は、生成部（１３２）と、適用部（１３３）と、提供部（１３４）とを備える。生成部（１３２）は、所定のメイクをした投稿者の顔画像から、所定のメイクと同様のメイクを顔画像に適用した顔画像を生成するためのメイク情報を生成する。適用部（１３３）は、所定の条件を満たす投稿者により投稿された顔画像の中から利用者が選択した顔画像から生成されたメイク情報を、利用者の顔画像に対して適用する。提供部（１３４）は、適用部（１３３）によりメイク情報が適用された顔画像とメイクに用いた物品の説明コンテンツとを示すコンテンツを利用者に提供する。

Description

情報処理装置、情報処理方法及び情報処理プログラム
　本発明は、情報処理装置、情報処理方法及び情報処理プログラムに関する。
　化粧品（コスメ）の購入を検討する際に、モデル等の他者の顔に施されたメイクを見ても、自身に置き換えた場合のイメージがつかず、自身に似合うか否かが分からないといったことがよくある。
　従来、他者の顔に施されたメイクが自身に似合うか否かを確認したいといった欲求に応えるための技術として、他者のメイクを参考にメイクアップの支援を行う技術が知られている。例えば、他者のメイク情報を、利用者の顔部品の領域に対応付けて提示する技術が知られている。
特許第５９９１５３６号公報
W.　Jiang,　S.　Liu,　C.　Gao,　J.　Cao,　R.　He,　J.　Feng,　S.　Yan"PSGAN:　Pose　and　Expression　Robust　Spatial-Aware　CAN　for　Customizable　Makeup　Transfer"，［online］，［令和４年１月２４日検索］，インターネット＜https://openaccess.thecvf.com/content_CVPR_2020/html/Jiang_PSGAN_Pose_and_Expression_Robust_Spatial-Aware_GAN_for_Customizable_Makeup_CVPR_2020_paper.html＞
　しかしながら、従来の技術では、例えば、他者がメイクに用いた物品を試着機能で自身に似合うか否かを確認させた上で物品を販売する販売サイトへ送客させることや、成果報酬を用いたメイク投稿者による送客支援の活性化を促進させることができなかった。このため、他者のメイクを参考にする利用者のための更なるユーザビリティの向上の余地があった。
　本願は、上記に鑑みてなされたものであって、他者のメイクを参考にする利用者のための更なるユーザビリティの向上を促進させることを目的とする。
　本願に係る情報処理装置は、所定のメイクをした投稿者の顔画像から、当該所定のメイクと同様のメイクを顔画像に適用した顔画像を生成するためのメイク情報を生成する生成部と、所定の条件を満たす投稿者により投稿された顔画像の中から利用者が選択した顔画像から生成されたメイク情報を、当該利用者の顔画像に対して適用する適用部と、前記適用部によりメイク情報が適用された顔画像と前記メイクに用いた物品の説明コンテンツとを含むコンテンツを前記利用者に提供する提供部と、を有することを特徴とする。
　実施形態の一態様によれば、他者のメイクを参考にする利用者のための更なるユーザビリティの向上を促進させることができるという効果を奏する。
図１は、実施形態に係る情報処理システムの構成例を示す図である。 図２は、実施形態に係る情報処理の一例を示す図である。 図３は、実施形態に係る顔画像の優先順位を高くする場合の情報処理を説明するための説明図である。 図４は、実施形態に係る利用者端末の構成例を示す図である。 図５は、実施形態に係る投稿者端末の構成例を示す図である。 図６は、実施形態に係る情報処理装置の構成例を示す図である。 図７は、実施形態に係る投稿者情報記憶部の一例を示す図である。 図８は、実施形態に係るコスメ情報記憶部の一例を示す図である。 図９は、実施形態に係る情報処理の一例を示すフローチャートである。 図１０は、情報処理装置の機能を実現するコンピュータの一例を示すハードウェア構成図である。
　以下に、本願に係る情報処理装置、情報処理方法及び情報処理プログラムを実施するための形態（以下、「実施形態」と呼ぶ）について図面を参照しつつ詳細に説明する。なお、この実施形態により本願に係る情報処理装置、情報処理方法及び情報処理プログラムが限定されるものではない。また、以下の各実施形態において同一の部位には同一の符号を付し、重複する説明は省略される。
（実施形態）
〔１．情報処理システムの構成〕
　図１に示す情報処理システム１について説明する。図１に示すように、情報処理システム１は、利用者端末１０と、投稿者端末２０と、情報処理装置１００とが含まれる。利用者端末１０と、投稿者端末２０と、情報処理装置１００とは所定の通信網（ネットワークＮ）を介して、有線または無線により通信可能に接続される。図１は、実施形態に係る情報処理システム１の構成例を示す図である。
　利用者端末１０は、他者の顔に施されたメイクが自身に似合うか否かを確認したいといった欲求を有する利用者によって利用される情報処理装置である。また、利用者端末１０を利用する利用者は、例えば、コスメの購入を検討しているものである。利用者端末１０は、実施形態における処理を実現可能であれば、どのような装置であってもよい。また、利用者端末１０は、スマートフォンや、タブレット型端末や、ノート型ＰＣや、デスクトップＰＣや、携帯電話機や、ＰＤＡ等の装置であってもよい。図２では、利用者端末１０がスマートフォンである場合を示す。
　利用者端末１０は、例えば、スマートフォンやタブレット等のスマートデバイスであり、３Ｇ～５Ｇ（Generation）やＬＴＥ（Long　Term　Evolution）等の無線通信網を介して任意のサーバ装置と通信を行うことができる携帯端末装置である。また、利用者端末１０は、液晶ディスプレイ等の画面であって、タッチパネルの機能を有する画面を有し、利用者から指やスタイラス等によりタップ操作、スライド操作、スクロール操作等、コンテンツ等の表示データに対する各種の操作を受付けてもよい。図２では、利用者端末１０は利用者Ｕ１１によって利用される。
　投稿者端末２０は、メイクをした顔画像を提供する投稿者によって利用される情報処理装置である。また、投稿者端末２０を利用する投稿者は、例えば、メイク前の素顔の状態からメイクを施すことによりメイクを完成させた顔画像を投稿するものである。投稿者端末２０は、実施形態における処理を実現可能であれば、どのような装置であってもよい。また、投稿者端末２０は、スマートフォンや、タブレット型端末や、ノート型ＰＣや、デスクトップＰＣや、携帯電話機や、ＰＤＡ等の装置であってもよい。図２では、投稿者端末２０がスマートフォンである場合を示す。
　投稿者端末２０は、例えば、スマートフォンやタブレット等のスマートデバイスであり、３Ｇ～５ＧやＬＴＥ等の無線通信網を介して任意のサーバ装置と通信を行うことができる携帯端末装置である。また、投稿者端末２０は、液晶ディスプレイ等の画面であって、タッチパネルの機能を有する画面を有し、投稿者から指やスタイラス等によりタップ操作、スライド操作、スクロール操作等、コンテンツ等の表示データに対する各種の操作を受付けてもよい。図２では、投稿者端末２０は投稿者Ｐ１１及び投稿者Ｐ１２によって利用される。なお、投稿者端末２０１及び投稿者端末２０２は、それぞれ投稿者Ｐ１１及び投稿者Ｐ１２の投稿者端末２０である。
　情報処理装置１００は、他者のメイクを参考にする利用者のための更なるユーザビリティの向上を促進させることを目的とした情報処理装置であり、実施形態における処理を実現可能であれば、どのような装置であってもよい。情報処理装置１００は、例えば、サーバ装置やクラウドシステム等により実現される。例えば、情報処理装置１００は、コスメを販売する所定の電子商店街を提供するサーバ装置やクラウドシステム等により実現される。
〔２．情報処理の一例〕
　図２は、実施形態に係る情報処理システム１の情報処理の一例を示す図である。以下実施形態では、投稿者Ｐ１１のメイクが自身に似合うか否かを確認したいといった利用者Ｕ１１の欲求に応える場合の処理を一例として説明する。
　情報処理装置１００は、例えばＳＮＳ（Social　Networking　Service）上でフォロワー数が所定の閾値を超える所謂インフルエンサと呼ばれる有名人等の投稿者により投稿された顔画像の中から利用者Ｕ１１が選択した顔画像の情報を取得する（ステップＳ１０１）。なお、利用者Ｕ１１が選択可能な顔画像には、一の投稿者により投稿された複数の顔画像が含まれてもよい。図２では、投稿者Ｐ１１が投稿した顔画像ＩＭ１１や、投稿者Ｐ１２が投稿した顔画像ＩＭ１２等が含まれるものとする。以下、利用者Ｕ１１が、コンテンツＣＴ１１の中から顔画像ＩＭ１１を選択したものとして説明する。なお、コンテンツＣＴ１１に表示される顔画像はどのような基準に基づいて選択されてもよい。例えば、利用者Ｕ１１がフォローしている投稿者により投稿された顔画像が優先的に選択されてもよい。また、コンテンツＣＴ１１は、投稿者の顔画像を管理する所定のサービス上のコンテンツである。
　顔画像ＩＭ１１は、投稿者Ｐ１１の所定のメイク後の顔画像である。なお、顔画像ＩＭ２１は、顔画像ＩＭ１１のメイクに対する投稿者Ｐ１１のメイク前の顔画像である。顔画像ＩＭ２１は、顔画像ＩＭ１１とともに、コンテンツＣＴ１１に表示されてもよいし、顔画像ＩＭ１１に対する操作（例えば、クリックやタップ）等により表示されてもよい。また、顔画像ＩＭ２１は、利用者に対して表示されなくてもよい。これにより、投稿者は、素顔を利用者に対して出さなくてもよくなるため、投稿者のためのユーザビリティの向上を促進させることができる。また、顔画像ＩＭ１２は、投稿者Ｐ１２の所定のメイク後の顔画像である。なお、顔画像ＩＭ２２は、顔画像ＩＭ１２のメイクに対する投稿者Ｐ１２のメイク前の顔画像である。顔画像ＩＭ２２は、顔画像ＩＭ１２とともに、コンテンツＣＴ１１に表示されてもよいし、顔画像ＩＭ１２に対する操作等により表示されてもよい。また、顔画像ＩＭ２２は、利用者に対して表示されなくてもよい。
　ここで、メイク情報を生成するための手法の一例として、例えば、非特許文献１に開示されたＰＳＧＡＮ（Pose　and　Expression　Robust　Spatial-Aware　Generative　Adversarial　Network）と呼ばれる、顔画像からメイク情報のみを別の顔へ移動させる手法が挙げられる（非特許文献１）。この手法は、深層学習を用いた手法であり、表情やポーズに関わらず、メイク情報のみを別の顔へ移動させることができる。情報処理装置１００は、ＰＳＧＡＮ等の手法を用いて、利用者Ｕ１１が選択した顔画像ＩＭ１１に用いられた投稿者Ｐ１１のメイクと同様のメイクを顔画像に適用した顔画像を生成するためのメイク情報を生成する（ステップＳ１０２）。そして、情報処理装置１００は、ＰＳＧＡＮ等の手法を用いて、ステップＳ１０２で生成したメイク情報を、利用者Ｕ１１の顔画像ＩＭ１に対して適用する（ステップＳ１０３）。この際、顔画像ＩＭ１はどのように取得されたものであってもよい。顔画像ＩＭ１は、例えば、利用者Ｕ１１が予め登録し、外部の情報処理装置や自装置で記憶されたものであってもよいし、利用者端末１０から送信されたものであってもよい。また、顔画像ＩＭ１は、利用者Ｕ１１が適用対象に選択したものであってもよいし、自動で適用対象に選択されたものであってもよい。また、顔画像ＩＭ２は、顔画像ＩＭ１に対する適用後の顔画像である。
　情報処理装置１００は、ステップＳ１０３で、メイク情報が適用された利用者Ｕ１１の顔画像ＩＭ２と、メイクに用いたコスメ（物品に対応）の説明コンテンツとを含むコンテンツを表示させるための情報を利用者端末１０へ送信する（ステップＳ１０４）。そして、利用者端末１０は、情報処理装置１００から送信された情報に基づいて、コンテンツＣＴ１を表示させる。
　ここで、コンテンツＣＴ１には、投稿者Ｐ１１が顔画像ＩＭ１１に関してメイクに用いたコスメの説明コンテンツが含まれる。例えば、コスメの商品名や価格等の情報が含まれる。図２では、リップとファンデーションの２つのコスメ（ＰＲ１及びＰＲ２）が含まれる場合を示したが、コスメの数は特に限定されないものとする。例えば、コンテンツＣＴ１には、顔画像ＩＭ２１のメイク前の状態から顔画像ＩＭ１１の所定のメイク後の状態に仕上げるために投稿者Ｐ１１が用いたコスメ一式の説明コンテンツが含まれてもよい。また、説明コンテンツには、メイクに用いたコスメ一式を購入可能な所定の電子商店街へアクセスするための操作を受け付ける操作受付情報Ｂ１が含まれてもよい。操作受付情報Ｂ１は、操作を受け付けると、例えば、コスメ一式を紹介した商品ページへアクセスさせてもよいし、コスメ一式をカートに入れた購入ページへアクセスさせてもよい。なお、操作受付情報Ｂ１は、顔画像ＩＭ２や説明コンテンツ中の他のコンテンツと一体であってもよく、顔画像ＩＭ２や説明コンテンツ中の他のコンテンツに対する操作を受け付けると、商品ページや購入ページへアクセスさせてもよい。
　情報処理装置１００は、利用者Ｕ１１が、説明コンテンツに紐づくコスメを購入したか否かを判定する。例えば、情報処理装置１００は、利用者Ｕ１１が操作受付情報Ｂ１を操作してアクセスした所定の電子商店街で、コスメＰＲ１及びコスメＰＲ２を含むコスメ一式又は一部を購入したか否かを判定する。情報処理装置１００は、利用者Ｕ１１が購入したと判定した場合には、画像ＩＭ２のメイク情報に対応したメイクを用いた顔画像を投稿した投稿者である投稿者Ｐ１１に、利用者Ｕ１１の購入に応じた報酬を付与すると決定する。そして、情報処理装置１００は、利用者Ｕ１１の購入に応じた報酬を投稿者Ｐ１１に付与するための処理を行う。なお、情報処理装置１００は、利用者Ｕ１１の購入に応じた報酬を投稿者Ｐ１１が受け取るための情報を送信すると決定してもよい。この場合、情報処理装置１００は、利用者Ｕ１１の購入に応じた報酬を投稿者Ｐ１１が受け取るための情報を送信する。また、情報処理装置１００は、報酬を投稿者Ｐ１１の口座へ送金すると決定してもよい。この場合、情報処理装置１００は、報酬を投稿者Ｐ１１の口座へ送金するための処理を行う。
（処理のバリエーション１：メイク前の顔画像を用いた表示）
　上記実施形態では、コンテンツＣＴ１１に、顔画像ＩＭ１１や顔画像ＩＭ１２等の所定のメイク後の顔画像が表示される場合を示したが、この例に限られない。例えば、コンテンツＣＴ１１に、顔画像ＩＭ２１や顔画像ＩＭ２２等のメイク前の顔画像が表示され、メイク前の顔画像に対する操作により、メイク後の顔画像が表示されてもよい。そして、情報処理装置１００は、利用者Ｕ１１がメイク前の顔画像に対応したメイク後の顔画像を見て選択することで、利用者の顔画像に適用するメイク情報を生成してもよい。
（処理のバリエーション２：メイク動画の表示）
　上記実施形態では、コンテンツＣＴ１１に、顔画像ＩＭ１１や顔画像ＩＭ１２等の所定のメイク後の顔画像が表示され、メイク後の顔画像を操作することで、例えば、メイク前の顔画像が表示される場合を示したが、この例に限られない。例えば、メイク後の顔画像を操作することで、メイク前の状態からメイク後の状態に仕上げるために投稿者がしたメイクのメイク動画が表示されてもよい。なお、メイク動画には、例えば、顔画像ＩＭ２１や顔画像ＩＭ２２等のメイク前の顔画像と、顔画像ＩＭ１１や顔画像ＩＭ１２等の所定のメイク後の顔画像とが含まれる。また、メイク動画は、メイク後の顔画像とともにコンテンツＣＴ１１に表示されてもよい。
（処理のバリエーション３：メイク前の顔画像の限定）
　上記実施形態では、顔画像ＩＭ２１や顔画像ＩＭ２２等のメイク前の顔画像が、投稿者の素顔の顔画像である場合を示したが、この例に限られない。例えば、顔画像ＩＭ２１や顔画像ＩＭ２２等のメイク前の顔画像は、顔画像ＩＭ１１や顔画像ＩＭ１２等の所定のメイク前の顔画像であれば、リップやファンデーションのみ等のある程度のメイクが施された顔画像であってもよい。この場合、情報処理装置１００は、顔画像ＩＭ２１や顔画像ＩＭ２２等のメイク前の顔画像に用いられたコスメのメイク情報が、利用者の顔画像に適用されないようなメイク情報を生成してもよいし、利用者の顔画像に適用されるようなメイク情報を生成してもよい。なお、顔画像ＩＭ２１や顔画像ＩＭ２２等のメイク前の顔画像は、メイク情報を生成する上で骨格の学習に用いられるため、素顔の顔画像でなくても、適切なメイク情報を生成することができる。このため、投稿者のメイク前の顔画像は、例えば投稿者の顔画像を管理する所定のサービス上で、一度のみ登録されればよい。また、顔画像ＩＭ２１や顔画像ＩＭ２２等のメイク前の顔画像に用いられたコスメの説明コンテンツは、コンテンツＣＴ１に含まれなくてもよいし、含まれてもよい。
（処理のバリエーション４：物品情報の自動抽出）
　上記実施形態において、投稿者Ｐ１１が顔画像ＩＭ１１に関してメイクに用いたコスメは、例えば、顔画像ＩＭ１１や顔画像ＩＭ２１から画像解析により予め特定され、顔画像ＩＭ１１や顔画像ＩＭ２１に紐づけて、外部の情報処理装置や自装置で記憶されたものであってもよい。また、例えば、投稿者Ｐ１１の所定の電子商店街でのコスメの購入履歴に基づいて特定され、顔画像ＩＭ１１や顔画像ＩＭ２１に紐づけて記憶されたものであってもよいし、コスメの購入履歴に基づいて候補として表示された一覧から投稿者Ｐ１１が選択したことにより特定され、顔画像ＩＭ１１や顔画像ＩＭ２１に紐づけて記憶されたものであってもよい。また、例えば、所定の電子商店街で売られていないコスメの登録を投稿者Ｐ１１から受け付けたことにより特定され、顔画像ＩＭ１１や顔画像ＩＭ２１に紐づけて記憶されたものであってもよい。
（処理のバリエーション５：メイクの順番を反映）
　上記実施形態において、情報処理装置１００は、投稿者Ｐ１１が顔画像ＩＭ１１に関してメイクをしたメイクの順番を特定することにより、メイクの順番を反映させたメイク情報を生成してもよい。この際、情報処理装置１００は、例えば、投稿者Ｐ１１からのメイクの順番の入力を受け付けることにより、メイクの順番を特定してもよいし、顔画像ＩＭ１１に関するメイク動画がある場合には、メイク動画からメイクの順番を特定してもよい。また、情報処理装置１００は、例えば、複数のメイク動画から学習することによりメイクの順番を特定してもよい。また、情報処理装置１００は、メイク動画の場合には、コスメの種別毎にメイク情報を生成することができるため、適用可能な顔画像の選択を行ってもよい。また、メイクの順番を反映させた説明コンテンツが、コンテンツＣＴ１に含まれてもよい。これにより、情報処理装置１００は、メイクの順番を含めた適切な提案を行うことができる。
（処理のバリエーション６：顔画像の優先表示１）
　上記実施形態において、コンテンツＣＴ１に表示される顔画像はどのような基準に基づいて選択されてもよいし、どのような優先順位で表示されてもよい。例えば、利用者Ｕ１１がフォローしている投稿者により投稿された顔画像が優先的に選択されてもよいし、フォロワー数の多い投稿者の顔画像ほど優先的に表示されてもよい。また、例えば、利用者Ｕ１１の顔情報や他の身体情報に基づいて優先的に選択又は表示されてもよい。
　ここで、顔情報の一例として、例えば、顔を構成するパーツの形やサイズや配置、顔の色や輪郭（形状）、瞳の色や大きさ等が挙げられる。また、顔の色には、例えば、素顔の顔色が含まれる。例えば、唇を除く計測箇所全体の平均色、額領域の平均色、左目下領域の平均色、右目下領域の平均色、左頬領域の平均色、右頬領域の平均色、鼻領域の平均色、上唇の平均色、下唇の平均色、顎領域の平均色等が含まれる。また、顔情報以外の他の身体情報の一例として、例えば、髪（髪型、髪質、髪の色、装飾品等）、肌（肌の色、肌質、しわ等）、体型（パーツのサイズ、全体のバランス）等が挙げられる。
　上記実施形態において、利用者Ｕ１１と身体情報が近いほど、投稿者の顔画像が優先的に選択又は表示されるように優先順位を高くしてもよい。例えば、利用者Ｕ１１と顔や顔以外の身体情報が同一又は類似するほど、投稿者の顔画像の優先順位を高くしてもよい。また、例えば、利用者Ｕ１１と年齢や肌年齢や肌の悩みが同一又は類似するほど、投稿者の顔画像の優先順位を高くしてもよい。また、例えば、利用者Ｕ１１とメイクの悩みが同一又は類似するほど、投稿者の顔画像の優先順位を高くしてもよい。また、例えば、利用者Ｕ１１と髪型や髪色や髪の好みが同一又は類似するほど、投稿者の顔画像の優先順位を高くしてもよい。また、利用者Ｕ１１と身体情報が遠いほど、投稿者の顔画像が優先的に選択又は表示されなくなるように優先順位を低くしてもよい。例えば、利用者Ｕ１１と顔のパーツバランスが異なるほど、投稿者の顔画像の優先順位を低くしてもよい。また、例えば、利用者Ｕ１１と顔の輪郭が異なるほど、投稿者の顔画像の優先順位を低くしてもよい。また、例えば、利用者Ｕ１１と素顔の顔色が異なるほど、投稿者の顔画像の優先順位を低くしてもよい。
　また、顔画像に対する複数の利用者のアクセス履歴や購入履歴や評価履歴等の顔画像の人気度合いを示す指標に基づいて優先的に選択又は表示されてもよい。具体的には、複数の利用者が選択した顔画像のアクセス履歴、顔画像を選択することにより提供されたコンテンツを介した送客による複数の利用者の購入履歴、顔画像を選択することによるメイクの適用時の複数の利用者による評価履歴、購入後の複数の利用者による顔画像若しくは購入したコスメに対する評価履歴等に基づいて優先的に選択又は表示されてもよい。例えば、顔画像に対する複数の利用者のアクセス履歴や購入履歴や評価履歴等の顔画像の人気度合いを示す指標が高いほど、顔画像の優先順位を高くしてもよい。また、投稿者がメイクに用いたコスメ一式の合計価格に基づいて優先的に選択又は表示されてもよい。例えば、投稿者がメイクに用いたコスメ一式の合計価格が高いほど、顔画像の優先順位を高くしてもよいし、低くしてもよい。
（処理のバリエーション７：顔画像の優先表示２）
　上記実施形態において、利用者Ｕ１１のコスメの購入履歴に基づいて優先的に選択又は表示されてもよい。例えば、利用者Ｕ１１と手持ちのコスメが同一又は類似するほど、投稿者の顔画像の優先順位を高くしてもよい。例えば、利用者Ｕ１１の購入履歴にコスメＰＲ１、コスメＰＲ２、コスメＰＲ３が含まれる場合には、コスメＰＲ１、コスメＰＲ２、コスメＰＲ３のうち、より多くのコスメを購入履歴に含む投稿者の顔画像ほど、優先順位を高くしてもよい。例えば、コスメＰＲ１、コスメＰＲ２、コスメＰＲ３のうち、コスメＰＲ１のみを購入履歴に含む投稿者の顔画像よりも、コスメＰＲ２及びコスメＰＲ３を購入履歴に含む投稿者の顔画像の優先順位を高くしてもよい。また、例えば、利用者Ｕ１１の手持ちのコスメと同一又は類似するほど、顔画像の優先順位を高くしてもよい。例えば、利用者Ｕ１１の購入履歴にコスメＰＲ１、コスメＰＲ２、コスメＰＲ３が含まれる場合には、コスメＰＲ１、コスメＰＲ２、コスメＰＲ３のうち、より多くのコスメをメイクに用いた顔画像ほど、優先順位を高くしてもよい。
　図３は、利用者Ｕ１１のコスメの購入履歴に基づいて、利用者Ｕ１１の手持ちのコスメと同一又は類似するほど、顔画像の優先順位を高くする場合の情報処理を説明するための説明図である。顔画像ＩＭ１１及び顔画像ＩＭ１２は投稿者Ｐ１１により投稿された顔画像であり、顔画像ＩＭ１２は投稿者Ｐ１２により投稿された顔画像である。また、顔画像ＩＭ１１に関してメイクに用いたコスメは、コスメＰＲ１、コスメＰＲ２、コスメＰＲ３であり、顔画像ＩＭ１１１に関してメイクに用いたコスメは、コスメＰＲ１、コスメＰＲ４、コスメＰＲ５であり、顔画像ＩＭ１２に関してメイクに用いたコスメは、コスメＰＲ２、コスメＰＲ６、コスメＰＲ７、コスメＰＲ８である。利用者Ｕ１１の購入履歴にコスメＰＲ１、コスメＰＲ２、コスメＰＲ３、コスメＰＲ６が含まれる場合には、コスメＰＲ１、コスメＰＲ２、コスメＰＲ３で共通する顔画像ＩＭ１１の優先順位が上位になり、コスメＰＲ２、コスメＰＲ６で共通する顔画像ＩＭ１１１の優先順位が中位になり、コスメＰＲ１で共通する顔画像ＩＭ１２の優先順位が下位になる。
（処理のバリエーション８：色情報の取得）
　上記実施形態において、顔色等の肌の色は、例えば、利用者Ｕ１１が装着することにより計測可能なＺＯＺＯＧＬＡＳＳ（登録商標）等の計測アイテムで計測されたものであってもよい。光の補正をして肌の色を正確に計測することで、情報処理装置１００により生成されるメイク情報の精度を向上させることができる。
〔３．利用者端末の構成〕
　次に、図４を用いて、実施形態に係る利用者端末１０の構成について説明する。図４は、実施形態に係る利用者端末１０の構成例を示す図である。図４に示すように、利用者端末１０は、通信部１１と、入力部１２と、出力部１３と、制御部１４とを有する。
（通信部１１）
　通信部１１は、例えば、ＮＩＣ（Network　Interface　Card）等によって実現される。そして、通信部１１は、所定のネットワークＮと有線又は無線で接続され、所定のネットワークＮを介して、情報処理装置１００等との間で情報の送取得を行う。
（入力部１２）
　入力部１２は、利用者からの各種操作を受け付ける。図２では、利用者Ｕ１１からの各種操作を受け付ける。例えば、入力部１２は、タッチパネル機能により表示面を介して利用者からの各種操作を受け付けてもよい。また、入力部１２は、利用者端末１０に設けられたボタンや、利用者端末１０に接続されたキーボードやマウスからの各種操作を受け付けてもよい。
（出力部１３）
　出力部１３は、例えば液晶ディスプレイや有機ＥＬ（Electro-Luminescence）ディスプレイ等によって実現されるタブレット端末等の表示画面であり、各種情報を表示するための表示装置である。例えば、出力部１３は、情報処理装置１００から送信された情報を表示する。
（制御部１４）
　制御部１４は、例えば、コントローラ（controller）であり、ＣＰＵ（Central　Processing　Unit）やＭＰＵ（Micro　Processing　Unit）等によって、利用者端末１０内部の記憶装置に記憶されている各種プログラムがＲＡＭ（Random　Access　Memory)を作業領域として実行されることにより実現される。例えば、この各種プログラムには、利用者端末１０にインストールされたアプリケーションのプログラムが含まれる。例えば、この各種プログラムには、情報処理装置１００から送信された顔画像を含むコンテンツを表示させるアプリケーションのプログラムが含まれる。また、制御部１４は、例えば、ＡＳＩＣ（Application　Specific　Integrated　Circuit）やＦＰＧＡ（Field　Programmable　Gate　Array）等の集積回路により実現される。
　図４に示すように、制御部１４は、受信部１４１と、送信部１４２とを有し、以下に説明する情報処理の作用を実現または実行する。
（受信部１４１）
　受信部１４１は、情報処理装置１００等の他の情報処理装置から各種情報を受信する。例えば、受信部１４１は、利用者が選択した顔画像に用いられた投稿者のメイクと同様のメイクが適用された利用者の顔画像と、メイクに用いたコスメの説明コンテンツとを含むコンテンツを表示させるための情報を受信する。
（送信部１４２）
　送信部１４２は、情報処理装置１００等の他の情報処理装置へ各種情報を送信する。例えば、送信部１４２は、投稿者のメイクが自身に似合うか否かを確認するために、利用者が選択した顔画像の情報を送信する。
〔４．投稿者端末の構成〕
　次に、図５を用いて、実施形態に係る投稿者端末２０の構成について説明する。図５は、実施形態に係る投稿者端末２０の構成例を示す図である。図５に示すように、投稿者端末２０は、通信部２１と、入力部２２と、出力部２３と、制御部２４とを有する。
（通信部２１）
　通信部２１は、例えば、ＮＩＣ等によって実現される。そして、通信部２１は、所定のネットワークＮと有線又は無線で接続され、所定のネットワークＮを介して、情報処理装置１００等との間で情報の送取得を行う。
（入力部２２）
　入力部２２は、投稿者からの各種操作を受け付ける。図２では、投稿者Ｐ１１及び投稿者Ｐ１２からの各種操作を受け付ける。例えば、入力部２２は、タッチパネル機能により表示面を介して投稿者からの各種操作を受け付けてもよい。また、入力部２２は、投稿者端末２０に設けられたボタンや、投稿者端末２０に接続されたキーボードやマウスからの各種操作を受け付けてもよい。
（出力部２３）
　出力部２３は、例えば液晶ディスプレイや有機ＥＬディスプレイ等によって実現されるタブレット端末等の表示画面であり、各種情報を表示するための表示装置である。例えば、出力部２３は、情報処理装置１００から送信された情報を表示する。
（制御部２４）
　制御部２４は、例えば、コントローラであり、ＣＰＵやＭＰＵ等によって、投稿者端末２０内部の記憶装置に記憶されている各種プログラムがＲＡＭを作業領域として実行されることにより実現される。例えば、この各種プログラムには、投稿者端末２０にインストールされたアプリケーションのプログラムが含まれる。例えば、この各種プログラムには、投稿者の操作に応じて投稿者の顔画像を送信するアプリケーションのプログラムが含まれる。また、制御部１４は、例えば、ＡＳＩＣやＦＰＧＡ等の集積回路により実現される。
　図５に示すように、制御部２４は、受信部２４１と、送信部２４２とを有し、以下に説明する情報処理の作用を実現または実行する。
（受信部２４１）
　受信部２４１は、情報処理装置１００等の他の情報処理装置から各種情報を受信する。例えば、受信部２４１は、投稿者が提供した顔画像を見てメイクを自身の顔画像に適用した利用者が、適用されたメイクに対応したコスメを所定の電子商店街で購入した場合には、利用者の購入に応じて決定された投稿者が受け取ることができる報酬に関する情報を受信する。なお、受信部２４１は、利用者の購入に応じた報酬を投稿者が受け取るための情報を受信してもよい。
（送信部２４２）
　送信部２４２は、情報処理装置１００等の他の情報処理装置へ各種情報を送信する。例えば、送信部１４２は、投稿者の操作に応じて投稿者の顔画像を送信する。
〔５．情報処理装置の構成〕
　次に、図６を用いて、実施形態に係る情報処理装置１００の構成について説明する。図６は、実施形態に係る情報処理装置１００の構成例を示す図である。図６に示すように、情報処理装置１００は、通信部１１０と、記憶部１２０と、制御部１３０とを有する。なお、情報処理装置１００は、情報処理装置１００の管理者から各種操作を受け付ける入力部（例えば、キーボードやマウス等）や、各種情報を表示するための表示部（例えば、液晶ディスプレイ等）を有してもよい。
（通信部１１０）
　通信部１１０は、例えば、ＮＩＣ等によって実現される。そして、通信部１１０は、ネットワークＮと有線又は無線で接続され、ネットワークＮを介して、利用者端末１０等との間で情報の送取得を行う。
（記憶部１２０）
　記憶部１２０は、例えば、ＲＡＭ、フラッシュメモリ等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。図６に示すように、記憶部１２０は、投稿者情報記憶部１２１と、コスメ情報記憶部１２２とを有する。
　投稿者情報記憶部１２１は、投稿者の顔画像を記憶する。ここで、図７に、実施形態に係る投稿者情報記憶部１２１の一例を示す。図７に示すように、投稿者情報記憶部１２１は、「投稿者ＩＤ」、「顔画像」といった項目を有する。
　「投稿者ＩＤ」は、投稿者を識別するための識別情報を示す。「顔画像」は、投稿者が初回利用時等に登録した投稿者の素顔の顔画像を示す。図７に示した例では、「顔画像」に「顔画像＃１１」や「顔画像＃１２」といった概念的な情報が格納される例を示したが、実際には、画像データ等が格納される。また、「顔画像」には、例えば、画像データが所在するＵＲＬや、格納場所を示すファイルパス名等が格納されてもよい。
　すなわち、図７では、投稿者「Ｐ１１」によって識別される投稿者の素顔の顔画像が「顔画像＃１１」である例を示す。
　コスメ情報記憶部１２２は、投稿者がメイクに用いたコスメの情報を記憶する。図８に示すように、コスメ情報記憶部１２２は、「投稿者ＩＤ」、「顔画像」、「コスメ一式」といった項目を有する。
　「投稿者ＩＤ」は、投稿者を識別するための識別情報を示す。「顔画像」は、投稿者が投稿した顔画像を示す。図８に示した例では、「顔画像」に「顔画像＃２１」や「顔画像＃２２」といった概念的な情報が格納される例を示したが、実際には、画像データ等が格納される。また、「顔画像」には、例えば、画像データが所在するＵＲＬや、格納場所を示すファイルパス名等が格納されてもよい。「コスメ一式」は、投稿者がメイクに用いたコスメ一式を示す。
　すなわち、図８では、投稿者「Ｐ１１」によって識別される投稿者が投稿した顔画像が「顔画像＃２１」であり、投稿者がメイクに用いたコスメ一式が「ブランド〇〇の商品Ａ１（リップ）、ブランド××の商品Ａ２（ファンデーション）、・・・」である例を示す。なお、括弧内はコスメの種別を示す。
（制御部１３０）
　制御部１３０は、コントローラであり、例えば、ＣＰＵやＭＰＵ等によって、情報処理装置１００内部の記憶装置に記憶されている各種プログラムがＲＡＭを作業領域として実行されることにより実現される。また、制御部１３０は、コントローラであり、例えば、ＡＳＩＣやＦＰＧＡ等の集積回路により実現される。
　図６に示すように、制御部１３０は、取得部１３１と、生成部１３２と、適用部１３３と、提供部１３４と、決定部１３５とを有し、以下に説明する情報処理の作用を実現または実行する。なお、制御部１３０の内部構成は、図６に示した構成に限られず、後述する情報処理を行う構成であれば他の構成であってもよい。
（取得部１３１）
　取得部１３１は、外部の情報処理装置から各種情報を取得する。取得部１３１は、利用者端末１０等の他の情報処理装置から各種情報を取得する。
　取得部１３１は、記憶部１２０から各種情報を取得する。また、取得部１３１は、取得した各種情報を記憶部１２０に格納する。
　取得部１３１は、所定のサービス上で、投稿者により投稿された顔画像の中から利用者が選択した顔画像の情報を取得する。
　取得部１３１は、利用者が選択した顔画像に関して投稿者がメイクに用いたコスメの情報を取得する。
（生成部１３２）
　生成部１３２は、取得部１３１により取得された情報に基づいて、ＰＳＧＡＮ等の手法を用いて、利用者が選択した顔画像に用いられた投稿者のメイクと同様のメイクを顔画像に適用した顔画像を生成するためのメイク情報を生成する。また、生成部１３２は、利用者が選択した顔画像に関して、投稿者がメイクをしたメイクの順番が特定された場合には、メイクの順番を反映させたメイク情報を生成してもよい。
　生成部１３２は、後述の適用部１３３によりメイク情報が適用された顔画像と、取得部１３１により取得された情報に基づいて特定されたコスメの説明コンテンツとを含むコンテンツを表示させるための情報を生成する。
（適用部１３３）
　適用部１３３は、生成部１３２により生成されたメイク情報を、適用対象に選択された利用者の顔画像に適用することにより、利用者端末１０に表示させる顔画像を生成する。
　適用部１３３は、利用者の顔情報や身体情報やコスメの購入履歴等に基づいて決定された優先順位に基づいて、優先順位が高いほど優先的に選択又は表示された顔画像の中から選択された顔画像から生成されたメイク情報を適用することにより、利用者端末１０に表示させる顔画像を生成する。
　適用部１３３は、顔画像に対するアクセス履歴や購入履歴や評価履歴等の顔画像の人気度合いを示す指標に基づいて決定された優先順位に基づいて、優先順位が高いほど優先的に選択又は表示された顔画像の中から選択された顔画像から生成されたメイク情報を適用することにより、利用者端末１０に表示させる顔画像を生成する。
　適用部１３３は、投稿者がメイクに用いたコスメの合計価格に基づいて決定された優先順位に基づいて、優先順位が高いほど優先的に選択又は表示された顔画像の中から選択された顔画像から生成されたメイク情報を適用することにより、利用者端末１０に表示させる顔画像を生成する。
（提供部１３４）
　提供部１３４は、生成部１３２により生成された、コンテンツを表示させるための情報を利用者端末１０へ送信する。利用者端末１０は、提供部１３４により送信された情報を受信すると、生成部１３２により生成された情報に対応したコンテンツを表示させる。
（決定部１３５）
　決定部１３５は、提供部１３４により提供されたコンテンツに紐づくコスメを利用者が購入したか否かを判定し、購入したと判定した場合には、利用者が選択した顔画像を投稿した投稿者に、利用者の購入に応じた報酬を付与すると決定する。そして、提供部１３４は、利用者の購入に応じた報酬を投稿者に付与するための処理を行う。また、決定部１３５は、利用者の購入に応じた報酬を投稿者が受け取るための情報を送信すると決定してもよい。この場合、提供部１３４は、利用者の購入に応じた報酬を投稿者が受け取るための情報を送信する。また、決定部１３５は、報酬を投稿者の口座へ送金すると決定してもよい。この場合、提供部１３４は、報酬を投稿者の口座へ送金するための処理を行う。
〔６．情報処理のフロー〕
　次に、図９を用いて、実施形態に係る情報処理システム１による情報処理の手順について説明する。図９は、実施形態に係る情報処理システム１による情報処理の手順を示すフローチャートである。
　図９に示すように、情報処理装置１００は、所定のサービス上で、投稿者により投稿された顔画像の中から利用者が選択した顔画像の情報を取得する（ステップＳ２０１）。
　情報処理装置１００は、取得した情報に基づいて、利用者が選択した顔画像に用いられた投稿者のメイクと同様のメイクを顔画像に適用した顔画像を生成するためのメイク情報を生成する（ステップＳ２０２）。
　情報処理装置１００は、生成したメイク情報を、適用対象に選択された利用者の顔画像に適用することにより、利用者に提供する顔画像を生成する（ステップＳ２０３）。
　情報処理装置１００は、生成した顔画像と投稿者がメイクに用いたコスメの説明コンテンツとを含むコンテンツを表示させるための情報を送信する（ステップＳ２０４）。
〔７．変形例〕
　上述した実施形態に係る情報処理システム１は、上記実施形態以外にも種々の異なる形態にて実施されてよい。そこで、以下では、情報処理システム１の他の実施形態について説明する。
　上記実施形態では、メイク情報が適用された適用後の利用者の顔画像が、利用者端末１０に表示される場合を示したが、この例に限られない。例えば、利用者とオンライン上で通信を行う他者の端末装置に表示されてもよい。例えば、利用者がオンライン上で会議に参加するために、利用者が投稿者の顔画像を選択すると、選択した顔画像に関するメイクが、オンライン上で会議に参加する利用者の顔に疑似的に適用されて、利用者が選択した顔画像に関するメイクが適用された顔画像が、他者の端末装置に表示されてもよい。そして、利用者が投稿者のメイクを用いて会議に参加すると、利用時間や利用頻度等の利用状況に応じて利用者に課金してもよい。そして、利用者に課金した課金額の一部を報酬として投稿者に付与するための処理を行ってもよい。これにより、オンライン上ではメイクされた顔が他者に表示されるため、利用者は素顔のまま会議に参加することができる。
　この場合、適用部１３３は、生成部１３２により生成されたメイク情報を、撮像中の利用者の顔画像にリアルタイムに適用することにより、他者の端末装置に表示させる顔画像をリアルタイムに生成する。生成部１３２は、適用部１３３により生成された顔画像を用いて、利用者の顔画像にメイク情報が適用された顔画像を、他者の端末装置に表示させるための情報をリアルタイムに生成する。提供部１３４は、生成部１３２により生成された情報を送信することで、適用部１３３によりメイク情報が適用された顔画像をオンライン上でリアルタイムに利用者と通信を行う他者へ配信する。決定部１３５は、適用部１３３により生成された顔画像がオンライン上で利用された利用状況（例えば、利用時間や利用頻度）に応じて、利用者が選択した顔画像を投稿した投稿者に付与する報酬を決定する。換言すると、決定部１３５は、利用者の顔画像にメイク情報が適用された顔画像の利用状況に応じて、メイク情報の生成元となる顔画像を投稿した投稿者に付与する報酬を決定する。なお、適用等は、利用者のクラウド上で行われてもよく、この場合には、提供部１３４は、例えばメイク情報の利用権のみを提供してもよい。そして、利用者は、提供された利用権を行使することで、利用者の顔画像にメイク情報が適用された顔画像を、他者の端末装置に表示させてもよい。
〔８．効果〕
　上述してきたように、実施形態に係る情報処理装置１００は、生成部１３２と、適用部１３３と、提供部１３４とを有する。生成部１３２は、所定のメイクをした投稿者の顔画像から、所定のメイクと同様のメイクを顔画像に適用した顔画像を生成するためのメイク情報を生成する。適用部１３３は、所定の条件を満たす投稿者により投稿された顔画像の中から利用者が選択した顔画像から生成されたメイク情報を、利用者の顔画像に対して適用する。提供部１３４は、適用部１３３によりメイク情報が適用された顔画像とメイクに用いた物品の説明コンテンツとを示すコンテンツを利用者に提供する。
　これにより、実施形態に係る情報処理装置１００は、他者のメイクが自身に似合うか否かを即時的に確認したいといった利用者の欲求に適切に応えることができる。
　また、コンテンツは、利用者の操作により、物品の購入が可能な所定の電子商店街へアクセスさせる情報を含むコンテンツである。
　これにより、実施形態に係る情報処理装置１００は、他者がメイクに用いた物品の購入が可能な所定の電子商店街への送客を適切に行うことができる。
　また、実施形態に係る情報処理装置１００は、利用者が物品を所定の電子商店街で購入した場合には、利用者が選択した顔画像を投稿した投稿者に、利用者の購入に応じた報酬を付与すると決定する決定部１３５を更に有する。
　これにより、実施形態に係る情報処理装置１００は、投稿者に対して顔画像の投稿の動機付けを適切に行うことができる。
　また、適用部１３３は、所定の基準に基づいて優先的に選択又は表示された顔画像の中から選択された顔画像から生成されたメイク情報を適用する。
　これにより、実施形態に係る情報処理装置１００は、所定の基準に基づいて利用者に対して適切な情報を提供することができるため、利用者の欲求により適切に応えることができる。
　また、適用部１３３は、利用者の顔情報、身体情報又は物品の購入履歴の少なくともいずれかに基づいて決定された優先順位に基づいて、優先順位が高いほど優先的に選択又は表示された顔画像の中から選択された顔画像から生成されたメイク情報を適用する。
　これにより、実施形態に係る情報処理装置１００は、顔情報や身体情報や物品の購入履歴等に基づいて利用者に対して適切な情報を提供することができるため、利用者の欲求により適切に応えることができる。
　また、適用部１３３は、顔画像に対するアクセス履歴、購入履歴又は評価履歴の少なくともいずれかに基づいて決定された優先順位に基づいて、優先順位が高いほど優先的に選択又は表示された顔画像の中から選択された顔画像から生成されたメイク情報を適用する。
　これにより、実施形態に係る情報処理装置１００は、顔画像に対するアクセス履歴や購入履歴や評価履歴等に基づいて利用者に対して適切な情報を提供することができるため、利用者の欲求により適切に応えることができる。
　また、適用部１３３は、物品の合計価格に基づいて決定された優先順位に基づいて、優先順位が高いほど優先的に選択又は表示された顔画像の中から選択された顔画像から生成されたメイク情報を適用する。
　これにより、実施形態に係る情報処理装置１００は、物品の合計価格に基づいて利用者に対して適切な情報を提供することができるため、利用者の欲求により適切に応えることができる。
〔９．ハードウェア構成〕
　また、上述してきた実施形態に係る利用者端末１０、投稿者端末２０及び情報処理装置１００は、例えば、図１０に示すような構成のコンピュータ１０００によって実現される。図１０は、利用者端末１０、投稿者端末２０及び情報処理装置１００の機能を実現するコンピュータの一例を示すハードウェア構成図である。コンピュータ１０００は、ＣＰＵ１１００、ＲＡＭ１２００、ＲＯＭ１３００、ＨＤＤ１４００、通信インターフェイス（Ｉ／Ｆ）１５００、入出力インターフェイス（Ｉ／Ｆ）１６００、及びメディアインターフェイス（Ｉ／Ｆ）１７００を有する。
　ＣＰＵ１１００は、ＲＯＭ１３００またはＨＤＤ１４００に格納されたプログラムに基づいて動作し、各部の制御を行う。ＲＯＭ１３００は、コンピュータ１０００の起動時にＣＰＵ１１００によって実行されるブートプログラムや、コンピュータ１０００のハードウェアに依存するプログラム等を格納する。
　ＨＤＤ１４００は、ＣＰＵ１１００によって実行されるプログラム、及び、かかるプログラムによって使用されるデータ等を格納する。通信インターフェイス１５００は、所定の通信網を介して他の機器からデータを取得してＣＰＵ１１００へ送り、ＣＰＵ１１００が生成したデータを所定の通信網を介して他の機器へ送信する。
　ＣＰＵ１１００は、入出力インターフェイス１６００を介して、ディスプレイやプリンタ等の出力装置、及び、キーボードやマウス等の入力装置を制御する。ＣＰＵ１１００は、入出力インターフェイス１６００を介して、入力装置からデータを取得する。また、ＣＰＵ１１００は、生成したデータを、入出力インターフェイス１６００を介して出力装置へ出力する。
　メディアインターフェイス１７００は、記録媒体１８００に格納されたプログラムまたはデータを読み取り、ＲＡＭ１２００を介してＣＰＵ１１００に提供する。ＣＰＵ１１００は、かかるプログラムを、メディアインターフェイス１７００を介して記録媒体１８００からＲＡＭ１２００上にロードし、ロードしたプログラムを実行する。記録媒体１８００は、例えばＤＶＤ（Digital　Versatile　Disc）、ＰＤ（Phase　change　rewritable　Disk）等の光学記録媒体、ＭＯ（Magneto-Optical　disk）等の光磁気記録媒体、テープ媒体、磁気記録媒体、または半導体メモリ等である。
　例えば、コンピュータ１０００が実施形態に係る利用者端末１０、投稿者端末２０及び情報処理装置１００として機能する場合、コンピュータ１０００のＣＰＵ１１００は、ＲＡＭ１２００上にロードされたプログラムを実行することにより、制御部１４、２４及び１３０の機能を実現する。コンピュータ１０００のＣＰＵ１１００は、これらのプログラムを記録媒体１８００から読み取って実行するが、他の例として、他の装置から所定の通信網を介してこれらのプログラムを取得してもよい。
〔１０．その他〕
　また、上記実施形態において説明した各処理のうち、自動的に行われるものとして説明した処理の全部または一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。
　また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。
　また、上述してきた実施形態は、処理内容を矛盾させない範囲で適宜組み合わせることが可能である。
　以上、本願の実施形態のいくつかを図面に基づいて詳細に説明したが、これらは例示であり、発明の開示の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。
　また、上述してきた「部（section、module、unit）」は、「手段」や「回路」などに読み替えることができる。例えば、取得部は、取得手段や取得回路に読み替えることができる。
　　　１　情報処理システム
　　１０　利用者端末
　　１１　通信部
　　１２　入力部
　　１３　出力部
　　１４　制御部
　　２０　投稿者端末
　　２１　通信部
　　２２　入力部
　　２３　出力部
　　２４　制御部
　１００　情報処理装置
　１１０　通信部
　１２０　記憶部
　１２１　投稿者情報記憶部
　１２２　コスメ情報記憶部
　１３０　制御部
　１３１　取得部
　１３２　生成部
　１３３　適用部
　１３４　提供部
　１３５　決定部
　１４１　受信部
　１４２　送信部
　２４１　受信部
　２４２　送信部
　Ｎ　　　ネットワーク

Claims (9)

  1. 　所定のメイクをした投稿者の顔画像から、当該所定のメイクと同様のメイクを顔画像に適用した顔画像を生成するためのメイク情報を生成する生成部と、
    　所定の条件を満たす投稿者により投稿された顔画像の中から利用者が選択した顔画像から生成されたメイク情報を、当該利用者の顔画像に対して適用する適用部と、
    　前記適用部によりメイク情報が適用された顔画像と前記メイクに用いた物品の説明コンテンツとを示すコンテンツを前記利用者に提供する提供部と、
    　を有することを特徴とする情報処理装置。
  2. 　前記コンテンツは、前記利用者の操作により、前記物品の購入が可能な所定の電子商店街へアクセスさせる情報を含むコンテンツである
    　ことを特徴とする請求項１に記載の情報処理装置。
  3. 　前記利用者が前記物品を前記所定の電子商店街で購入した場合には、前記利用者が選択した前記顔画像を投稿した投稿者に、前記利用者の当該購入に応じた報酬を付与すると決定する決定部
    　を更に有することを特徴とする請求項２に記載の情報処理装置。
  4. 　前記適用部は、
    　所定の基準に基づいて優先的に選択又は表示された前記顔画像の中から選択された顔画像から生成された前記メイク情報を適用する
    　ことを特徴とする請求項１～３のいずれか１項に記載の情報処理装置。
  5. 　前記適用部は、
    　前記利用者の顔情報、身体情報又は前記物品の購入履歴の少なくともいずれかに基づいて決定された優先順位に基づいて、当該優先順位が高いほど優先的に選択又は表示された前記顔画像の中から選択された顔画像から生成された前記メイク情報を適用する
    　ことを特徴とする請求項４に記載の情報処理装置。
  6. 　前記適用部は、
    　前記顔画像に対するアクセス履歴、購入履歴又は評価履歴の少なくともいずれかに基づいて決定された優先順位に基づいて、当該優先順位が高いほど優先的に選択又は表示された前記顔画像の中から選択された顔画像から生成された前記メイク情報を適用する
    　ことを特徴とする請求項４に記載の情報処理装置。
  7. 　前記適用部は、
    　前記物品の合計価格に基づいて決定された優先順位に基づいて、当該優先順位が高いほど優先的に選択又は表示された前記顔画像の中から選択された顔画像から生成された前記メイク情報を適用する
    　ことを特徴とする請求項４に記載の情報処理装置。
  8. 　コンピュータが実行する情報処理方法であって、
    　所定のメイクをした投稿者の顔画像から、当該所定のメイクと同様のメイクを顔画像に適用した顔画像を生成するためのメイク情報を生成する生成工程と、
    　所定の条件を満たす投稿者により投稿された顔画像の中から利用者が選択した顔画像から生成されたメイク情報を、当該利用者の顔画像に対して適用する適用工程と、
    　前記適用工程によりメイク情報が適用された顔画像と前記メイクに用いた物品の説明コンテンツとを示すコンテンツを前記利用者に提供する提供工程と、
    　を含むことを特徴とする情報処理方法。
  9. 　所定のメイクをした投稿者の顔画像から、当該所定のメイクと同様のメイクを顔画像に適用した顔画像を生成するためのメイク情報を生成する生成手順と、
    　所定の条件を満たす投稿者により投稿された顔画像の中から利用者が選択した顔画像から生成されたメイク情報を、当該利用者の顔画像に対して適用する適用手順と、
    　前記適用手順によりメイク情報が適用された顔画像と前記メイクに用いた物品の説明コンテンツとを示すコンテンツを前記利用者に提供する提供手順と、
    　をコンピュータに実行させることを特徴とする情報処理プログラム。
PCT/JP2023/003589 2022-03-04 2023-02-03 情報処理装置、情報処理方法及び情報処理プログラム Ceased WO2023166910A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CA3253788A CA3253788A1 (en) 2022-03-04 2023-02-03 INFORMATION PROCESSING DEVICE, INFORMATION PROCESS AND INFORMATION PROCESSING PROGRAM
CN202380024828.8A CN118805195A (zh) 2022-03-04 2023-02-03 信息处理装置、信息处理方法以及信息处理程序
US18/842,557 US20250182359A1 (en) 2022-03-04 2023-02-03 Information processing apparatus, information processing method, and information processing program
EP23763172.6A EP4488921A4 (en) 2022-03-04 2023-02-03 INFORMATION PROCESSING DEVICE, METHOD AND PROGRAM

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022-033559 2022-03-04
JP2022033559A JP7308317B1 (ja) 2022-03-04 2022-03-04 情報処理装置、情報処理方法及び情報処理プログラム

Publications (1)

Publication Number Publication Date
WO2023166910A1 true WO2023166910A1 (ja) 2023-09-07

Family

ID=87072577

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2023/003589 Ceased WO2023166910A1 (ja) 2022-03-04 2023-02-03 情報処理装置、情報処理方法及び情報処理プログラム

Country Status (6)

Country Link
US (1) US20250182359A1 (ja)
EP (1) EP4488921A4 (ja)
JP (2) JP7308317B1 (ja)
CN (1) CN118805195A (ja)
CA (1) CA3253788A1 (ja)
WO (1) WO2023166910A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2025171073A (ja) * 2024-05-08 2025-11-20 株式会社Zozo 情報処理装置、情報処理方法及び情報処理プログラム
JP2025171074A (ja) * 2024-05-08 2025-11-20 株式会社Zozo 情報処理装置、情報処理方法及び情報処理プログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014149697A (ja) * 2013-02-01 2014-08-21 Panasonic Corp メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
WO2018008138A1 (ja) * 2016-07-08 2018-01-11 株式会社オプティム 化粧品情報提供システム、化粧品情報提供装置、化粧品情報提供方法、及びプログラム
WO2018012136A1 (ja) * 2016-07-14 2018-01-18 パナソニックＩｐマネジメント株式会社 メイクアップ支援装置およびメイクアップ支援方法
CN112819718A (zh) * 2021-02-01 2021-05-18 深圳市商汤科技有限公司 图像处理方法及装置、电子设备及存储介质
US20210307492A1 (en) * 2020-04-01 2021-10-07 Magicom Inc. Smart-mirror display system

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SI24600A (sl) 2013-12-31 2015-07-31 Vastok D.O.O. Postopek priprave in nakupa individualizirane kozmetike pod krovno blagovno znamko ter naprava po tem postopku
WO2018106619A2 (en) * 2016-12-06 2018-06-14 G Tort Selfee social media nan0-influencer tracking and reward system and method
KR20200026808A (ko) 2017-07-13 2020-03-11 시쉐이도 아메리카스 코포레이션 가상 얼굴 메이크업 제거, 빠른 얼굴 검출, 및 랜드마크 추적
US20190166980A1 (en) * 2017-12-01 2019-06-06 Perfect Corp. Systems and Methods for Identification and Virtual Application of Cosmetic Products
JP2019133617A (ja) * 2018-01-26 2019-08-08 ＨｏｗＴｗｏ株式会社 商品信用供与管理システム及びプログラム
KR20200107474A (ko) * 2019-03-08 2020-09-16 주식회사 에이아이네이션 뷰티 스코어 기반의 개인화된 화장 스타일 추천 서비스 제공 장치

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014149697A (ja) * 2013-02-01 2014-08-21 Panasonic Corp メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
JP5991536B2 (ja) 2013-02-01 2016-09-14 パナソニックＩｐマネジメント株式会社 メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
WO2018008138A1 (ja) * 2016-07-08 2018-01-11 株式会社オプティム 化粧品情報提供システム、化粧品情報提供装置、化粧品情報提供方法、及びプログラム
WO2018012136A1 (ja) * 2016-07-14 2018-01-18 パナソニックＩｐマネジメント株式会社 メイクアップ支援装置およびメイクアップ支援方法
US20210307492A1 (en) * 2020-04-01 2021-10-07 Magicom Inc. Smart-mirror display system
CN112819718A (zh) * 2021-02-01 2021-05-18 深圳市商汤科技有限公司 图像处理方法及装置、电子设备及存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
See also references of EP4488921A4
W. JIANGS. LIUC. GAOJ. CAOR. HEJ. FENGS. YAN, PSGAN: POSE AND EXPRESSION ROBUST SPATIAL-AWARE CAN FOR CUSTOMIZABLE MAKEUP TRANSFER, 24 January 2022 (2022-01-24)

Also Published As

Publication number Publication date
US20250182359A1 (en) 2025-06-05
JP7308317B1 (ja) 2023-07-13
CA3253788A1 (en) 2025-03-03
JP2023128892A (ja) 2023-09-14
EP4488921A4 (en) 2025-10-29
JP7662708B2 (ja) 2025-04-15
JP2023129404A (ja) 2023-09-14
EP4488921A1 (en) 2025-01-08
CN118805195A (zh) 2024-10-18

Similar Documents

Publication Publication Date Title
Kang et al. How mobile augmented reality digitally transforms the retail sector: examining trust in augmented reality apps and online/offline store patronage intention
US11281366B2 (en) System and method for providing highly personalized information regarding products and services
Luna-Nevarez et al. The rise of the virtual reality (VR) marketplace: exploring the antecedents and consequences of consumer attitudes toward V-commerce
CN105205089B (zh) 账户推荐
US9953357B2 (en) Sharing an ensemble of items
US10354311B2 (en) Determining preferences of an ensemble of items
JP7162417B2 (ja) 推定装置、推定方法、及び推定プログラム
JP7662708B2 (ja) 情報処理装置、情報処理方法及び情報処理プログラム
Liu et al. The impact of augmented reality (AR) technology on consumers’ purchasing decision processes
AU2019240635A1 (en) Targeted marketing system and method
JP7308318B1 (ja) 情報処理装置、情報処理方法及び情報処理プログラム
Sharma How business-to-business and business-to-consumer marketers can future-proof their digital marketing strategies
WO2022050096A1 (ja) 情報処理装置、情報処理方法及びプログラム
KR102298101B1 (ko) 성인용품 판매시스템 및 그 시스템의 구동방법
JP7445708B2 (ja) 情報処理装置、情報処理方法及び情報処理プログラム
CN111105283A (zh) 数据处理方法、装置和机器可读介质
JP7241842B1 (ja) 情報処理装置、情報処理方法、及び情報処理プログラム
Xu et al. Enhancing collaborative shopping experience through interactive personalized avatars and shared gaze in a multi-user augmented reality environment
Herath et al. Customize your clothing through 3D models: a new trend in the fashion industry
US20130332320A1 (en) Virtual reality-based environments including user avatars
KR102480928B1 (ko) 메타버스 및 빅데이터 기반의 상품 구매 서비스 제공 서버 및 방법
Schöni Digital marketing in retail: what are the benefits a Swiss premium department store could reap when adapting to the changing environment of digitization? A maturity model
JP2025098794A (ja) 情報処理装置、情報処理方法及び情報処理プログラム
Yang An experiment on the effect of augmented reality on user experience in digitized shopping
KR20240133230A (ko) 위치 기반 인증을 이용한 리워드 제공 시스템 및 제공 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23763172

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 12024551936

Country of ref document: PH

WWE Wipo information: entry into national phase

Ref document number: 18842557

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 202380024828.8

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 11202405740U

Country of ref document: SG

WWE Wipo information: entry into national phase

Ref document number: 2023763172

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2023763172

Country of ref document: EP

Effective date: 20241004

WWP Wipo information: published in national office

Ref document number: 18842557

Country of ref document: US