Renderfarm dispo pour du calcul... [Archives]

ridindave

31/10/2006, 23h06

Dans le cadre de mon taff, jai mis en place une renderfarm, composée d'un nombre de machine allant de 5-6 jusqu'à 15 machines (du G5 bi ou quad, quelques G4 bi, et du Mac intel).
Je tire régulièrement dessus (je serais bien bête de m'en priver!), mais pas de manière constante, et il y a encore de belles périodes d'inactivité à combler...

Par souci de confidentialité et de sécurité, je ne peux rendre le serveur accessible à tous, mais je suis disposé à faire suivre vos projets, si vous avez du calcul d'animation à cruncher...

lecynophile

31/10/2006, 23h08

Tu propose de nous faire nos lourds rendus ? C'est bien ca ? :love: :love:

johnc

01/11/2006, 00h05

:efface:

interessant comme proposition...

-pendant la nuit...? le jour?
-gratos?
-via le net ? :deal:

je te suis :mrgreen:

plarot_1

01/11/2006, 00h08

Et bien meme si mon ti MacTel tient la route pour mes petits rendus, c'est bien gentil à toi :poucehaut: :poucehaut:
:prie:

ridindave

01/11/2006, 10h57

Evidemment gratos! De jour comme de nuit. La seule chose, c'est qu'évidemment mon boulot reste prioritaire. Je ne garantis donc aucunement les délais, mais vu le nombre de machines, ça devrait qd même dépoter la plupart du temps.

Reste à établir des procédures simple de dépôt de projets, puis de récupération des rendus.
Il va de soi que vous aurez préalablement vérifié tous vos settings de render, et que je n'aurai qu'à placer le fichier C4D et les textures sur le serveur de rendus.

J'essaierai de mettre en place un serveur ftp sur place la semaine prochaine. En attendant vous pouvez déposer sur mon perso : grandeurnature.dnsalias.net

malindis

01/11/2006, 17h08

:bounce: :bounce: :bounce:

ça c'est top... moi qui ai justement des problème de temps de rendu :-)

Non, je rigole... il faut que j'arrive à simplifier mon image et mes setting et ça ira bien mieux, mais en tout cas merci pour cette proposition alléchantes

:odile:

lenogre

02/11/2006, 09h26

Heureuse initiative !

Tidus*

05/11/2006, 16h59

http://www.frenchcinema4d.com/forum/index.php?topic=17797
:wink:

slobade

05/11/2006, 17h58

Alors la plus je me balade sur ce forum plus je trouve des gens sympas :efface:
La une seul chose a dire bravo :prie: :prie: :prie:

Mon ordi tien pas vraimen la route niveau puissance mais il a le merite d'être (presque) stable sauf que ces temps-ci on a des problème de secteur et la ta proposition me sauve vraiment la :poucehaut:

kryptogram

09/11/2006, 16h52

Salut Rindidave,

Quel pied de croiser des gens comme ça :poucehaut: ! Je suis newbie en 3d, et je taffe actuellement sur un big logo (qui me prend la tête, mais j'aime bien me manger le citron)* :mrgreen: ... et comme il y a bcp de glassy dans mon WIP (réfraction, quelques caustiques, environnement pyro), j'ai le temps d'emmener ma femme au resto à chaque fois que je lance un rendu (mon pc est une catastrophe pour la 3d, pas du tout adapté)...

Si tu veux bien, et si ta proposition est toujours ok, je suis intéressé et ne manquerai pas de te contacter en cas de nécessité de ressources (et j'emmènerai qd même ma moitié au resto, mais pour fêter ça !)* :D

Dès que mon WIP aura l'air de qqch, je post, c'est promis.

A+
Kryptogram

ridindave

11/11/2006, 11h35

Mes machines n'attendent que vos projets...

NiKo

11/11/2006, 11h56

Proposition extremement sympathique ! :efface:

Comment cela fonctionne-t-il? Comment ça ce passe pour l'upload des fichiers et textures? On se contente de t'envoyer le projet, ou bien on passerai directement par le net render?

ethylen

11/11/2006, 13h12

super propositioon en effet...
:prie: :poucehaut:
je pense avoir vesoin de tes services dans pas longtemps, pour une jolie petite animation de produit ( regarde mon wip advanced product design.. :wink: )

Psycho_Guedin

12/11/2006, 00h36

C vraiment sympa de ta part dis donc !
C'est grace a des gens comme toi que la communauté de FC4D et si sympathique .
Merci beaucoup :poucehaut:

ddblues

13/11/2006, 08h44

BRAVO! :boss:

y a que ça à dire et sûrement merci d'avance. du coup je vais regarder comment ça marche pour le rendu en réseau... à très bientôt

Angeylus

13/11/2006, 18h33

C'est super sympa comme initiative. Comme l'a dit NiKo, ça se passe comment pour te refiler le bordel ? :mrgreen:

Rompower

14/11/2006, 02h49

bonsoir, c'est toujours d'actualité?

j'aurais peut être une petite anim à rendre dans les 2 semaines qui suivent.

en tous cas merci pour la proposition, c'est cool! :poucehaut: :prie:

ridindave

14/11/2006, 11h26

Il suffit de déposer un .zip avec tous vos fichiers là : http://grandeurnature.dnsalias.net/public/uploads/

guesswhat

17/11/2006, 18h08

Bonjour,

Dans le cadre de mon travail de business developer, je commence à m'interresser au milieu des effets spéciaux et animations 3D pour la partie calcul. Je travaille pour une société qui fait du grid computing. On s'adresse donc à des sociétés qui ont besoin d'optimiser l'utilsation de leurs ressources informatiques pour les calculs gourmands en CPU. Cette techno est plus souvent connue sous workload management ou batch scheduler
J'aimerais donc comprendre un peu votre milieu.
Est-ce que renderfarm c'est la meme chose que computefarm?
Dans quelles situations vous êtes confrontés à un manque de puissance CPU ?
Quels sont les différentes équipes concernées par ce problème ?

Merci pour votre aide ( c'est difficile d'avoir des personnes au tel )

guesswhat

Dans le cadre de mon taff, jai mis en place une renderfarm, composée d'un nombre de machine allant de 5-6 jusqu'à 15 machines (du G5 bi ou quad, quelques G4 bi, et du Mac intel).
Je tire régulièrement dessus (je serais bien bête de m'en priver!), mais pas de manière constante, et il y a encore de belles périodes d'inactivité à combler...

Par souci de confidentialité et de sécurité, je ne peux rendre le serveur accessible à tous, mais je suis disposé à faire suivre vos projets, si vous avez du calcul d'animation à cruncher...

Sir Gong

17/11/2006, 18h58

Salut Guesswhat et bienvenue parmi nous.

Est-ce que renderfarm c'est la meme chose que computefarm?C'est quoi computefarm ? :D

Dans quelles situations vous êtes confrontés à un manque de puissance CPU ? En l'ocurrence il s'agit plutôt de dispatcher des rendus d'images (pour une animation, x images seconde) sur plusieurs machines qui vont chacune calculer des séries d'images et les rapatrier sur le serveur.
Bien que ce soit moins courant, on utilise ce procédé aussi pour de l'image fixe haute résolution, qui est découpée en bandes qui seront calculées par diverses machines, avant d'être rapatriées pour assemblage.

Quels sont les différentes équipes concernées par ce problème ? Qu'entends-tu par là ?

guesswhat

20/11/2006, 10h02

Salut Guesswhat et bienvenue parmi nous.

Est-ce que renderfarm c'est la meme chose que computefarm?C'est quoi computefarm ?* :D

Dans quelles situations vous êtes confrontés à un manque de puissance CPU ? En l'ocurrence il s'agit plutôt de dispatcher des rendus d'images (pour une animation, x images seconde) sur plusieurs machines qui vont chacune calculer des séries d'images et les rapatrier sur le serveur.
Bien que ce soit moins courant, on utilise ce procédé aussi pour de l'image fixe haute résolution, qui est découpée en bandes qui seront calculées par diverses machines, avant d'être rapatriées pour assemblage.

Quels sont les différentes équipes concernées par ce problème ? Qu'entends-tu par là ?

Salut sir Gong,

Merci d'avoir pris le temps pour ces explications. Une computefarm c'est un ensemble de machines sur lesquelles on diribue un certains nombre de jobs pour le calcul. Un outil de workload management les distribue de manière complètement transparente pour l'utilisateur en choisissant la machine dispo la + appropriée à la taille du job. ça permet ainsi d'utiliser toutes les machines de façon équilibrée. Donc d'après ce que tu me dis une rederfarm c'est à peu près la meme chose qu'une computefarm

Quand je parlais d'équipes c'était pou savoir à qui je dois m'adresser dans une société d'effets spéciaux, animation... est ce le directeur info, le responsable R&D... A qui ça fait le plus mal le manque de CPU?;-)

Merci

Guesswhat

Sir Gong

20/11/2006, 11h04

Ok,
pour la dernière question je ne sais pas trop, la plupart des pros ici sont soit free-lance, soit dans des petites structures (pour ce que j'en sais) qui ont pour les mieux pourvus des petites renderfarms intégrées, ou qui font appel à la communauté pour du calcul en réseau sur des coups ponctuels.
Attention, je ne parle que du petit milieu français travaillant sur C4D ce qui ne concerne pas beaucoup de monde :wink:

Le type de prestation que tu souhaites développer s'adresserait plutôt à de grosses structures, mais ces entités sont souvent équipées en interne. Reste à voir si elles souhaiteraient externaliser cette phase du travail...

guesswhat

20/11/2006, 14h39

Ok,
pour la dernière question je ne sais pas trop, la plupart des pros ici sont soit free-lance, soit dans des petites structures (pour ce que j'en sais) qui ont pour les mieux pourvus des petites renderfarms intégrées, ou qui font appel à la communauté pour du calcul en réseau sur des coups ponctuels.
Attention, je ne parle que du petit milieu français travaillant sur C4D ce qui ne concerne pas beaucoup de monde* :wink:

Le type de prestation que tu souhaites développer s'adresserait plutôt à de grosses structures, mais ces entités sont souvent équipées en interne. Reste à voir si elles souhaiteraient externaliser cette phase du travail...

Oui en effet, nos solutions s'adressent à des grosses structures qui utilisent beaucoup de machines pour des calculs très lours et très longs.
On travaille déjà avec Deamworks par exemple. Tu sais qui sont leurs concurents ?

Merci de ton aide

yannminh

20/11/2006, 15h06

http://www.sparx.com/sparx_anim/index.php

http://www.duboi.com/

http://www.mikrosimage.fr/

http://www.buf.com/main.php

http://www.macguff.fr/

http://www.yannminh.com/

Yann, Renderfarmer... ;-)

Sir Gong

20/11/2006, 15h13

http://www.yannminh.com/

:D

guesswhat

20/11/2006, 16h44

Merci pour votre aide. J'avais déjà commencé à travailler sur qq uns de ces comptes ...
Merci à vous 2

guesswhat

21/11/2006, 11h44

Salut à tous,

J'ai trouvé ça sur le net à propos des renderfarm

"""""""""" 3) De quoi avez-vous besoin pour assembler votre renderfarm ?

D'une application 3D compatible bien sûr, et d'au moins deux PCs en réseau TCP/IP (Gigabit Ethernet si possible). Plus il y a de noeuds, mieux c'est. Cela dit, la plupart des logiciels sont fournis avec un nombre limité de licences de rendu (souvent n=5). Vous devrez donc acquérir des packs de noeuds de rendu optionnels si vous voulez utiliser plus de 'n' ordinateurs simultanément. ...""""""""

Est-ce vrai pour tous les les logiciels ?
ça veut dire quoi "des packs de noeuds de rendu optionnels"

QQ'1 peut-il m'aider?

merci

Sir Gong

21/11/2006, 12h20

Alors concernant C4d, toujours, mais j'imagine que c'est semblable pour les autres softs 3d :

Le rendu en réseau nécessite le module netrender qui comporte un serveur et, selon la licence pour laquelle on a opté, 3 clients (pour le NetRender de base) ou bien clients illimités (pour le Studio Bundle). Le client est gratuit, ce que l'on paye est la possibilité pour le serveur d'en gérer 3 ou plus.
Donc ça, ça concerne un utilisateur X qui souhaite dispatcher en local ou à distance auprès de 3 ou N clients distincts.

Si l'utilisateur fait appel à une renderfarm, il a simplement besoin d'un client (gratuit).
C'est le render fermier qui a besoin d'une licence (illimitée, puisque + de 3 machines) de netrender.
Le client uploade ses fichiers, le fermier est le serveur, avec ses machines en client.

Par ailleurs, je pense que "Pack de Nœuds" c'est du jargon de tête de nœud pour "client/serveur" :mrgreen:

yannminh

21/11/2006, 16h26

Toutafé...

C'est une traduction littérale du jargon anglo-saxon sur le sujet...

Certaines sociétés ont trouvé la poule aux oeufs d'or, et tarifient leurs softs de distribution de calcul en fonction du nombre de "noeuds", c'est à dire du nombre de machines surlesquelles les calculs sont répartis... comme celle ci qui a développé un plug de rendu en réseau spécifique pour C4D et d'autres softs

http://software.franticfilms.com/index.aspx?page=deadline/purchase

Sinon, quelques exemples de renderfarms...

http://www.renderking.com/ (la renderfarm Maya et C4d la moins chère de la planète que je connaisse)

http://www.rebusfarm.com/

http://www.respower.com/index.php

http://www.rendercore.com/

Des modules de calculs pour renderfarms pour celui qui veut se monter une renderfarm en kit
http://www.apyweb.com/renderfarm.htm

Sinon, j'avais reçu une pub mail pour une boîte française qui fournissait du calcul en réseau pour de la 3D et pour After... mais je n'arrive plus à trouver ses coordonnées... quelqu'un les aurait ?

Yann, NooFarmer...

yannminh

21/11/2006, 16h33

M'arrive un truc Zarb...

Y 'a plus net render de base dans la 10 ou j'ai zappé une installation spécifique ?

Yann, rendu pas net...

Sir Gong

21/11/2006, 16h55

Sur le Studio bundle, net render a son propre installeur, je ne sais pas si ça t'aide :D

guesswhat

22/11/2006, 11h50

Salut à tous,

Donc si je comprends bien, pour les petits studios qui n'ont pas le budget pour investir dans leur propres renderfarm (car peut être besoins ponctuels) externalisent cette activité vers des sociétés dont c'est le métier principal voire unique ?

J'ai parlé hier avec apyweb, qui m'ont expliqué que la majorité des applications dans ce secteur ont déjà leur propre workload management. Qu'il est quasi impossible qu'une machine reste en sous exploitation quand d'autres sont à saturation. Vous confirmez? Car c'est exactement cette problèmatique que résolvent nos solutions.

Elles permettent aussi de scheduler les jobs (je ne sais pas si ce terme est aussi utilisé dans votre milieu). ça permet donc de garantir la dispo des ressources. On peut parametrer les dispo des ressources par projet, utilisateur, date,..... Est-ce que ça a un intérêt pour vos métiers? On peut aussi mettre des niveau de priorité.

Et si l'appli le permet on propose aussi une fonction qui s'appelle check point restart qui permet en cas d'arrêt intempestif du job de reprendre là où il s'est arrêté et pas depuis le début.

A votre avis, à partir de quelle taille de la renderfarm (nombre de CPU) que ça commence à devenir critique d'optimiser et de scheduler?

Encore une fois merci de votre aide