X-Trader.net - El Foro de los Traders

Hola compañeros os propongo un tema al que le llevo dando vueltas un tiempito, pero antes os cuento un sistema en el que tengo puestas todas mis esperanzas, lo vamos a llamar "El sastre del mercado" porque básicamente es capaz de hacer un traje a medida de cualquier indice, acción, lo que sea, con los parámetros adecuados te dibuja una curva de beneficios desde 2006 impresionante y con DD bastante pequeños, pero...... siempre hay un pero, realmente es un sistema sobreoptimizado con muchas variables. Supongamos que tenemos 3 niveles de apretar el traje a medida en un nivel 1 el más básico tenemos las siguientes variables:

Nivel 1:24 variables de entrada

Nivel 2: se aprieta un poco más hablamos de unas 32 variables,.

Nivel3: tiene unas 64 variables da la curva casi perfecta, si metemos stop de por medio (96 variables en total).

Todo lo anterior lo discretizamos en rangos de volatilidad que cuanto más estrecho mejor sale el traje a medida, normalmente con 5 o 6 tramos de vola está bastante bien y tenemos muestra para optimizar las variables.

A lo que quiero llegar es que si lo MEGASOBREOPTIMIZO la curva de beneficios me aguanta en el outofsample un tiempo, digamos 2 semanas más o menos, y uno de las premisas que tengo es que el sistema debe de RETROALIMENTARSE cada vez que la rueda empieza de nuevo. El problema es que se tarda un día y medio más o menos en retroalimentar al sistema (en un tramo de vola, que sería el que tengamos actualmente) es decir se optimiza teniendo en cuenta los últimos datos del outofsample por si las cosas cambian, en este sistema 1 tick es muyyyyy importante, Todas las pruebas insample y out me salen buenas, y cuando lo dejo y la caga casi siempre encuentro un fallo humano de por medio en la fase de optimización de las variables bien por dejadez o por error puro y duro.
El otro día mirando por la web encontré cosas que parece que están a punto de llegar a los hogares de las personas y se trata de sistemas de Inteligencia artificial aplicado al hogar, trabajo etc, lo que yo me pregunto es si esos sofwares que están por llegar sería capaces de:
1.- encender el ordenador cuando se le diga o trabajar mientras duermo.
2.- Abrir el Ninja.
3.- Conectarlo al proveedor de datos.
4.- optimizar las variables del sistema en el rango de vola que toque, introduciendo los nuevos datos de la sesión de AYER .
5.- Tenerlo todo preparado para el comienzo de la sesión.
6.- si es posible hacer el café.

Lo digo porque estoy quemao de optimizar, porque como tengo 5 sistemas no paro, y sería de gran ayuda un caharrito de esos.
En serio, creo que hay un Axioma en esto de los sistemas, que yo tengo mis dudas de que lo sea, se dice que la sobreoptimización, hay que evitarla, que sean cosas sencillas, etc, etc etc, que los sistemas petan al poco tiempo por estar sobreoptimizados, etc y yo creo que, si a un sistema se le retroalimenta, cuando 1 sóla cosa haya cambiado, aguanta unos días, pero si se hace siempre, aguanta casi siempre (o no eso nunca se sabe) y tengo la esperanza de que habrá que dar un pasito más hacia delante e intentar introducir los expertos artificiales esos que están por llegar.
Lo que me gustaría saber, es que si alguien que entienda de IA ,me diga que si es posible que se pueda hacer lo que propongo, eso sí instruyendo antes a la maquinita sobre todo en lo referente al café y más cosas que se me ocurren y no debo de comentar .
Saludos y a por el futuro (no del dax) sino el general

he visto maquinas durante horas que tenian que hacer un proceso o ciclo repetitivo que fallaban bastante después de tanto tiempo de trabajo. Estoy seguro que algún día se podrá hacer pero, por ahora yo no dejaría el dinero en manos de un robot que con que se produzca un fallo puede mandarlo todo a la mi... si nos equivocamos con el dinero que seamos nosotros así nos divertimos más

Bueeno, bueno, más cositas complicadas (es lo que nos gusta, ¿verdad?).

baltic46 escribió:a por el futuro (no del dax) sino el general

Este es practicamente mi lema de vida

baltic46 escribió:El otro día mirando por la web encontré cosas que parece que están a punto de llegar a los hogares de las personas y se trata de sistemas de Inteligencia artificial aplicado al hogar, trabajo etc, lo que yo me pregunto es si esos sofwares que están por llegar sería capaces de:
1.- encender el ordenador cuando se le diga o trabajar mientras duermo.
2.- Abrir el Ninja.
3.- Conectarlo al proveedor de datos.
4.- optimizar las variables del sistema en el rango de vola que toque, introduciendo los nuevos datos de la sesión de AYER .
5.- Tenerlo todo preparado para el comienzo de la sesión.
6.- si es posible hacer el café.

Lo digo porque estoy quemao de optimizar, porque como tengo 5 sistemas no paro, y sería de gran ayuda un caharrito de esos.
En serio, creo que hay un Axioma en esto de los sistemas, que yo tengo mis dudas de que lo sea, se dice que la sobreoptimización, hay que evitarla, que sean cosas sencillas, etc, etc etc, que los sistemas petan al poco tiempo por estar sobreoptimizados, etc y yo creo que, si a un sistema se le retroalimenta, cuando 1 sóla cosa haya cambiado, aguanta unos días, pero si se hace siempre, aguanta casi siempre (o no eso nunca se sabe) y tengo la esperanza de que habrá que dar un pasito más hacia delante e intentar introducir los expertos artificiales esos que están por llegar.
Lo que me gustaría saber, es que si alguien que entienda de IA ,me diga que si es posible que se pueda hacer lo que propongo, eso sí instruyendo antes a la maquinita sobre todo en lo referente al café y más cosas que se me ocurren y no debo de comentar .

En la segunda mitad de los 80 (nada menos, y eso me delata un poco ) hice cositas de IA; ví cositas en LISP, y a partir de él sacaron y ya hice algún programita de aprendizaje, en PROLOG. Creo que sigue por ahí. Yo hablo del PROLOG de aquellos tiempos, que creo recordar, utilicé uno de Borland, la misma casa del Turbo Pascal (qué tiempos).

PROLOG te da una dimensión ampliada de la programación estructurada, orientada a la IA, para hacer Sistemas Expertos. En un ejemplo que venía, podías preguntarle al SE, en lenguaje natural, en inglés, y respondía. Recuerdo preguntarle "Wich is the highest mountain in USA?", y respondía: "McKinley".

Te digo una cosa; yo la impresión que tenía es que era un paso más sobre el Turbo Pascal.

Concretándote un poco más mi aportación:

Los puntos 1 a 3, y el 5, los consigues sin necesidad de IA. Entre Wake up on LAN y cosas parecidas, y robots de manejo de aplis, no hace falta IA para eso. Otra cosa sería un "otro yo" que se ponga al ordenador a continuar nuestro trabajo, no sé si es eso lo que dices que está por venir.

Para el 4, puede no hacer falta IA, quizá a base de macros en Excel p. ej., si el proceso con la info es muy algorítmico y es conocido. Si no es conocido, ahí sí puede entrar la IA. ATENCIÓN: La IA entra cuando no sabemos el algoritmo, cuando buscamos algo fascinante llamado "propiedades emergentes", a partir de un sistema base. En aquellos tiempos esto fue un gran proyecto mental mío que tuve que abandonar por varias razones.

Dos cosas más, espero no aburrir:

* Durante todos estos años me he preguntado porqué no hemos visto "cosas enormes" en cuanto a IA, con el potencial que yo ví nada más que en un entorno de programación orientado al mercado residencial vamos a decir. Se admiten respuestas.

* El EA contratendencial del que el otro día puse un gráfico de una sesión, en el hilo donde discutimos la FDAX-St, que sacaba el jugo a la sesión de forma impresionante, tiene una fuerte componente de IA; su comportamiento surge como una propiedad emergente a partir de una base que yo he programado. Lo que luego hace, no tengo conciencia de haberlo programado yo. Por eso, cuando clava sesiones como la que puse, y yo lo veía hacer los giros en tiempo real: fli-pa-ba. Me decía "¿porqué habrá tomado la decisión de girar?", "¡¿pero esto lo he programado yo?!". Las propiedades emergentes...


Si alguien aporta la actualidad en cuanto a entornos IA, estaría fenomenal.

¡Ah!, el punto 6. En cuanto tengas IA en un cacharro humanoide. Ya existe. Pero el paquete de datos que yo preferiría prioritariamente es el de "Tareas del hogar y limpieza de casa", lo deseo

La verdad es que si es algo determinista, es decir, que tomas unos datos de entrada y haciendo siempre las mismas operaciones obtienes una salida, no es IA. Pero creo que si es algo tan "sencillo" alguien lo habrá probado.

La IA a avanzado mucho en muchos campos lo que pasa es que el concepto de IA también a ido cambiando. Lo que hace 10 años nos parecería IA, ahora no lo es. Estoy seguro que grandes empresas de bolsa usan IA para sus operaciones. Si tienes que jugarte mucho dinero merece la pena invertir parte en I+D y para eso además de programación se necesitan matemáticos, que al fin y al cabo la mayor parte de la IA(no toda) se basa en estadística.

Yo vengo del mundo de la informática y me estoy aficionando a esto de los valores. Y lo primero que pensé era en hacer un programa que me avisara de cambios súbitos en ciertos valores y me tope con un gran problema. No encontré manera de sacar a tiempo real de los valores de la bolsa. Para el mercado continuo van con media hora de retraso. Algo que no pasa con la de estados unidos que se actualiza al minuto más o menos.

Supongo que habrá alguna compañía que pagando de acceso a una API para poder acceder a los datos en tiempo real, pero no lo encontré.

En cualquier caso. Si estas interesado en hacer algún programita que te automatice calculos puedes contactar conmigo y vemos que podemos hacer.

Un Saludo

Wikmar escribió: Concretándote un poco más mi aportación:

Los puntos 1 a 3, y el 5, los consigues sin necesidad de IA. Entre Wake up on LAN y cosas parecidas, y robots de manejo de aplis, no hace falta IA para eso. Otra cosa sería un "otro yo" que se ponga al ordenador a continuar nuestro trabajo, no sé si es eso lo que dices que está por venir.

Para el 4, puede no hacer falta IA, quizá a base de macros en Excel p. ej., si el proceso con la info es muy algorítmico y es conocido. Si no es conocido, ahí sí puede entrar la IA. ATENCIÓN: La IA entra cuando no sabemos el algoritmo, cuando buscamos algo fascinante llamado "propiedades emergentes", a partir de un sistema base. En aquellos tiempos esto fue un gran proyecto mental mío que tuve que abandonar por varias razones.

El punto 4 es totalmente algorítmico, lo que desconozco son robots para el manejo de aplis si conocéis alguno (nombre para buscarlo en internet, a ser posible gratis ) sería fenomenal empezar por ahí. Respecto de las propiedades emergentes esas me quedo , que un EA en trading haga cosas no previstas da muchísima emoción pero un miedillo importante también, desconozco por completo el tema así que escucho, algo leí de que había ya un paquete de IA para la familia y por 200 y pico euros tenias una especie de cubo tipo Apple en casa, lo que no se si aprende lo que tu le enseñes o no.
Saludos

jeje... hombre, casi que el punto más factible es el 4, el resto habrá que esperar un poco, aunque seguro que llega, como en "Yo, Robot" ...
Sobre el 4, Yo no soy experto pero me gustan los temas de IA, más bien autodidacta. Yo veo cuatro ramas (por llamarlo así ), que se podrían aplicar para construir cosas así en el mundo del trading, porque lo que entiendo que quieres saber es "si estoy en un rango de volatilidad X, ¿Qué combinación de variables sería mejor utilizar?", ¿no?...

Tenemos lógica difusa, sistemas expertos, redes neuronales (con todos los tipos de estructuras y métodos de aprendizaje que existen) y/o algoritmos genéticos. Normalmente una solución supone combinar dos o más de estos algoritmos...

Casi que si lo que quieres es lo que te decia arriba, resumiendo mucho, podría ser un sistema experto. Normalmente un SE se basa en construir reglas en plan de "Si se da tal caso => haz esto" ( por ejemplo, si la volatilidad está entre 1 y 5 la variable X1 será 4, la X2 será 3; si la volatilidad está entre 6 y 10, la variable X1 será 7, etc... ). Esto suponiendo que ya conoces esas reglas, es decir que sabes qué valores quieres para cada valor de la volatilidad...

Pero si lo que quieres es precisamente encontrar esas reglas, es decir dada la volatilidad, saber que combinación de variables aplicar, podrían entrar en juego los algoritmos genéticos. A grandes rasgos sería tener por ejemplo 500 "copias" de tu sistema, ejecutarlas con combinaciones de variables distintas (al azar) en el mismo periodo que sepas que la volatilidad está en el rango X, una vez terminada las ejecución, los evaluas ( pongamos que para ti un sistema es mejor que otro simplemente por que la equity final es mayor), pues te quedas con los 250 mejores, recombinas las variables de estos mezclando los valores de un sistema con los de otros, generando por tanto 250 sistemas "hijos". Pongamos que ahora tienes estos 250 sistemas ( o combinaciones de variables nuevas ) + los 250 anteriores que han servido para crear estos... repites la simulación, vuelves a descartar la mitad peor, recombinas generando nuevos y así sucesivamente hasta que obtienes unos valores que te parezcan aceptables ( por ejemplo que aparezca un sistema que para la volatilidad X acabe con una equity el doble que la inicial ), y esa sería la combinación de variables adecuada para esa volatilidad...

En la plataforma de Dukas si no recuerdo mal se puede hacer algo parecido a esto de los algo geneticos en su historical tester, con la opción de optimización, aunque con tantas variables se te eternizará supongo...

En fin que esto es un mundo y se puede complicar todo lo que quieras, creo que esto sería lo más fácil... y esto sólo para el punto 4 imaginate para el café jejeje

El otro día mirando por la web encontré cosas que parece que están a punto de llegar a los hogares de las personas y se trata de sistemas de Inteligencia artificial aplicado al hogar, trabajo etc, lo que yo me pregunto es si esos sofwares que están por llegar sería capaces de:
1.- encender el ordenador cuando se le diga o trabajar mientras duermo.
2.- Abrir el Ninja.
3.- Conectarlo al proveedor de datos.
4.- optimizar las variables del sistema en el rango de vola que toque, introduciendo los nuevos datos de la sesión de AYER .
5.- Tenerlo todo preparado para el comienzo de la sesión.
6.- si es posible hacer el café.
-----------------------------------------------------------------------------------------------------------------------------

Solo apuntar, de que el ordenador se encienda a X hora. ya lo hacia yo hace 10 años diciendoselo a la Bios.
Respecto a a abrir Ninja, proveedor de datos y todo lo demás, hace 10 años ya había programas como AUTOMATE, ( que yo usaba ) que le dabas las directrices y lo hacía todo solito, grabando macros. o movimientos de ratón incluido.. si tu nivel de informática era pequeño.


Saludos

Wikmar escribió: * Durante todos estos años me he preguntado porqué no hemos visto "cosas enormes" en cuanto a IA, con el potencial que yo ví nada más que en un entorno de programación orientado al mercado residencial vamos a decir. Se admiten respuestas.

Hombre, avanzar, avanza, lo que pasa que de momento tampoco es tan espectacular como en las pelis, pero porque te lo van dando poco a poco y no te das cuenta... Pero seguramente en tu movil lleves ciertas aplicaciones que suponen cierto grado de IA, como recomendadores de música en función de tus gustos o los de tus amigos ( a lo mejor esto ya se considera básico, pero su momento era lo último )... Aplicaciones en plan Siri (igual también básico, pero seguro que algo de IA lleva). Aplicaciones que aprenden de qué haces con el móvil para cambiar su comportamiento, etc... eso en plan básico, que igual podríamos incluso pensar que no es IA, pero por ejemplo, tienes los google maps ( seguro que su forma de sugerir caminos tiene componentes de IA ), tienes traductores. Tienes trenes de metro sin conductor, coches que conducen sólos que llegaran en un momento u otro, predicciones meteorológicas, etc... videojuegos ( aunque sean juegos la IA es asombrosa en muchos de ellos... ). Hay juegos de carreras en las que los oponentes son entrenados con algoritmos geneticos para presentar distintod grados de dificultad, o para que jueguen cada uno de forma distinta. Hay juegos que aprenden de como juegas tú para adaptarse a tus "estrategías", etc... seguro que ahora me dejo muchos ejemplos... hay infinidad de cosas... Por ejemplo el sistema "Watson" de ibm de hace unos años... sistemas de visión artificial para distinguir objetos o personas en video o imágenes... Hay robots que sirven de asistentes en aeropuertos, museos, etc...

Y eso en plan "consumo" porque en plan industrial o militar habrá muchos ejemplos que ni imaginamos ( sistemas de detección de fraude por ejemplo, sistemas de calidad, sistemas de clasificación, incluso para filtrar señales de radio por ejemplo y hacer la transmisión más efectiva, sistemas de diseño ( por ejemplo leí hace mucho, antenas diseñadas por algoritmos geneticos que eran más eficientes, o no sé que teatro ( sidney) diseñado con la ayuda de algos geneticos para conseguir un sonoridad ( ahora no me sale la palabra ) como en ningún otro sitio... Por ejemplo para diseñar la mejor aerodinamica posible para un F1, ¿usarán IA?, pues casi seguro que algo tendrán a estás alturas, etc...

Habrá muchisimas más cosas, pero bueno... Seguramente muchas de ellas se podría poner en duda si es IA o no, pero dices ¿Un simple algo genetico es IA o es sólo un algortimo como otro cualquiera que se puede aplicar a soluciones de IA?... HAce unas semanas leí sobre un sistema en "la nube" en la que varios robots, suben sus conocimientos, sus "experiencias", de forma que otros robots pueden usarlos y aprender de las expericias de otros y se van retroalimentando en plan cuando me haga falta yo aprendo a distinguir una manzana de una pera usando datos que subió un robot de japón y este robot aprenderá a conducir un coche usando lo que aprendí yo en un momento... (este ejemplo en inventado, pero algo así)

Bien parece que existían Aplis desde hace años, pongamos por ejemplo que a las 22:15 se le dice a la apli que de lunes a viernes haga lo siguiente, tenemos Ninja abierto y conectado con los nuevos datos a retroalimentar y queremos que nos recalcule el óptimo de una serie de variables, pongamos que 10, le decimos a la apli, primero coges la Variable1 de la estrategia X, la optimizas a max PF o lo que sea para valores entre 0 y 200 de 10 en 10 y desde 2006 hasta hoy, cuanto tengas el óptimo lo haces de 1 en 1 entre ese óptimo y +-10 y tenemos optimizada la variable 1, sustituyes el valor de esa variable en el código del EA, y vamos a por la segunda variable, hasta que termina las que le pidamos, que compile, si es posible que haga lo mismo en otros EAS mejor, existe hoy algo que haga eso? a ser posible que no requiera grandes conocimientos de programación, el que se usa hoy como se llama?
Quizás la IA la veo a la hora de elegir el óptimo y que detecte los "picos óptimos" con el precipicio cerquita de esos que normalmente se rechazan y se buscan colinas un poco planas arriba (vamos que si te vas de camping a la cima no te mates a la primera pesadilla que tengas )
Saludos Gracias

aqui esta el enlace del producto de IA para el hogar que está apunto de llegar.

mascara escribió:...HAce unas semanas leí sobre un sistema en "la nube" en la que varios robots, suben sus conocimientos, sus "experiencias", de forma que otros robots pueden usarlos y aprender de las expericias de otros y se van retroalimentando en plan cuando me haga falta yo aprendo a distinguir una manzana de una pera usando datos que subió un robot de japón y este robot aprenderá a conducir un coche usando lo que aprendí yo en un momento... (este ejemplo en inventado, pero algo así)

Esto último es de lo que más huele a IA en todo lo que comentas. Yo me refería y preguntaba porqué todavía no tenemos en casa a HAL (el de la peli 2001), cuando hace 25 años que yo ví que con trabajo se podía hacer realidad ya en aquel momento. Evidentemente puedo estar equivocado, pero sigo convencido desde un punto de vista técnico.

El PROLOG de Borland, por supuesto se llamaba Turbo Prolog (lo de Turbo era casi marca de la casa Borland).

Si solo era cuestión de trabajo, alguien tenía esto a mano SEGURO.

baltic46 escribió:Bien parece que existían Aplis desde hace años, pongamos por ejemplo que a las 22:15 se le dice a la apli que de lunes a viernes haga lo siguiente, tenemos Ninja abierto y conectado con los nuevos datos a retroalimentar y queremos que nos recalcule el óptimo de una serie de variables, pongamos que 10, le decimos a la apli, primero coges la Variable1 de la estrategia X, la optimizas a max PF o lo que sea para valores entre 0 y 200 de 10 en 10 y desde 2006 hasta hoy, cuanto tengas el óptimo lo haces de 1 en 1 entre ese óptimo y +-10 y tenemos optimizada la variable 1, sustituyes el valor de esa variable en el código del EA, y vamos a por la segunda variable, hasta que termina las que le pidamos, que compile, si es posible que haga lo mismo en otros EAS mejor, existe hoy algo que haga eso? a ser posible que no requiera grandes conocimientos de programación, el que se usa hoy como se llama?
Quizás la IA la veo a la hora de elegir el óptimo y que detecte los "picos óptimos" con el precipicio cerquita de esos que normalmente se rechazan y se buscan colinas un poco planas arriba (vamos que si te vas de camping a la cima no te mates a la primera pesadilla que tengas )
Saludos Gracias

Sí, creo que debes / debemos (porque nos viene bien a todos) diferenciar procesos, ya que todavía (parece) no tenemos el robot "OtroYo" que se ponga al PC y continúe mientras dormimos un rato.

Por un lado, A) atomatización de tareas en aplis, y por otro; B) procesos tirando a IA para que los robots nos sustituyan buscando buenas soluciones.


B) He visto lo de EmoSPARK. De momento no me termino de hacer idea par mí suficientemente concreta de lo que es y lo que va a permitir. Estaremos atentos, ¿no?.


A) Aplis de automatización hay desde los años 80 (yo era muy jovencito ahí, ¿eh?). Recuerdo una llamada SmartKeys.

Vamos a ver. Un pasito más allá de lo que es automatizar las pulsaciones de teclas o clics de ratón, es que el robot pueda discernir y buscar un poquito entre lo que vea en la ventana de una apli en la que tenga que interactuar.

En este sentido, hace unos meses, me comuniqué con el compañero SpeakerTrading, y le planteé lo siguiente (estoy convencido de que no solo no tiene inconveniente en que publique parte de nuestra conversación, sino que se alegra por el progreso de todos).

Tengo una necesidad, y quería saber si conoces alguna apli que me la solucione. Tengo cuenta en FxFlat (CFDs), querría que mis sistemas en Visual Chart lanzaran operaciones en este intermediario (en realidad es un creador de mercado).

Ya sabemos que no está contemplado como "broker" en VC, entonces, la idea que se me ocurre es si hubiera por ahí alguna apli, dll, etc. (enlazable desde Visual Basic) que sea capaz de sustituir al humano en la tarea de interactuar con los interfaces de FxFlat (bien con su plataforma, bien a través de web), de forma que los sistemas lanzan la orden, y este agente, como haría el humano, dá a los botones de interfaz que correspondan para lanzar la operación.

Me dió unas cuantas ideas para desarrollar algo. Aun así, por ahorrar esfuerzo y aprovechar lo que ya haya hecho, le pregunté:

Respecto a los programas que debe haber por ahí, que hacen todo esto. ¿Sabes nombres?. ¿Qué meterías en Google para buscarlos?.

Y me dió la siguiente ayuda, que tengo pendiente trabajar:

Programas hay muchos: AutoIt, AutoHotKey... busca "windows automation tools", "Keyboard Mouse Automation macro", "scripting windows automation" o cosas por el estilo. Para lo que necesitas, lo ideal seria que soporte algún tipo de comunicación con programas, tipo plugin.

No sé si os habéis hecho idea de lo que yo estaba / estoy buscando: que una plataforma no contempla un intermediario; pues hacemos que SÍ tenga ese intermediario. Que un intermediario o creador de mercado (CFDS p. ej.) no tiene más forma de meterle órdenes que la interacción desde SU interfaz; pues atacamos ese interfaz desde el software que nos dé la gana. ¿Interesante, no?.

Si alguien progresa, porfa, que comparta.

Hablando de inteligencia artifial... Han nombrado a uno de estos programitas miembro de una junta directiva... Dentro de nada serán nuestros jefes!!
http://www.meneame.net/story/inteligenc ... ctiva-deep

Se acerca el día en que esto este al alcance de todos